MySQL分库分表同步至Hologres（方案2.0）
您需要将数据库添加至DataWorks上，以便在同步任务配置时，可通过选择数据源名称来控制同步读取和写入的数据库。本实践中创建的数据源名为 doc_mysql1，详情请参见 配置MySQL数据源、配置Hologres数据源。说明 数据源相关能力介绍详情请...
异构数据源访问
若您需要通过 AnalyticDB PostgreSQL版 访问外部异构数据源（HDFS、Hive和JDBC）时，可以使用异构数据源访问功能将外部数据转换为 AnalyticDB PostgreSQL版 数据库优化后的格式进行查询和分析。功能说明 外部数据源管理提供高性能的结构化...
UntagResources
返回数据 名称 类型 示例值 描述 RequestId String 2D69A58F-345C-4FDE-88E4-BF5189*请求ID。示例 请求示例 http(s):/polardb.aliyuncs.com/?Action=UntagResources &RegionId=cn-hangzhou &ResourceType=cluster &All=true &ResourceId=[...
新建数据库网关
有如下两种添加数据库的场景：在新建网关时直接添加数据库。在 数据库信息 页面添加数据库。添加数据库时需要配置如下信息：数据库信息 描述 数据库网关 选择目标数据库网关。数据库类型 选择目标数据库类型。主机 本地内网地址，即通过...
错误代码
产生TDDL-4203错误表示SQL语句扫描了多个分库的数据并且执行时间超过900秒，建议进行如下优化：尽量在WHERE条件中添加分库键（Sharding key）条件，将SQL语句优化成单库执行。检查是否可以在后端RDS MySQL上创建适合的索引，提升扫描各个分...
RDS SQL Server间的同步
如为增量同步任务，DTS要求源数据库的数据日志保存24小时以上，如为全量同步和增量同步任务，DTS要求源数据库的数据日志至少保留7天以上（您可在全量同步完成后将数据日志保存时间设置为24小时以上），否则DTS可能因无法获取数据日志而导致...
采集部署
2.启动 Unix系统，在collector目录下执行：`./run.sh` Windows系统，在collector目录下执行：`start/b java-jar javaagent-collector.jar` 验证：查看collector/logs/collector.log日志，显示启动成功即部署成功。如有报错，请参见 应用...
个人隐私保护
全密态数据库可以用于个人隐私保护，防止用户隐私泄露，本文介绍将全密态数据库用于个人隐私保护的最佳实践。场景介绍 以某保险公司业务场景为例，保险公司投保人员信息表（person）如下，记录了用户隐私数据，现需对这些隐私数据进行加密...
个人隐私保护
全密态数据库可以用于个人隐私保护，防止用户隐私泄露，本文介绍将全密态数据库用于个人隐私保护的最佳实践。场景介绍 以某保险公司业务场景为例，保险公司投保人员信息表（person）如下，记录了用户隐私数据，现需对这些隐私数据进行加密...
个人隐私保护
全密态数据库可以用于个人隐私保护，防止用户隐私泄露，本文介绍将全密态数据库用于个人隐私保护的最佳实践。场景介绍 以某保险公司业务场景为例，保险公司投保人员信息表（person）如下，记录了用户隐私数据，现需对这些隐私数据进行加密...
表删除，更新和合并
在这个部分：写入Delta表时的重复数据删除 缓慢将数据（SCD）类型2操作更改为Delta表 将更改数据写入Delta表 使用Upsert 从流式处理查询foreachBatch 写入Delta表时的重复数据删除 一个常见的ETL用例是通过将日志附加到表中来将日志收集到...
日志报表
注意事项 由于相同地区的 PolarDB-X 数据库的审计日志均写入日志服务同一个Logstore中，查看当前 PolarDB-X 实例下的报表数据时，默认为您添加基于_topic_:polardbx_sqlaudit and instance_id:xxxxxxxxx 的过滤条件，表示查看当前实例下的...
CreateMyBase-CreateMyBase
删除错误码：400 2023-08-11 OpenAPI 错误码发生变更、OpenAPI 入参发生变更、OpenAPI 返回结构发生变更 看变更集 变更项 变更内容 错误码 OpenAPI 错误码发生变更。删除错误码：400 入参 OpenAPI 入参发生变更。新增入参：EcsHostName ...
PolarPlus
下载客户端 PolarPlus 提供压缩包免安装下载，解压后即可使用，其目录结构如下所示：polarplus├─bin├─etc│└─sysconfig├─help└─lib 其中二进制都在bin目录下，如果需要，请将其添加到系统PATH路径。bin├─polarplusLauncher.sh...
从RDS PPAS迁移至PolarDB PostgreSQL版（兼容Oracle）...
64GB polar.o.x8.xlarge 8核 64GB ppas.x4.2xlarge.2 16核 64GB polar.o.x8.2xlarge 16核 128GB ppas.x8.2xlarge.2 16核 128GB polar.o.x8.2xlarge 16核 128GB ppas.x4.4xlarge.2 32核 128GB polar.o.x8.4xlarge 32核 256GB ppas.x8.4...
日志报表
说明 由于相同地区的 PolarDB-X 1.0 数据库的审计日志均写入日志服务同一个Logstore中，查看当前 PolarDB-X 1.0 数据库的报表数据时，默认为您添加基于_topic_:drds_audit_log_实例 ID_数据库名 的过滤条件，表示查看当前数据库的数据。...
在EMR集群运行TPC-DS Benchmark
TPC-DS是大数据领域最为知名的Benchmark标准。...cp$MAVEN_HOME/conf/settings.xml~/.m2/在~/.m2/settings.xml文件中添加镜像信息，具体内容如下：<mirror><id>aliyun</id><mirrorOf>central</mirrorOf><name>Nexus aliyun</name><url>...
创建同步任务
本文为您介绍如何通过创建同步任务，导出MaxCompute中的数据至MySQL数据源中。前提条件 已通过RDS创建MySQL实例，获取RDS实例ID，并在RDS控制台添加白名单。详情请参见 快速创建RDS MySQL实例 和 添加白名单。说明 如果是通过自定义资源组...
支持的数据源
当前DBS支持如下三种方式添加数据源：手动添加数据源 批量添加数据源 自动添加数据源 DBS支持的数据源类型请参见下表。数据源类别 数据库类型 阿里云数据库 RDS MySQL RDS SQL Server RDS PostgreSQL RDS MariaDB PolarDB MySQL版 PolarDB ...
列存索引TPC-H测试
测试结果 以下结果的时间单位为：秒（s）查询 8c32g*2 8c32g*4 16c64g*2 16c64g*3 16c64g*4 16c64g*6 Q1 14.16 6.84 6.66 2.41 1.57 1.12 Q2 2.73 2.76 1.73 1.22 0.91 0.72 Q3 5.58 2.59 4.01 1.43 1.20 0.82 Q4 6.59 1.68 1.88 1.09 0.80...
DataHub数据源
DataHub数据源作为数据中枢，为您提供读取和写入DataHub数据库的双向通道，能够快速解决海量数据的计算问题。本文为您介绍DataWorks的DataHub数据同步的能力支持情况。支持的版本 DataHub Reader通过DataHub的Java SDK读取DataHub中的数据...
GetJobAttemptLog
调用GetJobAttemptLog，获取对应JobAttempt的日志。调试 您可以在OpenAPI Explorer中直接运行该接口，免去您计算签名的困扰。运行成功后，OpenAPI Explorer可以...bash/opt/tools/job-stop.sh\\\"'"} 错误码 访问 错误中心 查看更多错误码。
CreateDBCluster-创建集群
vsw-*CreationOption string 否 创建方式，取值范围如下：Normal：创建一个全新的 PolarDB 集群，控制台操作请参见如下文档：创建 PolarDB MySQL 版数据库集群 创建 PolarDB PostgreSQL 版数据库集群 创建 PolarDB PostgreSQL 版（兼容 ...
CreateMigrateTask-创建上云迁移任务
该接口用于将OSS上的备份文件还原到RDS SQL Server实例，...删除错误码：400 删除错误码：403 新增错误码：404 2022-10-28 OpenAPI 错误码发生变更 看变更集 变更项 变更内容 错误码 OpenAPI 错误码发生变更。错误码 400 变更 删除错误码：403
CreateMigrateTask-创建上云迁移任务
该接口用于将OSS上的备份文件还原到RDS SQL Server实例，...删除错误码：400 删除错误码：403 新增错误码：404 2022-10-28 OpenAPI 错误码发生变更 看变更集 变更项 变更内容 错误码 OpenAPI 错误码发生变更。错误码 400 变更 删除错误码：403
sh1106(OLED)
步骤2 app中添加sh1106组件 说明 helloworld_demo组件的package.yaml中添加 depends:sh1106:dev_aos#helloworld_demo中引入sh1106组件 步骤3 下载组件 在已安装了的开发环境工具栏中，选择Terminal->New Terminal启动终端，并且默认工作...
HBase增强版
在 添加数据源 弹出页添加数据源。关联后在LTS Web UI可以看到新关联的集群。说明 关联后可能需要等待1分钟左右生效。手动关联 使用场景 LTS与云数据库HBase增强版（Lindorm）在不同的VPC网络。操作步骤 登录LTS操作页面，在左侧导航栏选择...
操作流程
流程图 流程说明 操作 说明 添加数据 添加矢量数据 添加矢量类数据，具体操作，请参见 添加矢量数据。添加栅格数据 添加栅格类空间数据，具体操作，请参见 添加栅格数据。添加倾斜摄影数据 添加倾斜摄影类数据。具体操作，请参见 添加倾斜...
添加Lindorm宽表数据源
添加Lindorm SQL数据源 进入LTS操作页面，在左侧导航栏选择 数据源管理>添加数据源。在 添加数据源 页面设置相关参数。参数 说明 名称 自定义名称，支持字母与数字。数据源类型 选择 LQL。数据源参数 {"clusterKey":"x.hbaseue.rds....
RDS数据源
操作步骤 进入LTS页面，在左侧导航栏选择 数据源管理>添加数据源。在 添加数据源 页面设置相关参数。参数 说明 名称 自定义，支持字母与数字。数据源类型 选择 RDS 数据源参数 username：“root”，password：“xxxxx”，jdbcUrl：“jdbc:...
管理数据目录
添加数据目录 进入数据目录页面。登录 E-MapReduce控制台。在左侧导航栏，选择 EMR Serverless>Spark。在 Spark 页面，单击目标工作空间名称。在 EMR Serverless Spark 页面，单击左侧导航栏中的 数据目录。说明 数据目录页面为您展示了...
添加OSS数据源
在左侧导航栏中，选择 数据源管理>添加数据源。在 添加数据源 页面，配置以下参数。名称：输入数据源的名称。数据源类型：固定选择 OSS。数据源参数：代码如下。{"accessId":"xaccessId","accessKey":"xaccessKey","bucketName":"xbds-pro-...
修改组件数据
如果您的数据源为CSV文件、数据库等其他类型的数据，需要首先添加数据源，详情请参见 添加数据源。如果您需要使用数据源为API，直接在数据配置栏输入API即可。具体配置API数据源时，是否勾选 服务器代理请求 等操作，详情请参见 跨域数据...
添加DTS数据源
在左侧导航栏，选择 数据源管理>添加数据源。在 添加数据源 页面，配置以下参数。参数 说明 名称 自定义DTS数据源的名称。数据源类型 在下拉菜单中选择 DTS。数据源参数 通过数据传输服务DTS控制台获取数据源参数。单击目标DTS任务在 任务...
修改名单抽奖数据
如果您的数据源为CSV文件、数据库等其他类型的数据，需要首先添加数据源，详情请参见 添加数据源。如果您需要使用数据源为API，直接在数据配置栏输入API即可。具体配置API数据源时，是否勾选 服务器代理请求 等操作，详情请参见 跨域数据...
修改名单抽奖数据
如果您的数据源为CSV文件、数据库等其他类型的数据，需要首先添加数据源，详情请参见 添加数据源。如果您需要使用数据源为API，直接在数据配置栏输入API即可。具体配置API数据源时，是否勾选 服务器代理请求 等操作，详情请参见 跨域数据...
修改组件数据
如果您的数据源为CSV文件、数据库等其他类型的数据，需要首先添加数据源，详情请参见 添加数据源。如果您需要使用数据源为API，直接在数据配置栏输入API即可。具体配置API数据源时，是否勾选 服务器代理请求 等操作，详情请参见 跨域数据...
DTS订阅通道
在左侧导航栏选择 数据源管理>添加数据源。在 添加数据源 页面设置如下参数。参数 说明 名称 自定义DTS数据源的名称。数据源类型 选择 DTS。数据源参数 通过数据传输服务DTS控制台获取数据源参数。单击目标DTS任务在 任务管理 页面获取以下...
配置IBM DB2输出组件
同时您也可以单击 数据源 后的 新建，添加数据源，详情请参见 创建IBM DB2数据源。表 选择数据表。加载策略 系统支持选择 追加数据 策略。追加数据策略下，当指主键、约束冲突时，系统会提示脏数据错误。解析方案 非必选项，选择输出数据...
配置IBM DB2输出组件
同时您也可以单击 数据源 后的 新建，添加数据源，详情请参见 创建IBM DB2数据源。表 选择数据表。加载策略 系统支持选择 追加数据 策略。追加数据策略下，当指主键、约束冲突时，系统会提示脏数据错误。解析方案 非必选项，选择输出数据...
- 产品推荐
- 这些文档可能帮助您