输出数据
追加数据：主键/约束不冲突时，插入数据；主键/约束冲突时，则会报错。输出的数据写入新建的数据表中。说明 字段描述内不允许包含以下特殊符号:',;输出类型为数据集。输出的数据写入数据集中。点击确定后，数据集保存成功，您可以继续...
ALTER TABLE.ENABLE/DISABLE CONSTRAINT
默认情况下会检查当前表中的数据是否匹配目标约束，如果不匹配，则输出表中数据有冲突的错误。说明 如果是外键约束，并且与另一个表的主键约束或唯一性约束相对应，在启用外键约束前，需要检查当前外键约束关联的主键约束或唯一性约束是否...
RDS SQL Server同步至云原生数据仓库 AnalyticDB ...
警告 如您选择不使用源库的Schema名称，则源库多个Schema中不允许有名称相同的table，否则可能会导致数据不一致或任务失败。SQLServer增量同步模式 非堆表用日志解析增量同步，堆表用CDC增量同步：优点：支持源库堆表、无主键表、压缩表、...
使用DTS迁移单节点架构的自建MongoDB数据库上云
全量数据迁移 请勿手动结束迁移任务，否则可能会导致数据不完整。您只需等待迁移任务完成即可，迁移任务会自动结束。增量数据迁移 迁移任务不会自动结束，您需要手动结束迁移任务。说明 请选择合适的时间手动结束迁移任务，例如业务低峰期...
CREATE CQ
每当流表中有数据插入，如果符合预设的查询条件，则可以将该数据存储下来，作为实时计算的数据来源。本文介绍如何通过DML语句创建持续查询。语法 CREATE CQ cq_name INSERT INTO[catalog_name.][db_name.]table_name[column_list]select_...
HBase Shell使用介绍
通过Shell工具可以对云数据库HBase进行数据管理，包括建表、插入数据、删除数据和删除表等操作，本文介绍Shell的基本使用命令。访问配置 如果使用的是云数据库HBase标准版，基本环境的配置操作请参见 使用HBase Shell访问HBase标准版。如果...
使用DTS迁移副本集架构的自建MongoDB数据库上云
全量数据迁移 请勿手动结束迁移任务，否则可能会导致数据不完整。您只需等待迁移任务完成即可，迁移任务会自动结束。增量数据迁移 迁移任务不会自动结束，您需要手动结束迁移任务。说明 请选择合适的时间手动结束迁移任务，例如业务低峰期...
CREATE TABLE
如果插入或更新操作的任何行生成 FALSE 结果，则会引发错误异常，并且插入或更新不会变更数据库。指定为列约束的 CHECK 约束应当仅引用该列的值，而显示在表约束中的表达式可以引用多列。目前，CHECK 表达式不能包含子查询，也不能引用除当...
迁移时源库为Oracle的注意事项及限制
由于目标 PolarDB PostgreSQL版（兼容Oracle）集群不支持写入字符串的终止符（'\0'），若待迁移的数据中包含该终止符，DTS不会将该终止符写入到目标库，从而会导致数据不一致。源自建Oracle的CHECK约束迁移到目标 PolarDB PostgreSQL版...
调整实例sql_mode参数
在某些情况下，将自动递增列的默认值设置为0可能会导致数据不一致或错误的结果。例如：CREATE TABLE mytable(id INT AUTO_INCREMENT PRIMARY KEY,name VARCHAR(50));INSERT INTO mytable(id,name)VALUES(0,'John');如果 NO_AUTO_VALUE_ON_...
电子表格配置操作
如果弹出 此操作会影响附近数据集的数据，不允许进行此操作！您可以先将该内容拷贝到电子表格其他与区域，再进行上述操作。插入图表 在电子表格中您可以基于电子表格中的数据插入图表。电子表格目前支持线图、柱图、饼图、仪表盘、雷达图、...
迁移MongoDB实例至其他地域
如果选择屏蔽告警检查项，可能会导致数据不一致等问题，给业务带来风险。预检查通过后，单击 下一步。在 购买配置确认 页面，选择 链路规格，并勾选 数据传输（按量付费）服务条款。单击 立即购买并启动，迁移任务正式开始。查看迁移任务...
配置GoldenDB输出组件
如果不需要将某些字段输出，则您可以删除对应的字段。如果需要删除少量的字段，则可以单击 操作 列下的 图标，删除多余的字段。如果需要删除大批量字段，则可以单击 字段管理，在 字段管理 页面选择多个字段后，单击 图标，将 已选的输入...
存储格式
如果会频繁地一条或几条地插入数据、已有数据会被频繁的修改和删除，请考虑行存表。如果基本是大批量地导入数据，且已有数据很少被修改和删除，请考虑列存表。如果查询的投影列表或者条件语句中常常要求所有或者大部分列，或者表的行尺寸...
配置GoldenDB输出组件
如果不需要将某些字段输出，则您可以删除对应的字段。如果需要删除少量的字段，则可以单击 操作 列下的 图标，删除多余的字段。如果需要删除大批量字段，则可以单击 字段管理，在 字段管理 页面选择多个字段后，单击 图标，将 已选的输入...
数据导入性能优化
如果单条数据量过大达到数百KB，如高达512 KB，则建议修改此配置为16，保证单次导入量不超过8 MB，防止占用过多前端节点内存。优化 通道控制 数据同步性能与 任务期望最大并发数 配置项大小成正比，建议尽可能增加 任务期望最大并发数。...
配置Impala输出组件
如果不需要将某些字段输出，则您可以删除对应的字段。如果需要删除少量的字段，则可以单击 操作 列下的 图标，删除多余的字段。如果需要删除大批量字段，则可以单击 字段管理，在 字段管理 页面选择多个字段后，单击 图标，将 已选的输入...
数据导入性能优化
如果单条数据量过大达到数百KB，如高达512 KB，则建议修改此配置为16，保证单次导入量不超过8 MB，防止占用过多前端节点内存。优化 通道控制 数据同步性能与 任务期望最大并发数 配置项大小成正比，建议尽可能增加 任务期望最大并发数。...
INSERT INTO|OVERWRITE
如果目标表是静态分区，向某个分区插入数据时，分区列不允许出现在 select 子句中。from_statement：必填。from 子句，表示数据来源。例如，源表名称。zorder by[,<zcol_name>.]：可选。向表或分区写入数据时，支持根据指定的一列或多列...
迁移MongoDB实例至其他地域
如果选择屏蔽告警检查项，可能会导致数据不一致等问题，给业务带来风险。预检查通过后，单击 下一步。在 购买配置确认 页面，选择 链路规格，并勾选 数据传输（按量付费）服务条款。单击 立即购买并启动，迁移任务正式开始。查看迁移任务...
OpenSearch数据源
DataWorks数据集成支持使用OpenSearch Writer将数据...如果不忽略，则直接结束当前任务，并返回错误。建议使用默认值。否 false version OpenSearch的版本信息，例如"version":"v3。由于V2版本对于push操作的限制较多，建议使用V3版本。否 v2
设置列索引的排序键
每个行组中不同的列会各自打包形成列数据块，列数据块按照行存原始数据的主键次序并行构建，更新数据则按照追加次序写入，总体上是无序的。列存索引支持粗糙索引，每一个列数据块的元数据包含全部数据的最小值和最大值等信息。查询数据时，...
从MongoDB副本集实例迁移至分片集群实例
如果选择屏蔽告警检查项，可能会导致数据不一致等问题，给业务带来风险。预检查通过后，单击 下一步。在 购买配置确认 页面，选择 链路规格，并勾选 数据传输（按量付费）服务条款。单击 立即购买并启动，迁移任务正式开始。查看迁移任务...
数据库高级特性管理
取值如下：OFF：关闭（默认值）ON：开启 ansi_null_default 在插入数据时，如果指定的值为NULL，则该列是否接受NULL值。取值如下：OFF：关闭（默认值）ON：开启 ansi_padding 是否启用ANSI填充。启用后，如果插入的数据长度不足，则会使用...
配置Impala输出组件
如果不需要将某些字段输出，则您可以删除对应的字段。如果需要删除少量的字段，则可以单击 操作 列下的 图标，删除多余的字段。如果需要删除大批量字段，则可以单击 字段管理，在 字段管理 页面选择多个字段后，单击 图标，将 已选的输入...
RDS外部表
使用RDS数据源创建MaxCompute的外部表并加载数据 使用RDS数据源创建MaxCompute外部表的步骤如下：登录RDS数据库，执行建表语句并插入数据。操作详情请参见 通过DMS登录RDS数据库。建表示例如下：CREATE TABLE `rds_mc_external`(`id` int...
插入或覆写数据（INSERT INTO|INSERT OVERWRITE）
sort by 语句用于指定单个文件内部排序的方式，如果不写 sort by，则单个文件内部按照 local zorder 排序。zorder by 的 使用限制 如下：对于分区表，一次只允许对1个分区进行 zorder by 排序。zorder by 字段数目只能在2~4之间。目标表为...
新建ArgoDB数据源
如果数据源不区分生产数据源和开发数据源，则选择 生产数据源。标签 您可根据标签给数据源进行分类打标，如何创建标签，请参见 数据源管理标签。配置数据源与Dataphin的连接参数。若您的数据源配置选择 生产+开发数据源，则需配置 生产+...
层次调用规范
如果已经存在CDM层数据，不允许ADS应用层跨过CDM中间层从ODS层重复加工数据。CDM中间层应该积极了解应用层数据的建设需求，将公用的数据沉淀到公共层，为其他数据层次提供数据服务。同时，ADS应用层也需积极配合CDM中间层进行持续的数据...
创建TDH Inceptor数据源
如果数据源不区分生产数据源和开发数据源，则选择 生产数据源。标签 您可根据标签给数据源进行分类打标，如何创建标签，请参见 数据源管理标签。配置数据源与Dataphin的连接参数。若您的数据源配置选择 生产+开发数据源，则需配置 生产+...
新建Paimon数据源
如果数据源不区分生产数据源和开发数据源，则选择 生产数据源。标签 您可根据标签给数据源进行分类打标，如何创建标签，请参见 数据源管理标签。配置数据源与Dataphin的连接参数。若您的数据源配置选择 生产+开发数据源，则需配置 生产+...
自建Oracle迁移至DataHub
在DTS迁移数据期间，若有除DTS外的数据写入目标库，则可能会导致源库与目标库的数据不一致。费用说明 迁移类型 链路配置费用 公网流量费用 结构迁移 不收费。本示例不收费。说明 通过公网将数据迁移出阿里云时将收费，详情请参见 计费概述...
层次调用规范
如果已经存在CDM层数据，不允许ADS应用层跨过CDM中间层从ODS层重复加工数据。CDM中间层应该积极了解应用层数据的建设需求，将公用的数据沉淀到公共层，为其他数据层次提供数据服务。同时，ADS应用层也需积极配合CDM中间层进行持续的数据...
从RDS PostgreSQL迁移至RDS MySQL
如果不为空，则在预检查阶段提示错误，数据同步作业不会被启动。忽略报错并继续执行：跳过目标库是否为空的检查项。警告 选择为 忽略报错并继续执行 后，如果在同步过程中遇到目标库中的Key与源库中的Key相同，会将源库的数据覆盖写入目标...
BulkImport
使用SDK Java SDK：离线批量写入数据 服务能力单元消耗 如果本次操作整体失败，则不消耗任何服务能力单元。如果请求超时，结果未定义，则服务能力单元有可能被消耗，也可能未被消耗。如果返回内部错误（HTTP状态码：5xx），则此次操作不...
FTP Check节点
如果DataWorks读取未写入完成的数据，则可能导致读取的数据不全或读取失败。为了保证DataWorks成功读取完整的外部数据库的数据，此时，可以让其他调度系统在数据库中的数据写入任务完成后，在指定文件系统中进行文件标记（例如，生成一个....
一键实时同步至Elasticsearch
说明 当创建了目标Elasticsearch索引后，如果不修改相关参数，则系统会按照默认值的相应规则进行数据同步。步骤五：DDL消息处理规则 来源数据源会包含许多DDL操作，数据集成体提供默认处理策略，您也可以根据业务需求，对不同的DDL消息设置...
DML差异
MySQL 云原生数据仓库AnalyticDB MySQL 定义 CALL 不支持 调用存储过程。DELETE 支持，详情请参见 DELETE。从表中删除行。DO 不支持 执行表达式，但不返回任何结果。HANDLER 不支持 直接访问表存储引擎接口。INSERT 支持，详情请参见 ...
自建Oracle迁移至云原生数据仓库 AnalyticDB ...
警告 选择为 忽略报错并继续执行，可能导致数据不一致，给业务带来风险，例如：表结构一致的情况下，在目标库遇到与源库主键的值相同的记录，则会保留目标库中的该条记录，即源库中的该条记录不会迁移至目标库中。表结构不一致的情况下，...
导出至HDFS
方式三：您可以使用 INSERT OVERWRITE 语法向外表中批量插入数据。如果目标外表中已存在数据，每次写入会先删除外表路径下的全部数据文件，再产生新的HDFS数据文件。重要 写入的外表必须保持列个数的完整，不允许指定只写入部分的列。...
- 产品推荐
- 这些文档可能帮助您