数据集成侧同步任务能力说明
在配置同步任务前，您需要确保数据集成资源组与您将同步的数据来源端与目标端网络环境已经连通，对应数据库环境与网络连通配置详情请参见：配置资源组与网络连通。数据同步场景 全增量同步任务支持单表数据同步至目标端单表、分库分表数据...
同步配置
您可以创建多个微服务空间，在其中一个空间中创建配置，再将此配置同步到其他空间中。为同地域内的多个微服务空间同步配置 登录 EDAS控制台。在左侧导航栏，选择 应用管理>微服务配置。默认进入配置管理的 配置列表 页面。可选：在 配置...
整库离线同步至OSS
步骤三：设置同步来源与规则 在 基本配置 区域，配置同步解决方案的名称、任务存放位置等信息。在 数据来源 区域，确认需要同步的源端数据源相关信息。在 选择同步的源表 区域，选中需要同步的 源表，单击 图标，将其移动至 已选源表。该...
实时同步数据库的数据至Hologres
配置任务 输入数据源与输出Hologres数据源配置成功后，需要开始配置同步方式并运行任务，DataWorks数据集成提供三种实时同步方式，您可以根据业务需求选择，详情见下表。同步类型 适用场景 支持的数据来源 数据源配置指导 同步任务配置指导...
同步配置
您可以创建多个微服务空间，在其中一个空间中创建配置，再将此配置同步到其他空间中。为同个地域内的多个命名空间同步配置 登录 MSE注册配置中心管理控制台，并在顶部菜单栏选择地域。在左侧导航栏，选择 注册配置中心>实例列表。在 实例...
发送业务数据
进入 移动开发平台 mPaaS 控制台，选择目标应用，完成以下步骤新增数据同步任务，以发送业务数据。前提条件 控制台中已有一条推送配置并处于上线状态。操作步骤 在左侧导航栏点击 后台服务管理>数据同步，进入数据同步页面。在 配置管理 ...
LDAP配置
本文介绍如何进行LDAP（Lightweight Directory Access Protocol 轻量级目录访问协议）配置，配置完成后，阿里云盘企业版 可同步LDAP内的组织结构及用户，用户可使用LDAP账号直接登录 阿里云盘企业版，实现便捷管理网盘内的用户和团队。...
从自建MySQL同步至云消息队列 Kafka 版
说明 DTS会自动将表名映射为配置同步的源和目标实例信息时选择的Topic名称。如果需要更换同步的目标Topic（更换后的Topic需是 云消息队列 Kafka 版 实例中真实存在的），您可以将鼠标指针放置在要进行名称映射的表上，并单击出现的 编辑 ...
ApsaraDB For OceanBase数据源
ApsaraDB for OceanBase数据源提供读取和写入ApsaraDB for OceanBase数据的双向功能，您可以使用ApsaraDB for OceanBase数据源配置同步任务同步数据。本文为您介绍DataWorks的ApsaraDB For Oceanbase数据同步能力支持情况。支持的版本 离线...
配置管理概述
您可以创建多个微服务空间，在其中一个空间中创建配置，再将此配置同步其他空间中。管理配置 创建完配置后，您可以在EDAS控制台搜索、查看、编辑或删除配置。查看历史版本和回滚配置 如果配置存在问题，您可以查询配置的历史版本，还可以将...
上线脚本同步任务
相关操作 操作 说明 下线同步任务 在 脚本配置同步 页面，单击目标同步任务 操作 列的 下线，在弹出对话框中单击 确定，可下线同步任务。查看任务运行记录 在 脚本配置同步 页面，单击目标同步任务的 操作 列的 运行记录，可对同步任务的...
上线脚本同步任务
相关操作 操作 说明 下线同步任务 在 脚本配置同步 页面，单击目标同步任务 操作 列的 下线，在弹出对话框中单击 确定，可下线同步任务。查看任务运行记录 在 脚本配置同步 页面，单击目标同步任务的 操作 列的 运行记录，可对同步任务的...
接口详情
接口右侧 标志表示该接口配置了防护规则。说明 已配置防护规则的接口 筛选条件会筛选出配置了防护规则的接口（忽略规则是否开启）。（图标②）选择当前接口的各种功能页签。接口概览：以QPS、RT、并发各数据的统计维度展现选中的接口数据。...
MaxCompute数据源
如果时长不满足您的业务需求，可以在配置同步任务时单击对应的MaxCompute表名修改生命周期。数据集成使用MaxCompute引擎同步数据通道进行数据上传和下载（同步数据通道SLA详情请参见 数据传输服务（上传）场景与工具），请根据MaxCompute...
MySQL整库离线同步到OSS
步骤二：配置同步任务。步骤三：运行并查看任务状态。前提条件 已购买合适规格的独享数据集成资源组。详情请参见：新增和使用独享数据集成资源组。已完成MySQL和OSS数据源配置，以便在同步任务配置时，可通过选择数据源名称来控制同步读取...
常见问题
如果业务对数据要求比较精确，您可以删除目标库的数据，然后重新配置同步任务，并在 任务步骤 同时选中 库表结构同步 和 全量同步（默认已选中 增量同步）。DTS全量同步任务长时间没进度，如何处理？若待同步的表为无主键的表，全量同步会...
一键实时同步至AnalyticDB for MySQL 3.0
步骤三：设置同步来源与规则 在 基本配置 区域，配置同步解决方案的名称、任务存放位置等信息。在 数据来源 区域，确认需要同步的源端数据源相关信息。在 选择同步的源表 区域，选中需要同步的 源表，单击 图标，将其移动至 已选源表。该...
新建同步任务
本文为您介绍如何构建同步任务，将业务数据源的数据同步到Dataphin平台中的目标表。前提条件 已完成同步目标表的创建，详情请参见 新建同步目标表。...后续步骤 完成同步任务创建后，需要配置同步任务，详情请参见 配置同步任务。
支持的数据源及同步方案
在配置同步任务前，您需要在数据源管理页面配置好需要同步的数据源。数据集成目前支持MySQL、MaxCompute、Hologres、OSS、Kafka等几十种数据源，各数据源支持的同步方案及读写插件不同，您可以根据实际需求，在配置同步任务中的源端和目标...
全增量实时同步至Hologres
步骤三：选择要同步的表 步骤四：目标表映射 步骤五：报警配置 步骤六：高级参数配置 步骤七：DDL能力配置 步骤八：资源组配置 步骤九：执行同步解决方案任务 步骤一：选择同步方案 在此步骤中，您需要进入数据集成页面配置同步解决方案。...
区域热力层
区域面数据接口 配置字段说明 字段 说明 adcode 地区对应的adcode。value 地区的值。与 最大值、最小值、无值 配置项配合使用，可控制对应区域的颜色。说明 根据数据的value区间得出scale区间，从而计算从最大到最小的颜色渐变区间。表 1....
接口详情
接口右侧 标志表示该接口配置了防护规则。说明 已配置防护规则的接口 筛选条件会筛选出配置了防护规则的接口（忽略规则是否开启）。（图标②）选择当前接口的各种功能页签。接口概览：以QPS、RT、并发各数据的统计维度展现选中的接口数据。...
新建同步任务
本文为您介绍如何构建同步任务，将业务数据源的数据同步到Dataphin平台中的目标表。前提条件 已完成同步目标表的创建，详情请参见 新建同步目标表。...后续步骤 完成同步任务创建后，需要配置同步任务，详情请参见 配置同步任务。
采集数据
1、配置同步网络链接 此步骤中，使用 独享数据集成资源组 测试与源端OSS数据源 oss_workshop_log，以及目标端MaxCompute的odps_first数据源的网络连通。数据来源：数据来源选择 OSS，数据源名称选择 oss_workshop_log，即 步骤二：创建数据...
采集数据
1、配置同步网络链接 此步骤中，使用 独享数据集成资源组 测试与源端OSS数据源 oss_workshop_log，以及目标端MaxCompute数据源的网络连通。数据来源：数据来源选择 OSS，数据源名称选择 oss_workshop_log，即 步骤二：创建数据源 中新建的...
MySQL数据源
准备工作3：（仅实时同步需要）开启MySQL Binlog 数据集成通过实时订阅MySQL Binlog实现增量数据实时同步，您需要在DataWorks配置同步前，先开启MySQL Binlog服务。操作如下。重要 如果Binlog在消费中，则无法被数据库删除。如果实时同步...
钉钉配置
同步类型可以选择手动同步或者自动同步，手动同步是仅同步一次，自动同步会在选择的时间点定时自动触发同步，如果钉钉有人员或部门变动都会同步到网盘 如果钉钉人员离职后，同步程序不会在网盘中删除该用户，只会禁用，需要管理员做好交接...
一键实时同步至DataHub
步骤三：设置同步来源与规则 在 基本配置 区域，配置同步解决方案的名称、任务存放位置等信息。在 数据来源 区域，确认需要同步的源端数据源相关信息。在 选择同步的源表 区域，选中需要同步的 源表，单击 图标，将其移动至 已选源表。该...
MySQL分库分表同步至Hologres（方案2.0）
步骤五：报警配置 步骤六：高级参数配置 步骤七：DDL能力配置 步骤八：资源组配置 步骤九：执行同步解决方案任务 步骤一：选择同步方案 在此步骤中，您需要进入数据集成页面配置同步解决方案。进入 数据集成。进入数据集成页面。登录 ...
修改同步配置
概述 修改配置参数：是指主DNS服务器信息如发生变更，则需要到辅助DNS中，对 设置主DNS信息、设置发送NOTIFY通知的服务器IP地址、，更新配置。操作步骤 登录 云解析DNS产品控制台。左侧导航栏选择 辅助DNS，再选择 内网域名同步 页签。3....
MySQL一键实时同步至MaxCompute
在 基本配置 区域，配置同步解决方案的名称、任务存放位置等信息。在 数据来源 区域，确认需要同步的源端数据源相关信息。在 选择同步的源表 区域，选中需要同步的 源表，单击 图标，将其移动至 已选源表。本案例中选择 doc_demo1 下的表 ...
MySQL一键实时同步至MaxCompute
在 基本配置 区域，配置同步解决方案的名称、任务存放位置等信息。在 数据来源 区域，确认需要同步的源端数据源相关信息。在 选择同步的源表 区域，选中需要同步的 源表，单击 图标，将其移动至 已选源表。本案例中选择 doc_demo1 下的表 ...
管理时间同步服务
管理时间同步服务 阿里云公共镜像中包含了默认的时间同步配置，基于公共镜像创建的ECS实例会默认运行Chrony或者NTP服务进行时间同步，正常情况下您无需干预时间同步服务。您可以按照以下步骤，检查当前ECS实例的时间同步服务是否正常，并...
操作流程
创建同步任务 支持单个、批量配置同步任务，通过同步的Meta信息支持自动创建目标表，支持创建实时同步任务、离线同步任务两种模式。上线同步任务 同步任务上线后会按照创建同步任务中设置的调度周期执行，支持一次性运行和周期运行。任务...
一键实时同步至Hologres
步骤三：设置同步来源与规则 在 基本配置 区域，配置同步解决方案的名称、任务存放位置等信息。在 数据来源 区域，确认需要同步的源端数据源相关信息。在 选择同步的源表 区域，选中需要同步的 源表，单击 图标，将其移动至 已选源表。该...
PolarDB数据源
PolarDB数据源为您提供读取和写入PolarDB双向通道的功能，您可以通过向导模式和脚本模式配置同步任务。使用限制 离线读写 支持读取视图表。实时读 来源数据源为阿里云PolarDB MySQL时，您需要开启Binlog。阿里云PolarDB MySQL是一款完全...
操作流程
创建同步任务 支持单个、批量配置同步任务，通过同步的Meta信息支持自动创建目标表，支持创建实时同步任务、离线同步任务两种模式。上线同步任务 同步任务上线后会按照创建同步任务中设置的调度周期执行，支持一次性运行和周期运行。任务...
一键MaxCompute数据同步节点
在节点编辑页面，配置同步MaxCompute数据所使用的MaxCompute源表、存放数据的目标表、同步策略及SQL代码信息。配置源表信息。用于配置需要同步的MaxCompute数据来源于哪个表。此处是通过配置Hologres外部表来映射MaxCompute源表数据。关键...
旧版本 AD/LDAP 账户同步配置
需要新建ldap同步配置，不支持在原来配置上修改Base DN，在Base DN 中加上OU值。3.新建LDAP配置，点击测试连接失败。请求连接后需要比较久才返回结果，请查看网络是否通，IDaaS目前只支持公网访问；请求连接后很快返回连接失败，请检查配置...
配置MySQL输入
数据集成通过实时订阅MySQL Binlog实现增量数据实时同步，您需要在DataWorks配置同步任务前，先开启MySQL Binlog服务。已购买合适规格的独享数据集成资源组。详情请参见 新增和使用独享数据集成资源组。已配置数据同步资源组与数据库的网络...
- 产品推荐
- 这些文档可能帮助您