了解一个项目从数据建模、数据同步(数据传输)、数据开发、运维、数据治理到数据应用的全流程。了解DataWorks、MaxCompute、Hologres、E-MapReduce等各个云产品、组件之间的联动关系。了解如何规划DataWorks工作空间、MaxCompute项目、...
开启成默认数据传输服务资源组 的值为开启时,该项目默认提交的数据传输服务会自动使用数据传输服务(包年包月)资源组。开启成默认数据传输服务资源组 的值为关闭时,该项目默认提交的数据传输服务会自动使用Default资源组。说明 如果需要...
在数据传输量波动较大的场景下,普通实例和Serverless实例资源使用和规格变化情况如下图所示:由上图可以看到,在业务波动较大的场景下:普通实例:在波谷期浪费的资源较多,在高峰期资源不足,业务受损。Serverless实例:实例的资源规格随...
通过使用数据传输服务DTS(Data Transmission Service),您可以实现 PolarDB PostgreSQL版(兼容Oracle)集群迁移至 云原生数据仓库 AnalyticDB MySQL 版 3.0。前提条件 已创建目标 云原生数据仓库 AnalyticDB MySQL 版 3.0,详情请参见 ...
在左侧导航栏,选择 数据传输(DTS)>数据迁移。说明 您也可以登录 新版DTS迁移任务的列表页面。在 迁移任务 右侧,选择迁移实例所属地域。说明 新版DTS迁移任务列表页面,需要在页面左上角选择迁移实例所属地域。单击 创建任务,配置源库...
应用场景 为满足企业处理实时数据的需求,ETL提供了流式数据抽取、加工和加载功能,能够高效整合海量实时数据,支持拖拽式操作和低代码开发方式,帮助企业轻松完成商业决策分析、报表提速、实时数据计算等。企业在数字化转型过程中,涉及...
数据迁移任务可以帮助您快速地实现各种数据源之间的数据迁移,适用于数据上云迁移、阿里云内部跨实例数据迁移、数据库拆分扩容等业务场景。本文以 RDS MySQL 迁移至 RDS MySQL 为例为您介绍配置数据迁移任务的流程。前提条件 已创建DTS专属...
当您在MaxCompute中需要对大规模数据进行传输且对传输稳定性和延迟有要求时,您可以使用独享数据传输服务资源组。独享数据传输服务资源组可以提供更高的数据传输速度和更好的网络条件,以减少传输时间并提高效率。本文为您介绍如何购买、...
oss-cn-hangzhou.aliyuncs.com *.oss-cn-hangzhou-internal.aliyuncs.com HTTPS传输数据时配置为443。HTTP传输数据时配置为80。您可以通过单击操作列下的 更多>客户端设置,选择是否用HTTPS传输数据。华东2(上海)管理面,用于云备份的...
在左侧导航栏,单击 数据传输>数据同步。在 同步项目列表 页面,单击目标项目后的 启动。您也可以在 同步项目列表 页面,单击项目名称进入详情页面,单击右上角的 启动。系统自动完成对数据同步项目的预检查后,启动数据同步项目。暂停数据...
在左侧导航栏,单击 数据传输>数据源管理。数据源列表 页面为您展示所有已创建的数据源及其基本信息,包括 数据源标识、数据源类型、数据源来源、用户名 和数据源的 创建时间。您可以在操作列单击 测试连接,检查数据库的网络连接情况。...
在左侧导航栏,单击 数据传输>数据迁移。在 数据迁移 页面,单击未启动的目标项目后的 启动。您也可以在 数据迁移 页面,单击项目名称进入详情页面,单击右上角的 启动。暂停数据迁移项目 处于 运行中 状态的数据迁移项目支持暂停操作。...
在左侧导航栏,单击 数据传输>数据迁移。在 数据迁移 页面,单击目标项目后的 结束。如果是处于 失败 状态的项目,请单击目标项目后的.>结束。在 是否确认结束 对话框中,单击 确定。释放数据迁移项目 释放数据迁移项目后,数据传输会清空...
在左侧导航栏,单击 数据传输>数据迁移。在 数据迁移 页面,单击未配置的目标项目后的 引用配置。在 引用配置 对话框,从 选择已有项目 下拉列表中,选择需要引用配置的项目名称。说明 选择后,该项目的配置信息将克隆至当前项目。单击 ...
在左侧导航栏,单击 数据传输>数据同步。在 数据同步 页面,单击未配置的目标项目后的 引用配置。在 引用配置 对话框,从 选择已有项目 下拉列表中,选择需要引用配置的项目名称。说明 选择后,该项目的配置信息将克隆至当前项目。单击 ...
在左侧导航栏,单击 数据传输>数据源管理。在 数据源列表 页面,单击右上角的 新建数据源。在 新建数据源 对话框中,选择 数据源类型 为 ADB,并配置各项参数。参数 描述 数据源标识 建议使用中文、数字和字母的组合。名称中不能包含空格,...
在左侧导航栏,单击 数据传输>数据源管理。在 数据源列表 页面,单击右上角的 新建数据源。在 新建数据源 对话框中,选择 数据源类型 为 PostgreSQL,并配置各项参数。参数 描述 实例类型 目前仅支持 RDS 实例。数据源标识 建议使用中文、...
在左侧导航栏,单击 数据传输>数据源管理。在 数据源列表 页面,单击右上角的 新建数据源。在 新建数据源 对话框中,选择 数据源类型 为 DataHub。配置各项参数。从 实例类型 下拉列表选择不同的 实例类型 后,下方会自动显示对应的表单。...
在左侧导航栏,单击 数据传输>数据源管理。在 数据源列表 页面,单击右上角的 新建数据源。在 新建数据源 对话框中,选择 数据源类型 为 TiDB。配置各项参数。从 实例类型 下拉列表选择不同的 实例类型 后,下方会自动显示对应的表单。说明...
概述 本文主要介绍MySQL中数据类型为Date的数据,通过数据订阅传输数据后,数据格式由 YYYY-MM-DD 格式变化为 YYYY:MM:DD 的原因。详细信息 DTS默认数据存储格式为 YYYY:MM:DD,YYYY-MM-DD 是展现出来的格式,实际存储是 YYYY:MM:DD 格式。...
在左侧导航栏,单击 数据传输>数据源管理。在 数据源列表 页面,单击右上角的 新建数据源。在 新建数据源 对话框中,选择 数据源类型 为 PolarDB-X 1.0,并配置各项参数。参数 描述 实例类型 目前仅支持 阿里云 PolarDB-X 1.0 实例。重要 ...
在左侧导航栏,单击 数据传输>数据源管理。在 数据源列表 页面,单击右上角的 新建数据源。在 新建数据源 对话框中,选择 数据源类型 为 MySQL。配置各项参数。从 实例类型 下拉列表选择不同的 实例类型 后,下方会自动显示对应的表单。...
在左侧导航栏,单击 数据传输>数据同步。在 数据同步 页面,鼠标悬停至目标项目的名称,单击显示的 编辑 图标。您也可以单击目标项目的名称,进入项目详情页面,单击项目名称右侧的 编辑 图标。在 编辑项目名称 对话框,输入修改后的项目...
在左侧导航栏,单击 数据传输>数据迁移。如果您需要设置数据同步项目的告警信息,单击 数据传输>数据同步 即可。单击目标项目后的 修改告警。如果您需要进行批量操作,请勾选多个目标项目,单击右下角的 更多批量操作>批量修改告警配置。...
在左侧导航栏,单击 数据传输>数据源管理。在 数据源列表 页面,单击右上角的 新建数据源。在 新建数据源 对话框中,选择 数据源类型 为 Oracle。配置各项参数。从 实例类型 下拉列表选择不同的 实例类型 后,下方会自动显示对应的表单。...
数据传输提供数据同步功能,帮助您实现数据源之间的数据实时同步。适用于数据异地多活、数据异地灾备、数据聚合和实时数据仓库等多种业务场景。您可以参考以下流程进行同步前的准备工作、以及购买、配置和管理数据同步项目。完成准备工作。...
数据传输提供数据迁移功能,帮助您实现同构或异构数据源之间的数据迁移。适用于数据库升级、跨实例数据迁移、数据库拆分、扩容等业务场景。您可以参考以下流程进行迁移前的准备工作、以及购买、配置和管理数据迁移项目。完成准备工作。数据...
在左侧导航栏,单击 数据传输>数据同步。在 同步项目列表 页面,单击目标项目后的.>结束。您也可以单击项目名称进入详情页面,单击右上角的.>结束。在 是否确认结束 对话框中,单击 确定。后续操作 对于不再需要维护源端和目标端的已结束的...
如果您需要设置数据同步项目的告警信息,单击 数据传输>数据同步 即可。单击目标项目后的 设置告警。如果您需要进行批量操作,请勾选多个目标项目,单击右下角的 批量修改告警配置。重要 批量修改告警配置将覆盖所选项目已有的告警监控设置...
在左侧导航栏,单击 数据传输>数据同步。在 数据同步 页面,单击目标数据同步项目的名称。在目标项目的详情页面,单击右上角的.>下载对象配置。重要 数据库至数据库的数据同步项目中,仅选择 指定对象 方式时,支持导入对象。导入对象配置 ...
在左侧导航栏,单击 数据传输>数据迁移。在 数据迁移 页面,单击目标数据迁移项目的名称。在目标项目的详情页面,单击右上角的.>下载对象配置。重要 以 匹配规则 方式选择迁移对象的数据迁移项目,不支持下载对象配置信息。导入对象配置 ...
如果您的实例需要临时停止向目标库写入数据,并且需要保留实例以便将来继续向目标库写入数据,可以选择暂停实例,然后在需要时重新启动实例。前提条件 已创建同步或迁移实例。更多信息,请参见 同步方案概览 和 迁移方案概览 中的相关配置...
您也可以根据需求选择按照占用内存、磁盘读取数据量、磁盘读取数据耗时、网络传输数据量、网络传输数据耗时对算子排序以及计算整体比例。算子统计信息介绍如下:名称 说明 算子名称 算子名称与编号,在计划树中唯一。类型ID 算子类型编号。...
在左侧导航栏,单击 数据传输>数据源管理。在 数据源列表 页面,单击右上角的 新建数据源。在 新建数据源 对话框中,选择 数据源类型 为 RocketMQ。配置各项参数。从 实例类型 下拉列表选择不同的 实例类型 后,下方会自动显示对应的表单。...
说明 若数据传输控制台自动跳转至数据管理DMS控制台,您可以在右下角的 中单击,返回至旧版数据传输控制台。在左侧导航栏,单击 数据迁移。在 迁移任务列表 页面顶部,选择迁移任务所属的地域。在 数据迁移列表 页面,单击目标实例ID。在...
功能集 功能 功能描述 参考文档 资源计费 读流量 按照实际传输的数据量计费 产品定价 存储容量 按照实际的存储量计费 产品定价 公网流量 使用阿里云公网进行的网络传输数据流量 产品定价 活跃shard租用 Shard租用只统计当前状态为活跃...
数据传输服务DTS(Data Transmission Service)提供了任务性能的监控功能,能够展现链路拓扑结构以及相关性能数据。您可以在控制台通过DTS实例获取到任务的链路状态信息和多种性能指标,为您管理任务提供参考依据。操作步骤 登录 数据传输...
在左侧导航栏,单击 数据传输>数据源管理。在 数据源列表 页面,单击右上角的 新建数据源。在 新建数据源 对话框,选择 数据源类型 为 Kafka。选择 实例类型,配置各项参数。选择 阿里云 Kafka 实例 时,配置参数如下。阿里云 Kafka 实例的...
在左侧导航栏,单击 数据传输>数据同步,即可进入 同步项目列表 页面。您可以在该页面选择需要进行批量操作的数据同步项目,进行相关批量操作。批量暂停 数据传输支持处于 运行中 状态的数据同步项目进行 批量暂停 操作。在 同步项目列表 ...
在左侧导航栏,单击 数据传输>数据迁移。进入 管理标签 对话框。您可以通过以下两个入口进入管理标签对话框。通过目标项目后的标签编辑图标进入。在 数据迁移 页面,找到需要添加标签的目标项目。鼠标悬停至目标项目,单击显示的标签编辑...