主键与唯一键（DRDS模式）
tbl表插入一条order_id相同但city不同的数据，因为city的值为“Shenzhen”，由于这次city的值不同于第一次插入的数据，这次的数据将被插入到不同的分表。执行SQL，发现执行成功。此时order_tbl表内存在两行主键重复的数据，这说明Local主键...
主键与唯一键（AUTO模式）
Query OK,1 row affected 向list_tbl表插入一条order_id相同且city相同的数据。由于city相同，数据仍将被存储到p1分区，执行SQL时发现插入失败，报主键冲突的错误。可以看到相同主键的值无法插入到相同分区，这说明Local主键可以保证在分区...
MapReduce
Key值和Reduce Worker是多对一的关系，具有相同Key的数据会被发送给同一个Reduce Worker，单个Reduce Worker有可能会接收到多个Key值的数据。在进入Reduce阶段之前，MapReduce框架会对数据按照Key值排序，使得具有相同Key的数据彼此相邻。...
创建派生指标
业务限定 选择派生指标的业务限定，系统仅支持选择与所选原子指标具有相同数据时效的业务限定。统计粒度设置 统计粒度 统计粒度的时效，根据已选择的统计周期系统自动填入。您只需要选择对象粒度。支持添加3个对象粒度。单击 下一步。在 预...
创建派生指标
业务限定 选择派生指标的业务限定，系统仅支持选择与所选原子指标具有相同数据时效的业务限定。统计粒度设置 统计粒度 统计粒度的时效，根据已选择的统计周期系统自动填入。您只需要选择对象粒度。支持添加3个对象粒度。单击 下一步。在 预...
查看同步任务
OSS 实时 No 同步数据到对象存储OSS指定Bucket的文件中，将以csv格式保存 ElasticSearch 实时 Yes 同步数据到ElasticSearch指定Index中，Shard之间数据同步不保证时序，所以需将同样ID的数据写入相同的Shard中 MySQL 实时 Yes 同步数据到...
新建数据元
一般用来表示具有相同特性数据项的抽象。例如：我们把“教育水平”作为数据元，数据元关联数据字典，字典的值域设置为：“研究生”、“本科”、”高中“、”小学“等。用“教育水平”这个数据元来统一描述人的受教育程度或者文化水平等类似...
新建数据元
一般用来表示具有相同特性数据项的抽象。例如：我们把“教育水平”作为数据元，数据元关联数据字典，字典的值域设置为：“研究生”、“本科”、”高中“、”小学“等。用“教育水平”这个数据元来统一描述人的受教育程度或者文化水平等类似...
数据库分组
若您需要在SQL变更或结构设计中快速载入多个数据库，可以创建一个数据库分组，将多个数据库环境、引擎类型相同的数据库绑定成为一个分组。本文介绍如何创建数据库分组。背景信息 当您的业务部署在多个地域，且存在多个数据库时，您每次做...
SQL 诊断概述
说明 相同 SQL 是指相同的数据库和 SQL ID。机器之间执行对比，输出的是这些主机上相同 SQL 的明细和响应时间趋势。如果基准节点与对比节点上没有执行相同的 SQL，则不会输出结果。SlowSQL SlowSQL 是指执行时间超过 500ms 的 SQL 语句。您...
创建同步ElasticSearch
对于ES6，DataHub同步数据时，将会以用户选择的列的列名作为一条数据的type，如果选择多列，则多列的列名会以“|”分割作为一条数据的type，并且ES6支持以任意名称作为type。例如：DataHub Schema:f1 string,f2 string,f3 string,f4 string...
SQL 诊断概述
说明 相同 SQL 是指相同的数据库和 SQL ID。机器之间执行对比，输出的是这些主机上相同 SQL 的明细和响应时间趋势。如果基准节点与对比节点上没有执行相同的 SQL，则不会输出结果。TopSQL 功能除了支持对选定租户进行实时诊断，还支持对...
添加实时数仓Hologres数据源
在 我的数据 页签中选择 数据源管理，单击 添加数据。从 类型 列表中，选择 实时数仓Hologres。在列表中选择 内网，并选择Hologres实例所在的区域。选择内网数据库的网络类型（包括 专有网络 和 经典网络）。专有网络 打开 VPC 开关，进入 ...
添加实时数仓Hologres数据源
名称 数据源的显示名称，可以自由命名。域名 Hologres实例的域名。进入 Hologres管理控制台 的实例详情页，从 网络信息 的指定VPC的 域名 列获取域名。用户名 登录实时数仓Hologres实例账号的AccessKey ID。密码 登录实时数仓Hologres实例...
SELECT
WINDOW 说明 WINDOW子句允许您设置如何将具有相同主建的数据分组到窗口中，来进行聚合或连接等操作。窗口将向数据中添加了两个额外的系统列WINDOWSTART和WINDOWEND，提供了窗口边界。支持以下WINDOW类型：HOPPING window 根据数据的时间戳...
RDS实例间的数据迁移
本文介绍如何使用数据传输服务（Data Transmission Service，简称DTS），实现RDS实例间的数据迁移。DTS支持结构迁移、全量数据迁移以及增量数据迁移，同时使用这三种迁移类型可以实现在自建应用不停服的情况下，平滑地完成数据库的迁移。...
RDS实例间数据迁移
本文介绍如何使用数据传输服务（Data Transmission Service，简称DTS），实现RDS实例间的数据迁移。DTS支持结构迁移、全量数据迁移以及增量数据迁移，同时使用这三种迁移类型可以实现在自建应用不停服的情况下，平滑地完成数据库的迁移。...
跨阿里云账号备份恢复数据
说明 恢复时间取决于备份计划规格和要恢复的数据库大小。规格越高恢复速度越快，数据量越大恢复所需的时间也就越长。更多信息，请参见 备份恢复性能说明。若您选择恢复至新建实例中，系统大约需要5~10分钟创建RDS新实例。恢复成功后，您...
同步时源库为MongoDB的注意事项及限制
若目标端有与源端相同的主键，请在不影响业务的前提条件下清空目标端的相关数据（删掉目标端中与源端相同_id的文档）。特殊情况 当源库为自建MongoDB时：在同步时，如果源库进行主备切换，将会导致同步任务失败。由于DTS的延迟时间是根据...
迁移时源库为MongoDB的注意事项及限制
若目标端有与源端相同的主键，请在不影响业务的前提条件下清空目标端的相关数据（删掉目标端中与源端相同_id的文档）。特殊情况 当源库为自建MongoDB时，在迁移时，如果源库进行主备切换，将会导致迁移任务失败。MongoDB（副本集架构）迁移...
迁移MongoDB实例至其他地域
若目标端有与源端相同的主键，请在不影响业务的前提条件下清空目标端的相关数据（删掉目标端中与源端相同_id的文档）。费用说明 迁移类型 链路配置费用 公网流量费用 全量数据迁移 不收费。仅当通过公网将数据迁移出阿里云时收费，详情请...
迁移MongoDB实例至其他地域
若目标端有与源端相同的主键，请在不影响业务的前提条件下清空目标端的相关数据（删掉目标端中与源端相同_id的文档）。费用说明 迁移类型 链路配置费用 公网流量费用 全量数据迁移 不收费。仅当通过公网将数据迁移出阿里云时收费，详情请...
从MongoDB副本集实例迁移至分片集群实例
若目标端有与源端相同的主键，请在不影响业务的前提条件下清空目标端的相关数据（删掉目标端中与源端相同_id的文档）。费用说明 迁移类型 链路配置费用 公网流量费用 全量数据迁移 不收费。仅当通过公网将数据迁移出阿里云时收费，详情请...
从MongoDB副本集实例迁移至分片集群实例
若目标端有与源端相同的主键，请在不影响业务的前提条件下清空目标端的相关数据（删掉目标端中与源端相同_id的文档）。费用说明 迁移类型 链路配置费用 公网流量费用 全量数据迁移 不收费。仅当通过公网将数据迁移出阿里云时收费，详情请...
PolarDB MySQL版间迁移
通过数据传输服务DTS（Data Transmission Service），可以帮助您实现 PolarDB MySQL版 集群间的数据迁移。说明 目前 PolarDB MySQL版 集群暂不支持升级MySQL版本至8.0版本，您可以创建一个新的 PolarDB MySQL版 集群（8.0版本），使用本...
PolarDB MySQL版迁移至RDS MySQL
特殊情况 当目标库为RDS MySQL时，DTS会自动在RDS MySQL中创建数据库，如果待迁移的数据库名称不符合RDS MySQL的定义规范，您需要在配置迁移任务之前在RDS MySQL中创建数据库。相关操作，请参见 管理数据库。费用说明 迁移类型 链路配置...
转换函数
作为SQL内置函数，如果参数的数据类型不是RAW，则此函数会将使用某些数据字节数表示的参数值转换为具有相同数据字节数的RAW值。数据本身不会以任何方式进行修改，但数据类型会重新转换为RAW数据类型。语法 RAWTOHEX(raw)参数 参数 说明 raw...
配置数据迁移任务
数据迁移任务可以帮助您快速地实现各种数据源之间的数据迁移，适用于数据上云迁移、阿里云内部跨实例数据迁移、数据库拆分扩容等业务场景。本文以 RDS MySQL 迁移至 RDS MySQL 为例为您介绍配置数据迁移任务的流程。前提条件 已创建DTS专属...
PolarDB MySQL版间的单向同步
支持的数据库版本，请参见 同步方案概览。源 PolarDB MySQL版 集群已开启Binlog，详情请参见 如何开启Binlog。注意事项 DTS在执行全量数据初始化时将占用源库和目标库一定的读写资源，可能会导致数据库的负载上升，在数据库性能较差、规格...
RDS MySQL实例间的同步
数据传输服务DTS（Data Transmission Service）支持 RDS MySQL 实例间的数据同步。支持的源和目标数据库 MySQL间同步支持以下源或目标数据库。本文以 RDS MySQL 实例为源和目标数据库介绍配置流程，其他数据源配置流程与本案例类似。源数据...
从MongoDB单节点实例迁移至副本集或分片集群实例
若目标端有与源端相同的主键，请在不影响业务的前提条件下清空目标端的相关数据（删掉目标端中与源端相同_id的文档）。费用说明 迁移类型 链路配置费用 公网流量费用 全量数据迁移 不收费 不收费 迁移类型说明 全量数据迁移：将源MongoDB...
从PolarDB MySQL版同步至Elasticsearch
DTS在进行结构初始化时，会根据Elasticsearch实例支持的数据类型进行类型映射，详情请参见 结构初始化涉及的数据类型映射关系。操作步骤 购买数据同步作业，详情请参见 购买流程。说明 购买时，选择源实例为 PolarDB、目标实例为 ...
PolarDB MySQL版间的单向同步
支持的数据库版本，请参见 同步方案概览。源 PolarDB MySQL版 集群已开启Binlog，详情请参见 如何开启Binlog。注意事项 DTS在执行全量数据初始化时将占用源库和目标库一定的读写资源，可能会导致数据库的负载上升，在数据库性能较差、规格...
Redis实例间的单向数据同步
警告 选择为 忽略报错并继续执行 后，如果在同步过程中遇到目标库中的Key与源库中的Key相同，会将源库的数据覆盖写入目标库中，请谨慎选择。同步对象 在 源库对象 框中单击待同步的数据库，然后单击 将其移动到 已选择对象 框。同步对象的...
Redis实例间的单向数据同步
警告 选择为 忽略报错并继续执行 后，如果在同步过程中遇到目标库中的Key与源库中的Key相同，会将源库的数据覆盖写入目标库中，请谨慎选择。同步对象 在 源库对象 框中单击待同步的数据库，然后单击 将其移动到 已选择对象 框。同步对象的...
Redis企业版实例间的双向同步
类别 配置 说明 同步策略 冲突修复策略 Overwrite（遇到冲突，直接覆盖目标实例中的冲突记录）当数据同步期间遇到Key相同但值不同时，Key的值更新时间晚的数据会覆盖冲突的记录。目标已存在表的处理模式 预检查并报错拦截：检查目标库是否...
Redis企业版实例间的双向同步
类别 配置 说明 同步策略 冲突修复策略 Overwrite（遇到冲突，直接覆盖目标实例中的冲突记录）当数据同步期间遇到Key相同但值不同时，Key的值更新时间晚的数据会覆盖冲突的记录。目标已存在表的处理模式 预检查并报错拦截：检查目标库是否...
从自建MySQL迁移至MyBase MySQL
如果您的MySQL数据库部署在本地，那么您需要将DTS服务器的IP地址设置为该数据库远程连接的白名单，允许其访问您的数据库。详情请参见 迁移、同步或订阅本地数据库时需添加的IP白名单。支持的源和目标数据库 MySQL间迁移支持以下源或目标...
跨阿里云账号迁移MongoDB实例
若目标端有与源端相同的主键，请在不影响业务的前提条件下清空目标端的相关数据（删掉目标端中与源端相同_id的文档）。费用说明 迁移类型 链路配置费用 公网流量费用 全量数据迁移 不收费。仅当通过公网将数据迁移出阿里云时收费，详情请...
跨阿里云账号迁移MongoDB实例
若目标端有与源端相同的主键，请在不影响业务的前提条件下清空目标端的相关数据（删掉目标端中与源端相同_id的文档）。费用说明 迁移类型 链路配置费用 公网流量费用 全量数据迁移 不收费。仅当通过公网将数据迁移出阿里云时收费，详情请...
- 产品推荐
- 这些文档可能帮助您