FTP Check节点
为了保证DataWorks成功读取完整的外部数据库的数据，此时，可以让其他调度系统在数据库中的数据写入任务完成后，在指定文件系统中进行文件标记（例如，生成一个.done 文件），表明该任务已完成。然后在DataWorks中配置一个FTP Check节点，...
华为云云数据库RDS MySQL迁移到阿里云
注意事项 对于七天之内的异常迁移任务，DTS会尝试自动恢复，可能会导致迁移任务的源端数据库数据覆盖目标实例数据库中写入的业务数据，迁移任务结束后务必将DTS访问目标实例账号的写权限用 revoke 命令回收掉。操作步骤 登录 DTS控制台。在...
腾讯云云数据库MySQL迁移到阿里云
注意事项 对于七天之内的异常任务，DTS会尝试自动恢复，可能会导致迁移任务的源端数据库数据覆盖目标实例数据库中写入的业务数据，迁移任务结束后务必将DTS访问目标实例账号的写权限用 revoke 命令回收掉。操作步骤 登录 DTS控制台。在左侧...
百度智能云云数据库RDS MySQL迁移到阿里云
如果您的自建数据库具备白名单安全设置，您需要复制弹跳框中的DTS服务器IP地址，并加入自建数据库的白名单安全设置中。然后单击 测试连接以进行下一步。警告 DTS自动添加或您手动添加DTS服务的公网IP地址段可能会存在安全风险，一旦使用本...
Google Cloud SQL for MySQL数据库迁移到阿里云
如果您的自建数据库具备白名单安全设置，您需要复制弹跳框中的DTS服务器IP地址，并加入自建数据库的白名单安全设置中。然后单击 测试连接以进行下一步。警告 DTS自动添加或您手动添加DTS服务的公网IP地址段可能会存在安全风险，一旦使用本...
写入数据
TSDB 只支持通过 HTTP API 方式进行数据写入，因此控制台不提供数据写入的功能页面。关于数据写入的指导说明，请参考《开发指南》中的以下章节：《SDK 参考》中的 写入数据；《HTTP API 参考》中的 写入数据。
INTO子句
以上查询将数据库 NOAA_water_database 的保留策略 autogen 中的所有数据写入到数据库 copy_NOAA_water_database 的保留策略 autogen 中。反向引用语法（:MEASUREMENT）将源数据库中measurement的名字维持在目标数据库中不变。请注意，在...
业务切换流程
此类情况通常约定在执行数据迁移任务之前将业务中断并停止新的数据写入源数据库，所以请直接跳转至步骤 5 继续操作。将业务暂时中断，禁止新的数据写入源数据库。登录源数据库，根据数据库类型选择下述命令查看会话信息，确保没有新的会话...
业务切换流程
此类情况通常约定在执行数据迁移任务之前将业务中断并停止新的数据写入源数据库，所以请直接跳转至步骤 5 继续操作。将业务暂时中断，禁止新的数据写入源数据库。登录源数据库，根据数据库类型选择下述命令查看会话信息，确保没有新的会话...
从采集到分析-TSDB For InfluxDB®让你的数据产生价值
urls选择实例详情中的公网或者VPC访问地址，修改上图标记中的写入的数据库和存储策略，存储策略在不填的情况下将会写入该数据库默认存储策略中。TSDB For InfluxDB®采用认证的方式写入，在填写username和password之前需要确保该账号对数据...
数据写入方式概述
其中INSERT语句和COPY命令的写入数据均通过Master节点，INSERT语句每秒支持3 MB的数据写入量，COPY命令的写入性能快于INSERT，可以达到每秒30 MB。OSS外表为各个数据分区(Segment)并行读取，单分区从OSS加载的能力即可达到30 MB，整体加载...
Schema约束
因此，开发者在开发基于Lindorm时序引擎的应用程序时，可以类比传统关系型数据库中的关系表来访问时序数据。但是，时序数据模型本质上与关系型数据模型还是有所区别的。无论是在APM领域，还是IoT领域，或者是更偏传统的工业领域，时序数据...
CREATE CONTINUOUS QUERY
示例 以下示例创建了一个持续查询：每小时计算过去两个小时内原始时序表 sensor 中的每小时平均温度和每小时平均湿度，并将数据写入数据库 default 中的表 sensor 中。CREATE CONTINUOUS QUERY `default`.`my_cq` WITH(`INTERVAL`='1h',`...
通过DTS实现数据库的垂直拆分
此类情况通常约定在执行数据迁移任务之前将业务中断并停止新的数据写入源数据库，所以请直接跳转至 步骤6 继续操作。验证源和目标实例的数据库B中的数据是否一致。如果数据一致，则结束数据迁移的任务，详情请参见 结束数据迁移任务。警告 ...
将OSS数据写入AnalyticDB for MySQL 3.0
异步执行以下SQL将OSS中table目录下dla_table_1文件中 order_amount>2 的数据写入AnalyticDB for MySQL adb_demo数据库中的order_table表。执行 OSS 到 AnalyticDB for MySQL 的数据写入，包含对 OSS 数据的筛选逻辑。run-async=true*/...
基本概念
对于异构数据库之间的结构迁移，DTS会将源库的结构定义转换为目标库支持的结构定义，例如将Oracle数据库中的NUMBER数据类型转换为MySQL数据库中的DECIMAL数据类型。全量数据迁移 在全量数据迁移阶段，DTS会将源数据库的存量数据全部迁移到...
实时消费Kafka数据
5 EXPRESSION:column_5 COMMIT:MAX_ROW:1000 MINIMAL_INTERVAL:1000 CONSISTENCY:ATLEAST POLL:BATCHSIZE:1000 TIMEOUT:1000 PROPERTIES:group.id:test_consumer_group 单击 确定，并等待实时任务状态为 运行中，即可将数据源中的数据写入 ...
配置跨库Spark SQL节点
以下Spark SQL语句可以实现将mysql_db在线库的交易流水表sales与oracle_db库的用户表users进行关联，并将关联后的数据按部门名称分组，统计交易笔数和金额，加工后的数据写入到mysql_db在线库中。INSERT INTO mysql_db.dept_sales SELECT ...
使用DTS迁移副本集架构的自建MongoDB数据库上云
使用数据传输服务DTS（Data Transmission Service），将副本集架构的自建MongoDB数据库迁移至云数据库MongoDB中。DTS支持全量数据迁移和增量数据迁移，同时使用这两种迁移类型可以实现在不停服的情况下，平滑地完成数据库的迁移上云。除本...
配置Hologres输出组件
写入模式 源数据源的数据写入目标数据源（Hologres数据源）的模式。写入模式包括SDK模式和SQL模式，适用场景说明如下：Hologres 0.8版本推荐选择SDK模式。Hologres 0.9及之后版本推荐选择SQL模式。加载策略 向目标数据源（Hologres数据源）...
Kafka兼容说明
流引擎的流表兼容Kafka协议，支持通过开源Kafka客户端写入数据，也支持通过Kafka生态工具将MySQL、日志等数据投递至流引擎。...将流表中的数据写入Kafka Topic。具体操作，请参见 通过开源Kafka客户端写入Lindorm流引擎数据。
从自建Db2迁移至RDS MySQL
说明 如果未勾选 增量数据迁移，为保障数据一致性，数据迁移期间请勿在Db2数据库中写入新的数据。迁移对象 在 迁移对象 框中单击待迁移的对象，然后单击 图标将其移动到 已选择对象 框。说明 迁移对象选择的粒度可以为库、表、列三个粒度。...
数据迁移方案概览
对于异构数据库之间的结构迁移，DTS会根据源库和目标库的语法，将结构定义的语法进行转换，例如将Oracle中的number转换为MySQL中的decimal。全量数据迁移 DTS将源库中待迁移对象的存量数据，全部迁移到目标库中。如果在配置数据迁移任务时...
使用DTS迁移分片集群架构的自建MongoDB数据库上云
本文介绍如何使用数据传输服务DTS（Data Transmission Service），依次将本地MongoDB分片集群数据库中的各个Shard节点，迁移至阿里云MongoDB分片集群实例来实现迁移上云。通过DTS的增量迁移功能，可以实现在本地应用不停服的情况下，平滑...
数据库管理
本文介绍Lindorm时序引擎中的Database概念以及相关的功能。Database的概念 每个正在运行的Lindorm时序引擎实例都管理着一个或多个数据库（简称Database）。在各个Database之间，数据会被隔离。每个Database都有若干时序数据表，结合 名词...
数据集成概述
说明 以业务数据库数据同步到MaxCompute数据仓库为例，当有大量的数据存储在数据库系统里，需要将数据库中的全量及增量数据同步到MaxCompute进行数仓分析时，数据集成传统方式是通过全量同步或者依赖数据库表中的 modify_time 等字段进行...
MySQL分库分表同步至Hologres（方案1.0）
datasource、src_database、src_table），标识某条记录的来源数据源实例、数据库以及表，这三个附加字段和物理表中的主键在Hologres里构成了唯一键，保障了某条物理表记录在Hologres逻辑表里的唯一性，全量数据迁移以及实时增量数据写入时...
连续查询
使用连续查询 连续查询的管理 Lindorm时序引擎提供SQL能力用于管理数据库中的连续查询。连续查询的创建 在指定的Database下创建一个连续查询。SQL语法可参见 CREATE CONTINUOUS QUERY。说明 连续查询归属于指定的数据库，当数据库删除时，...
将ECS上单节点或副本集架构的自建MongoDB迁移上云
说明 为保障数据一致性，全量数据迁移期间请勿在自建MongoDB数据库中写入新的数据。如果需要进行不停机迁移，则同时选择 全量数据迁移 和 增量数据迁移。说明 单节点架构的自建MongoDB数据库，须提前开启oplog才可以使用增量数据迁移功能，...
使用DTS将MongoDB Atlas数据库迁移至阿里云
如果您的自建数据库具备白名单安全设置，您需要复制弹跳框中的DTS服务器IP地址，并加入自建数据库的白名单安全设置中。然后单击 测试连接以进行下一步。警告 DTS自动添加或您手动添加DTS服务的公网IP地址段可能会存在安全风险，一旦使用本...
将ECS上分片集群架构的自建MongoDB迁移上云
迁移原理介绍 DTS通过迁移分片集群中的每个Shard节点来实现分片集群数据库的整体迁移，您需要为每个Shard节点创建一个对应的数据迁移任务。说明 数据在目标MongoDB实例中的分布取决于您设置的片键，详情请参见 设置数据分片以充分利用Shard...
使用DTS迁移副本集架构的自建MongoDB数据库上云
使用数据传输服务DTS（Data Transmission Service），将副本集架构的自建MongoDB数据库迁移至云数据库MongoDB中。DTS支持全量数据迁移和增量数据迁移，同时使用这两种迁移类型可以实现在不停服的情况下，平滑地完成数据库的迁移上云。除本...
从自建Db2迁移至RDS MySQL
说明 如果未勾选 增量数据迁移，为保障数据一致性，数据迁移期间请勿在Db2数据库中写入新的数据。迁移对象 在 迁移对象 框中单击待迁移的对象，然后单击 图标将其移动到 已选择对象 框。说明 迁移对象选择的粒度可以为库、表、列三个粒度。...
使用DTS迁移分片集群架构的自建MongoDB数据库上云
本文介绍如何使用数据传输服务DTS（Data Transmission Service），依次将本地MongoDB分片集群数据库中的各个Shard节点，迁移至阿里云MongoDB分片集群实例来实现迁移上云。通过DTS的增量迁移功能，可以实现在本地应用不停服的情况下，平滑...
从MongoDB副本集实例迁移至分片集群实例
说明 如果未选中 增量数据迁移，为保障数据一致性，数据迁移期间请勿在源MongoDB数据库中写入新的数据。迁移对象 选择迁移对象，方法如下：从 迁移对象 列表中，选择待迁移的对象。单击 将其移动至 已选择对象 列表中。说明 不支持迁移...
云数据库MongoDB版（单节点架构）全量迁移至云数据库...
源数据库（单节点架构）目标数据库（所有架构）云数据库MongoDB版 云数据库MongoDB版 ECS上的自建数据库 ECS上的自建数据库 通过专线、VPN网关或智能网关接入的自建数据库 通过专线、VPN网关或智能网关接入的自建数据库 有公网IP的自建数据...
配置SQLServer数据源
此连接串中的Database为本数据源的默认数据库，但在配置同步任务时，您可以使用相应RDS实例下所有的数据库。用户名 登录数据库的用户名。密码 登录数据库的密码。选择 资源组连通性 类型为 数据集成。在资源组列表，单击相应资源组后的 ...
从Amazon RDS for PostgreSQL全量迁移至阿里云
数据库名称 填入Amazon RDS for PostgreSQL中的待迁移的数据库名。数据库账号 填入Amazon RDS for PostgreSQL的数据库账号，权限要求请参见 数据库账号的权限要求。数据库密码 填入该数据库账号的密码。说明 源库信息填写完毕后，您可以...
自建Oracle迁移至PolarDB-X
DTS支持全量数据迁移以及增量数据迁移，同时使用这两种迁移类型可以实现在自建应用平滑地完成Oracle数据库的数据迁移工作。本文以PolarDB-X 2.0为例，介绍如何使用数据传输服务DTS（Data Transmission Service）将自建Oracle数据库迁移至...
使用DTS将华为云文档数据库迁移至阿里云
如果您的自建数据库具备白名单安全设置，您需要复制弹跳框中的DTS服务器IP地址，并加入自建数据库的白名单安全设置中。然后单击 测试连接以进行下一步。警告 DTS自动添加或您手动添加DTS服务的公网IP地址段可能会存在安全风险，一旦使用本...
- 产品推荐
- 这些文档可能帮助您