功能简介
通过数据同步的自定义同步任务配置能力，可实现快速创建周期数据同步任务和实时同步任务。用户可选择已经注册的数据源端数据，并选定目标端创建同步任务。系统提供目标端自动建表、源端目标端字段自动映射、批量创建同步任务和引用数据模块...
查看同步任务
DataHub DataConnector是把DataHub服务中的流式数据同步到其他云产品中的功能，目前支持将Topic中的数据实时/准实时同步到MaxCompute(ODPS)、OSS、ElasticSearch、RDS Mysql、ADS、TableStore中。用户只需要向DataHub中写入一次数据，并在...
数据库管理
本文为您介绍如何创建和删除 PolarDB PostgreSQL版 数据库。创建数据库 登录 PolarDB控制台。在控制台左上角，选择地域。单击目标集群ID。在左侧导航栏中，选择 配置与管理>数据库管理。单击 创建数据库。在 创建数据库 对话框中，设置以下...
同步或迁移源库中的触发器
前提条件 同步或迁移实例的源和目标数据库需为指定类型的数据库，例如RDS Mariadb同步到RDS MySQL。更多信息，请参见 支持的实例。实例同时包含库表结构和增量任务。支持的实例 源库 目标库 说明 MySQL、PolarDB MySQL版、MariaDB MySQL、...
数据库管理
本文为您介绍如何创建以及删除 PolarDB PostgreSQL版（兼容Oracle）数据库。创建数据库 登录 PolarDB控制台。在控制台左上角，选择集群所在地域。找到目标集群，单击集群ID。在左侧导航栏中，选择 配置与管理>数据库管理。单击 创建数据库...
数据导入与迁移
RDS增量数据同步 通过BDS数据同步服务可以将RDS增量数据实时同步到HBase增强版中，使用说明：开通 LTS服务。在BDS中添加HBase增强版集群关联，具体操作方法参见 添加HBase增强版数据。请参见 RDS全增量同步 完成配置。HBase迁移至HBase增强...
DM（达梦）数据源
否 无 fetchSize 该配置项定义了插件和数据库服务器端每次批量数据获取条数，该值决定了数据同步系统和服务器端的网络交互次数，能够提升数据抽取性能。说明 fetchSize 值过大（>2048）可能造成数据同步进程OOM。否 1,024 Writer脚本Demo {...
数据同步概述
编写代码的方式构建代码任务，以实现数据同步的流程：可选：上传应用函数资源，详情请参见 上传资源及引用。可选：新建脚本中使用到函数，详情请参见 新建用户自定义函数。新建同步目标表的创建，详情请参见 新建同步目标表。新建代码任务...
数据同步概述
编写代码的方式构建代码任务，以实现数据同步的流程：可选：上传应用函数资源，详情请参见 上传资源及引用。可选：新建脚本中使用到函数，详情请参见 新建用户自定义函数。新建同步目标表的创建，详情请参见 新建同步目标表。新建代码任务...
ASP.NET程序网站如何在多个站点之间实现Session共享
当然，可以考虑多台NFS服务器同步的形式。这个方案都可以解决，目前Zookeeper或者Memcached也可以实现Session共享。利用MySQL数据库共享Session数据 这个方式与NFS的方式类似，也是采用一台MySQL服务器做共享服务器，将所有的Session数据...
MySQL一键实时同步至MaxCompute
您需要将数据库添加至DataWorks上，以便在同步任务配置时，可通过选择数据源名称来控制同步读取和写入的数据库。本实践中创建的数据源名为 doc_mysql1，详情请参见 配置MySQL数据源、配置MaxCompute数据源。说明 数据源相关能力介绍详情请...
MySQL一键实时同步至MaxCompute
您需要将数据库添加至DataWorks上，以便在同步任务配置时，可通过选择数据源名称来控制同步读取和写入的数据库。本实践中创建的数据源名为 doc_mysql1，详情请参见 配置MySQL数据源、配置MaxCompute数据源。说明 数据源相关能力介绍详情请...
使用ClickHouse-Local迁移上云
当您需要优化数据管理、提高数据访问性能和降低数据库维护成本时，您可以将自建数据库迁移至云数据库ClickHouse企业版。云数据库ClickHouse企业版通过ClickHouse-Local工具为您的迁移任务提供了简便且可靠的解决方案。什么是ClickHouse-...
MSCK REPAIR DATABASE
MSCK REPAIR DATABASE db_name 示例 msck repair database db001 注意事项 如果DataBase对应的数据源是adbpg，因为adbpg中一个数据库会存在多个schema，不同schema中可能存在表名一样的表，所以只能识别出public schema中的表。
结束数据同步作业
如果不再需要数据同步，您可以结束数据同步作业，停止将源库的数据变更同步至目标库。前提条件 数据同步作业处于 同步中、已暂停、同步失败、同步初始化中 或 同步初始化失败 状态。注意事项 结束数据同步作业后，数据同步作业将处于 已...
全增量同步任务运维
全量离线同步 和 实时同步 区域展示当前查看的全增量同步任务中，全量离线同步 或 实时同步 子任务同步的来源数据源、当前同步速率、同步数据、同步数据的延迟情况及所使用资源组的详细信息。执行步骤 区域展示当前查看的全增量同步任务，...
数据迁移和同步方案概览
云数据库ClickHouse提供了多种数据迁移和同步方案，可满足不同业务场景下数据库的数据迁移和同步需求。使用场景 数据源 文档链接 从Kafka同步 Kafka 从Kafka同步 从Flink导入 Flink 从JDBC connector导入 从Flink SQL导入 从大数据导入/...
一键MaxCompute任务出错恢复
对于一键整库实时同步至MaxCompute任务，可以参看上文，执行 全量补数据将当前全量数据同步至历史分区。不支持按时间范围补历史数据。对于其他全增量同步任务，您需要手动 创建离线同步任务，补回历史数据。Merge任务的报错失败 失败后的...
数据传输规格说明
不同的实例规格对应了增量同步的不同 RPS 性能表现，以及建议迁移或同步的最大表对象数量，通过 OceanBase 数据传输服务可以实现数据秒级同步至目标端。但是受限于源端实例的运行负载、传输网络的带宽、网络延时和目标端实例写入性能等多种...
基本概念
对于异构数据库之间的结构迁移，DTS会将源库的结构定义转换为目标库支持的结构定义，例如将Oracle数据库中的NUMBER数据类型转换为MySQL数据库中的DECIMAL数据类型。全量数据迁移 在全量数据迁移阶段，DTS会将源数据库的存量数据全部迁移到...
CREATE SERVER
服务器名称在数据库中必须唯一。创建服务器要求使用外部数据包装器上的USAGE特权。在使用 DBLink 模块时，一个外部服务器的名称可以被用作 dblink_connect 函数的一个参数来指示连接参数。以这种方式使用外部服务器，需要具有外部服务器的...
应用场景
不停机迁移数据库 传输方式：数据迁移 为了保证数据的一致性，传统的迁移过程需要您在迁移数据时停止向源数据库写入数据。根据数据量和网络条件，迁移过程可能需要几个小时甚至几天的时间。这个漫长的过程可能会对您的业务产生很大的影响。...
数据引入概述
背景信息 如果您是在 2020年4月之后 购买的Dataphin，则数据同步能力通过数据集成功能实现（即系统 不再提供数据同步的功能入口）。数据集成为您提供简单高效、安全可靠的数据同步平台。数据集成支持通过整库迁移（快速生成批量同步任务）...
数据引入概述
背景信息 如果您是在 2020年4月之后 购买的Dataphin，则数据同步能力通过数据集成功能实现（即系统 不再提供数据同步的功能入口）。数据集成为您提供简单高效、安全可靠的数据同步平台。数据集成支持通过整库迁移（快速生成批量同步任务）...
使用限制
云数据库MongoDB版（副本集架构）同步至云数据库MongoDB版（副本集架构或分片集群架构）使用MongoShake实现MongoDB实例间的单向同步 使用MongoShake实现MongoDB实例间的延迟同步 连接实例 云数据库MongoDB支持使用以下方法连接副本集实例。...
管理数据库
您可以在控制台管理所有的 PolarDB 数据库。创建数据库 登录 PolarDB控制台。在控制台左上角，选择集群所在地域。找到目标集群，单击集群ID。在左侧导航栏中，单击 配置与管理>数据库管理。单击 创建数据库。在 创建数据库 面板中，设置...
通过DataWorks导入
您需要在数据集成同步任务配置前，配置好您需要同步的源端和目标端数据库，以便在同步任务配置过程中，可通过选择数据源名称来控制同步任务的读取和写入数据库。离线同步支持的数据源及其配置详情请参见 支持的数据源与读写插件。说明 数据...
数据库管理
本文介绍如何创建并删除MyBase MySQL实例数据库。前提条件 您已创建MyBase MySQL实例。具体操作，请参见 创建MyBase MySQL实例。创建数据库 登录 云数据库专属集群控制台。在页面左上角，选择目标地域。在页面左侧单击 实例管理>MySQL。...
查看监控信息
创建数据库服务后，您可以通过控制台查看数据库服务的CPU、内存、存储和存储IOPS（Input/Output Operations Per Second）和当前总连接数的详细信息。本文介绍如何查看数据库服务的监控信息。操作步骤 登录 轻量应用服务器管理控制台。在...
通过DataWorks导入数据
您需要在数据集成同步任务配置前，配置好您需要同步的源端和目标端数据库，以便在同步任务配置过程中，可通过选择数据源名称来控制同步任务的读取和写入数据库。离线同步支持的数据源及其配置详情请参见 支持的数据源与读写插件。说明 数据...
重置数据库密码
操作步骤 登录 轻量应用服务器...如果数据库服务较多，可在搜索文本框中，输入数据库服务实例ID筛选数据库服务。在 数据库服务信息 区域，单击 密码 下的 重置密码。在 数据库服务密码重置 对话框中，输入数据库密码并确认密码。单击 确定。
CREATE SERVER
服务器名称在数据库中必须唯一。创建服务器要求使用外部数据包装器上的USAGE特权。在使用 DBLink 模块时，一个外部服务器的名称可以被用作 dblink_connect 函数的一个参数来指示连接参数。以这种方式使用外部服务器，需要具有外部服务器的...
2022年
支持的地域列表 迁移、同步或订阅本地数据库时需添加的IP白名单 2022年5月 类型 重点内容 相关文档 新增 支持Db2 for LUW到 云原生数据仓库 AnalyticDB MySQL 版 3.0的数据同步功能。Db2 for LUW同步至AnalyticDB MySQL版 3.0 新增 支持Db2...
续费数据库服务
创建数据库服务时支持设置自动续费，您也可以在创建数据库服务后，手动续费数据库服务。本文介绍如何手动续费数据库服务。背景信息 数据库服务到期后将会自动关机。从到期时间开始计算，15天内数据库服务的状态显示为 已禁用，该状态下数据...
登录数据库
您需要登录图数据库GDB才能对数据库内的数据进行查询和分析，本教程以DMS为例介绍如何登录数据库。前提条件 已根据快速入门完成创建账号步骤，具体操作请参见 创建账号。操作步骤 登录 DMS数据管理服务控制台。单击页面左侧 数据库实例 旁...
自建SQL Server通过物理网关迁移上云
本文介绍如何通过DTS控制台的物理网关迁移上云功能将ECS、IDC或其他云服务器中的自建SQL Server数据库迁移到RDS SQL Server。该功能采用物理网关协议的接入方式，具有速度快、操作简单、稳定性好、场景覆盖全等特点，能够有效提高迁移效率...
启动和暂停数据同步项目
启动数据同步项目 创建数据同步项目时，如果在预检查完成后仅保存该数据同步项目，未进行启动，则需要在同步项目列表中手动启动数据同步项目。登录 OceanBase 管理控制台。在左侧导航栏，单击 数据传输>数据同步。在 同步项目列表 页面，...
创建轻量数据库服务
创建轻量数据库服务时，您需要配置地域、套餐、购买时长以及数据库版本等信息，您可以根据业务需要进行个性化配置。本文介绍如何创建轻量数据库服务。使用限制 数据库服务目前支持的地域包括华东1（杭州）、华北2（北京）、华南1（深圳）和...
场景：调度参数在数据集成的典型应用场景
背景信息 DataWorks数据集成结合调度参数使用，可实现以下场景：场景 说明 相关文档 增量数据同步 部分Reader插件可通过调度参数实现每次调度只同步指定时间范围内的数据至目标端。同时，您可以结合 补数据 功能，实现将对应时间内的数据...
修改数据库参数
数据库服务创建后，您可以查看数据库的参数信息，或者根据业务需求修改数据库参数。本文介绍如何查看并修改数据库参数。操作步骤 登录 轻量应用服务器管理控制台。在左侧导航栏，单击 数据库服务。单击数据库服务实例ID。如果数据库服务较...
- 产品推荐
- 这些文档可能帮助您