创建数据表质量规则
新建调度 说明 规则配置调度时，可以基于当前已有的调度快速进行配置（每个表上限20个调度规则）。同一个规则最多能配置10个调度。调度配置完全一致时，支持自动去重。若当前表为Hologres分区表，建议使用固定任务触发调度。校验范围会作为...
创建数据表质量规则
新建调度 说明 规则配置调度时，可以基于当前已有的调度快速进行配置（每个表上限20个调度规则）。同一个规则最多能配置10个调度。调度配置完全一致时，支持自动去重。若当前表为Hologres分区表，建议使用固定任务触发调度。校验范围会作为...
用显式JOIN子句控制规划器
或者也可以连接 A 到 C 然后把结果与 B 连接—不过这么做效率不好，因为必须生成完整的 A 和 C 的迪卡尔积，而在 WHERE 子句中没有可用条件来优化该连接（本数据库执行器中的所有连接都发生在两个输入表之间，所以它必须以这些形式之一建立...
设置连接池
选择 连接池 RDS MySQL数据库代理连接池分为事务级连接池和会话级连接池，您可以按照实际使用场景选择是否使用连接池，以及使用连接池的类型：连接池类型 使用场景 事务级连接池（推荐）业务侧多为短连接 连接创建频繁 连接数量很大（大于...
DBCP 连接池连接 OceanBase 数据库示例程序
本文将介绍如何使用 DBCP 连接池、MySQL Connector/J 和 OceanBase 数据库构建一个应用程序，实现基本的数据库操作，包括创建表、插入、删除、更新和查询数据等。点击下载 dbcp-mysql-client 示例工程 前提条件 您已安装 OceanBase 数据库...
执行计划
Merge Join：排序两个表并且将它们连接起来。Merge Join：对于预排序好的数据很快。移动操作 移动操作算子（MOTION）在Segment节点之间移动数据，包括以下一些类型：Broadcast motion：每一个Segment节点将自己的行发送给所有其他Segment...
T+1多库合并建仓
为保证业务可以继续使用RDS数据库，业务端通常会采用分库分表技术，将一个RDS数据库中的单张表数据拆分到多个数据库的多张表中。上述方案可解决因数据量大而导致的用户体验问题，但在对分库分表数据进行大数据分析时，逻辑上的一个表被拆成...
HikariCP 连接池连接 OceanBase 数据库示例程序
本文将介绍如何使用 HikariCP 连接池、MySQL Connector/J 和 OceanBase 数据库构建一个应用程序，实现基本的数据库操作，包括创建表、插入、删除、更新和查询数据等。点击下载 hikaricp-mysql-client 示例工程 前提条件 您已安装 OceanBase...
使用EXPLAIN阅读查询计划
Merge Join：排序两个表并且将它们连接起来。Merge Join对于预排序好的数据很快。为了使查询优化器偏向选择Merge Join，可将参数enable_mergejoin设置为ON。移动操作算子（MOTION）在Segment节点之间移动数据，包括以下一些类型：Broadcast...
Tomcat 连接池连接 OceanBase 数据库示例程序
tomcat 连接池测试0 tomcat 连接池测试1 tomcat 连接池测试2 tomcat 连接池测试3 tomcat 连接池测试4 tomcat 连接池测试5 tomcat 连接池测试6 tomcat 连接池测试7 tomcat 连接池测试8 tomcat 连接池测试9 修改数据后的结果。修改后-POOl ...
离线同步数据质量排查
数据库则使用来源数据替换目标表已有数据，在目标表存在多个数据约束的情况下，数据替换可能会替换掉多条目标记录 如果写出数据和目标存储已有数据没有发生数据约束，数据库则将来源数据插入（和insert into行为限制一致）到目标存储中。...
DataStudio侧实时同步任务配置
示例1：将源端doc_前缀的表数据，写入前缀为pre_的目标表中。示例2：将多张表数据写入到一张目标表。将源端名称为"table_01"，"table_02"，"table_03"的表同步至一张名为"my_table"的表中。配置正则表名转换规则为：源：table.*，目标：my_...
迁移 OceanBase 数据库 Oracle 租户的数据至 Oracle ...
同时，数据传输支持将多个 OceanBase 数据库 Oracle 租户的表数据汇聚至 Oracle 数据库的同一张表中，其中无需结构迁移，只需要进行全量迁移和增量同步。该汇聚同步功能的使用限制如下：对于全量迁移和增量同步，源端有的列，目标端必须有...
PolarDB MySQL版同步至AnalyticDB MySQL 3.0
此类场景中，您可以借助DTS的多表归并功能将源库中多个表结构相同的表（即各分表）同步至目标库中的同一个表中。具体操作，请参见 开启多表归并。说明 选择源库的多个表后，您需要通过对象名映射功能，将其改为目标库中的同一个表名。关于...
PolarDB PostgreSQL版间的迁移
全量初始化会并发执行INSERT操作，导致目标数据库的表产生碎片，因此全量数据初始化完成后目标集群的表空间比源集群的表空间大。在DTS同步期间，不允许有除DTS外的数据写入目标库，否则会导致源库与目标库数据不一致。若DTS正向和反向同步...
配置转换组件
Join条件+新增条件 单击+新增条件，从多个数据源中选择Join的条件字段。说明 等号（=）左侧为数据源左表字段，右侧为数据源右表字段。完成Join条件配置后，单击 输出字段 页签。根据实际需要，在 列名称 列勾选需要的字段。配置字段计算器 ...
从RDS同步至MaxCompute
您可以通过MaxCompute的SQL命令，对这两个表执行合并操作，得到某个时间点的全量数据。本案例以customer表为例（表结构如下），介绍操作流程。根据源库中待同步表的结构，在MaxCompute中创建用于存储合并结果的表。例如，需要获取customer...
从RDS同步至MaxCompute
您可以通过MaxCompute的SQL命令，对这两个表执行合并操作，得到某个时间点的全量数据。本案例以customer表为例（表结构如下），介绍操作流程。根据源库中待同步表的结构，在MaxCompute中创建用于存储合并结果的表。例如，需要获取customer...
PolarDB-X 1.0同步至云原生数据仓库 AnalyticDB MySQL...
此类场景中，您可以借助DTS的多表归并功能将源库中多个表结构相同的表（即各分表）同步至目标库中的同一个表中。具体操作，请参见 开启多表归并。说明 选择源库的多个表后，您需要通过对象名映射功能，将其改为目标库中的同一个表名。关于...
RDS MySQL同步至AnalyticDB MySQL 3.0
此类场景中，您可以借助DTS的多表归并功能将源库中多个表结构相同的表（即各分表）同步至目标库中的同一个表中。具体操作，请参见 开启多表归并。说明 选择源库的多个表后，您需要通过对象名映射功能，将其改为目标库中的同一个表名。关于...
PolarDB MySQL版迁移至AnalyticDB MySQL 3.0
如果需要让部分表执行多表归并，另一部分不执行多表归并，您可以创建两个数据迁移任务。警告 源库请勿执行库或表结构变更的DDL操作，否则会导致数据不一致或者迁移任务失败。源库对象 在 源库对象 框中选择待迁移对象，然后单击 将其移动至...
概述
当应用程序使用 testAcc 连接数据库，并查询某个表中的 name、age 和 hobby 时，Proxy会将 name 和 age 列的数据进行脱敏后再返回，hobby 列的数据则未进行脱敏原样返回。Proxy会对不同类型的数据进行不同的脱敏处理，具体脱敏处理说明如下...
自建HBase迁移至云原生数据仓库 AnalyticDB MySQL 版 ...
如果需要让部分表执行多表归并，另一部分不执行多表归并，您可以创建两个数据迁移任务。警告 源库请勿执行库或表结构变更的DDL操作，否则会导致数据不一致或者迁移任务失败。源库对象 在 源库对象 框中单击待迁移的对象，然后单击 将其移动...
迁移 MySQL 数据库的数据至 OceanBase 数据库 MySQL ...
本文为您介绍如何使用数据传输迁移 MySQL 数据库的数据至 OceanBase 数据库 MySQL 租户。重要 如果数据迁移项目长期处于非活跃状态（项目状态为 失败、已暂停 或 已完成），受增量日志保留时长等影响，项目可能无法恢复。数据传输将主动...
RDS MySQL迁移至AnalyticDB MySQL 3.0
如果需要让部分表执行多表归并，另一部分不执行多表归并，您可以创建两个数据迁移任务。警告 源库请勿执行库或表结构变更的DDL操作，否则会导致数据不一致或者迁移任务失败。目标库对象名称大小写策略 您可以配置目标实例中迁移对象的库名...
PolarDB PostgreSQL版（兼容Oracle）集群同步至...
此类场景中，您可以借助DTS的多表归并功能将源库中多个表结构相同的表（即各分表）同步至目标库中的同一个表中。具体操作，请参见 开启多表归并。说明 选择源库的多个表后，您需要通过对象名映射功能，将其改为目标库中的同一个表名。关于...
同步 OceanBase 数据库 MySQL 租户的数据至 Analytic...
本文为您介绍如何同步 OceanBase 数据库 MySQL 租户的数据至云原生数据仓库 AnalyticDB MySQL 版。背景信息 AnalyticDB MySQL 版的基本介绍请参见 基础数据类型。AnalyticDB MySQL 版的建表、分区表和分布表的详情请参见 CREATE TABLE。...
同步 OceanBase 数据库的数据至 RocketMQ
支持的源端和目标端实例类型 下表中，OceanBase 数据库包括 MySQL 租户和 Oracle 租户两种租户类型，源端支持的实例类型包括 OceanBase 集群实例和 VPC 内自建数据库。源端 目标端 OceanBase 数据库 RocketMQ（阿里云 RocketMQ 实例）...
自建MySQL迁移至RDS MySQL
由于全量数据迁移会并发执行INSERT操作，导致目标数据库的表产生碎片，因此全量迁移完成后目标数据库的表存储空间会比源实例的表存储空间大。请确认DTS对数据类型为FLOAT或DOUBLE的列的迁移精度是否符合业务预期。DTS会通过 ROUND(COLUMN,...
迁移 RDS PostgreSQL 实例的数据至 OceanBase 数据库 ...
本文为您介绍如何使用数据传输迁移 RDS PostgreSQL 实例 的数据至 OceanBase 数据库 Oracle 租户。重要 如果数据迁移项目长期处于非活跃状态（项目状态为 失败、已暂停 或 已完成），受增量日志保留时长等影响，项目可能无法恢复。数据传输...
从自建MySQL迁移至RDS MySQL实例
由于全量数据迁移会并发执行INSERT操作，导致目标数据库的表产生碎片，因此全量迁移完成后目标数据库的表存储空间会比源实例的表存储空间大。请确认DTS对数据类型为FLOAT或DOUBLE的列的迁移精度是否符合业务预期。DTS会通过 ROUND(COLUMN,...
EMR Hive数据整库离线同步至MaxCompute
表 选择数据写入的MaxCompute表。分区信息 如果要写入的表为分区表，则您可以填入分区列的取值，取值可以是固定值如 ds=20220101，也可以是调度系统参数如 ds=${bizdate}。当任务运行时，会自动根据调度配置做参数替换。说明 分区信息会...
EMR Hive数据整库离线同步至MaxCompute
表 选择数据写入的MaxCompute表。分区信息 如果要写入的表为分区表，则您可以填入分区列的取值，取值可以是固定值如 ds=20220101，也可以是调度系统参数如 ds=${bizdate}。当任务运行时，会自动根据调度配置做参数替换。说明 分区信息会...
PolarDB PostgreSQL版（兼容Oracle）迁移至AnalyticDB...
如果需要让部分表执行多表归并，另一部分不执行多表归并，您可以创建两个数据迁移任务。警告 源库请勿执行库或表结构变更的DDL操作，否则会导致数据不一致或者迁移任务失败。目标库对象名称大小写策略 您可以配置迁移对象在目标实例中的...
RDS MySQL修改字符集（平滑方案）
在顶部菜单栏中，选择 数据库开发>数据导出>数据库导出。说明 此操作需要预先在页面右上方的 中，打开 顶部下拉菜单 的开关。设置导出信息。说明 由于目标实例的管控模式不同，您需要配置的参数和配置流程可能有所差异息。更多信息，请参见...
PolarDB-X 2.0同步至云原生数据仓库 AnalyticDB MySQL...
此类场景中，您可以借助DTS的多表归并功能将源库中多个表结构相同的表（即各分表）同步至目标库中的同一个表中。具体操作，请参见 开启多表归并。说明 选择源库的多个表后，您需要通过对象名映射功能，将其改为目标库中的同一个表名。关于...
自建MySQL迁移至PolarDB MySQL版
由于全量数据迁移会并发执行INSERT操作，导致目标数据库的表产生碎片，因此全量迁移完成后目标数据库的表存储空间会比源实例的表存储空间大。请确认DTS对数据类型为FLOAT或DOUBLE的列的迁移精度是否符合业务预期。DTS会通过 ROUND(COLUMN,...
RDS MySQL实例间的迁移
由于全量数据迁移会并发执行INSERT操作，导致目标数据库的表产生碎片，因此全量迁移完成后目标数据库的表存储空间会比源实例的表存储空间大。请确认DTS对数据类型为FLOAT或DOUBLE的列的迁移精度是否符合业务预期。DTS会通过 ROUND(COLUMN,...
创建DMS逻辑库的数据订阅任务
源库对象 从 源库对象 列表中，选择待订阅对象，单击图标，将其移动到 已选择对象 列表中。说明 订阅对象支持选择的粒度为库、表。如果选择整个库作为订阅对象，那么该库中新增对象的增量数据也可以被订阅到。如果选择某个表作为订阅对象，...
迁移 OceanBase 数据库 MySQL 租户的数据至 MySQL ...
本文为您介绍如何使用数据传输迁移 OceanBase 数据库 MySQL 租户的数据至 MySQL 数据库。重要 如果数据迁移项目长期处于非活跃状态（项目状态为 失败、已暂停 或 已完成），受增量日志保留时长等影响，项目可能无法恢复。数据传输将主动...
- 产品推荐
- 这些文档可能帮助您