创建OSS外部表
MaxCompute支持您在项目中创建OSS（Object Storage Service）外部表，与存储服务OSS上的目录建立映射关系，您可以通过OSS外部表访问OSS目录下的数据文件中的非结构化数据，或将MaxCompute项目中的数据写入OSS目录。本文为您介绍创建OSS外部...
离线同步常见问题
读取Loghub字段映射时读到的字段不符合预期 读取kafka配置了endDateTime来指定所要同步的数据的截止范围，但是在目的数据源中发现了超过这个时间的数据 Kafka中数据量少，但是任务出现长时间不读取数据也不结束，一直运行中的现象是为什么...
2021年
本文介绍 PolarDB PostgreSQL版（兼容Oracle）的产品功能动态，分别为内核小版本、控制台、时空数据库和API的更新说明。说明 您可通过如下语句查看 PolarDB PostgreSQL版（兼容Oracle）的内核小版本的版本号：show polar_version;2021年12...
迁移 Oracle 数据库的数据至 OceanBase 数据库 Oracle...
转换后可以确保源端不同字符集中的数据能成功迁移至目标端，但割接后反向增量可能会出现数据超长无法写回源端的问题。如果源端存在包含时区信息的数据类型（例如 TIMESTAMP WITH TIME ZONE），请您确保目标端数据库支持并存在源端对应的...
迁移 OceanBase 数据库 Oracle 租户的数据至 Oracle ...
本文为您介绍如何使用数据传输迁移 OceanBase 数据库 Oracle 租户的数据至 Oracle 数据库。重要 如果数据迁移项目长期处于非活跃状态（项目状态为 失败、已暂停 或 已完成），受增量日志保留时长等影响，项目可能无法恢复。数据传输将主动...
自建Oracle迁移至RDS PostgreSQL
由于目标RDS PostgreSQL不支持写入字符串的终止符（'\0'），若待同步的数据中包含该终止符，DTS不会将该终止符写入到目标库，从而会导致数据不一致。源自建Oracle的CHECK约束迁移到目标RDS PostgreSQL后，会转换成NOT NULL约束。您自定义的...
自建Oracle迁移至自建PostgreSQL
由于目标自建PostgreSQL不支持写入字符串的终止符（'\0'），若待同步的数据中包含该终止符，DTS不会将该终止符写入到目标库，从而会导致数据不一致。源自建Oracle的CHECK约束迁移到目标自建PostgreSQL后，会转换成NOT NULL约束。您自定义的...
自建Oracle迁移至PolarDB PostgreSQL版（兼容Oracle）
由于目标 PolarDB PostgreSQL版（兼容Oracle）集群不支持写入字符串的终止符（'\0'），若待迁移的数据中包含该终止符，DTS不会将该终止符写入到目标库，从而会导致数据不一致。源自建Oracle的CHECK约束迁移到目标 PolarDB PostgreSQL版...
Oracle数据源
Oracle数据源为您提供读取和写入Oracle双向通道的功能，方便您后续可以通过向导模式和脚本模式配置数据同步任务。本文为您介绍DataWorks的Oracle数据同步能力支持情况。支持的版本 离线读写 版本 离线读（Oracle Reader）离线写（Oracle ...
Tunnel命令常见问题
如果无法更换数据中的分隔符，可以将数据作为单独一行上传，然后使用UDF解析。如下示例数据中包含回车，使用“,”作为列分隔符-rd，使用“@”作为行分隔符-fd，可以正常上传。shopx,x_id,100@shopy,y_id,200@shopz,z_id,300@上传命令示例...
从Amazon RDS Oracle迁移至PolarDB PostgreSQL版...
由于目标 PolarDB PostgreSQL版（兼容Oracle）集群不支持写入字符串的终止符（'\0'），若待迁移的数据中包含该终止符，DTS不会将该终止符写入到目标库，从而会导致数据不一致。源自建Oracle的CHECK约束迁移到目标 PolarDB PostgreSQL版...
自建Oracle迁移至PolarDB PostgreSQL版（兼容Oracle）
由于目标 PolarDB PostgreSQL版（兼容Oracle）集群不支持写入字符串的终止符（'\0'），若待迁移的数据中包含该终止符，DTS不会将该终止符写入到目标库，从而会导致数据不一致。源自建Oracle的CHECK约束迁移到目标 PolarDB PostgreSQL版...
自建Oracle同步至PolarDB PostgreSQL版（兼容Oracle）
由于目标 PolarDB PostgreSQL版（兼容Oracle）集群不支持写入字符串的终止符（'\0'），若待同步的数据中包含该终止符，DTS不会将该终止符写入到目标库，从而会导致数据不一致。源自建Oracle的CHECK约束同步到目标 PolarDB PostgreSQL版...
COPY
如果值包含定界符字符、QUOTE 字符、NULL 字符串、一个回车或者换行字符，那么整个值会被加上 QUOTE 字符作为前缀或者后缀，并且在该值内 QUOTE 字符或者 ESCAPE 字符的任何一次出现之前放上转义字符。在输出指定列中非 NULL 值时，还可以...
读取数据
表格存储 提供了GetRow接口用于读取单行数据以及BatchGetRow、GetRange等接口用于读取多行数据。说明 组成表的基本单位为行，行由主键和属性列组成。其中主键是必须的，且每一行的主键列的名称和类型相同；属性不是必须的，且每一行的属性...
PolarDB PostgreSQL版（兼容Oracle）间的迁移
通过数据传输服务DTS（Data Transmission Service），可以实现 PolarDB PostgreSQL版（兼容Oracle）集群间的迁移。背景信息 PolarDB PostgreSQL版（兼容Oracle）作为一款企业级关系型数据库管理系统，具有广泛的应用和强大的社区支持。每个...
常见问题
Kafka中数据量少，但是任务出现长时间不读取数据也不结束，一直运行中的现象是为什么？写入OSS出现随机字符串如何去除？MySQL分库分表如何将分表同步到一张MaxCompute中。数据同步任务where条件没有索引，导致全表扫描同步变慢。目的端...
过滤器
在服务端对读取结果再进行一次过滤，根据过滤器（Filter）中的条件决定返回的行。使用过滤器后，只返回符合条件的数据行，从而有效降低网络传输的数据量，减少响应时间。场景 直接过滤结果 以物联网中的智能电表为例，智能电表按一定的频率...
RDS PostgreSQL 实例的数据至 OceanBase 数据库 ...
本文为您介绍如何使用数据传输迁移 RDS PostgreSQL 实例 的数据至 OceanBase 数据库 Oracle 租户。重要 如果数据迁移项目长期处于非活跃状态（项目状态为 失败、已暂停 或 已完成），受增量日志保留时长等影响，项目可能无法恢复。数据传输...
PolarDB PostgreSQL版（兼容Oracle）迁移至自建Oracle
通过使用数据传输服务DTS（Data Transmission Service），您可以实现 PolarDB PostgreSQL版（兼容Oracle）集群迁移至自建Oracle。前提条件 已创建源 PolarDB PostgreSQL版（兼容Oracle）集群，详情请参见 创建PolarDB PostgreSQL版（兼容...
配置并管理实时同步任务
匹配除换行符以外的所有字符 x?匹配0次或一次x字符串 x*匹配0次或多次x字符串,但匹配可能的最少次数 x+匹配1次或多次x字符串,但匹配可能的最少次数.*匹配0次或多次的任何字符.+匹配1次或多次的任何字符 {m} 匹配刚好是m个的指定字符串 {m,n...
OceanBase 数据库之间的数据迁移
参数 描述 读取并发配置 该参数用于配置全量迁移阶段从源端读取数据的并发数，最大限制为 512.并发数过高可能会造成源端压力过大，影响业务。写入并发配置 该参数用于配置全量迁移阶段往目标端写入数据的并发数，最大限制为 512。并发数过...
分区表简介
本文详细介绍了 PolarDB PostgreSQL版（兼容Oracle）分区表功能的优势和特性。概述 在 PolarDB PostgreSQL版（兼容Oracle）数据库中，分区表(Partitioned Table)是将一个表或索引物理地分解为多个更小、更便于管理的部分，这个部分称为分区...
分区表简介
本文详细介绍了 PolarDB PostgreSQL版（兼容Oracle）分区表功能的优势和特性。概述 在 PolarDB PostgreSQL版（兼容Oracle）数据库中，分区表(Partitioned Table)是将一个表或索引物理地分解为多个更小、更便于管理的部分，这个部分称为分区...
PolarDB PostgreSQL版（兼容Oracle）间迁移
通过使用数据传输服务DTS（Data Transmission Service），您可以实现 PolarDB PostgreSQL版（兼容Oracle）集群间的数据迁移。前提条件 已创建源和目标 PolarDB PostgreSQL版（兼容Oracle）集群，详情请参见 创建PolarDB PostgreSQL版（兼容...
2020年
本文介绍 PolarDB PostgreSQL版（兼容Oracle）的产品功能动态，分别为内核小版本、控制台、时空数据库和API的更新说明。说明 您可通过如下语句查看 PolarDB PostgreSQL版（兼容Oracle）的内核小版本的版本号：show polar_version;2020年12...
RDS PostgreSQL 实例的数据至 OceanBase 数据库 ...
本文为您介绍如何同步 RDS PostgreSQL 实例的数据至 OceanBase 数据库 Oracle 租户。前提条件 数据传输已具备云资源访问权限。详情请参见 数据传输迁移角色授权。已为源端 RDS PostgreSQL 实例创建专用于数据同步项目的高权限账号。详情请...
PolarDB PostgreSQL版（兼容Oracle）集群间的双向同步
本文介绍如何使用数据传输服务DTS（Data Transmission Service）实现 PolarDB PostgreSQL版（兼容Oracle）集群间的双向同步。前提条件 已创建源和目标 PolarDB PostgreSQL版（兼容Oracle）集群，详情请参见 创建PolarDB PostgreSQL版（兼容...
读取数据
表格存储 提供了单行读取、批量读取、范围读取、迭代读取和并行读取的查询方式用于读取数据表中数据。数据写入到数据表后，您可以选择所需数据查询方式进行数据读取。如果需要了解 表格存储 各场景的应用案例，请参见 快速玩转Tablestore...
MaxCompute数据源
MaxCompute数据源作为数据中枢，为您提供读取和写入数据至MaxCompute的双向通道。使用限制 说明 DataWorks的MaxCompute数据源可使用 Tunnel Endpoint 地址访问相应MaxCompute项目的Tunnel服务，从而通过上传、下载等方式同步该项目的数据。...
导入与导出
本文介绍AnalyticDB MySQL中导入导出的常见问题及解决方法。说明 当常见问题场景中未明确产品系列时，表明该问题仅适用于 AnalyticDB MySQL 数仓版（3.0）。常见问题概览 如何停止异步导入导出任务？如何使用SQL查看当前库里RUNNING的导入...
OSS数据源
OSS数据源为您提供读取和写入OSS的双向通道，本文为您介绍DataWorks的OSS数据同步的能力支持情况。支持的字段类型与使用限制 离线读 OSS Reader实现了从OSS读取数据并转为数据集成协议的功能，OSS本身是无结构化数据存储。对于数据集成而言...
PolarDB PostgreSQL版（兼容Oracle）迁移至AnalyticDB...
通过使用数据传输服务DTS（Data Transmission Service），您可以实现 PolarDB PostgreSQL版（兼容Oracle）集群迁移至 云原生数据仓库 AnalyticDB MySQL 版 3.0。前提条件 已创建目标 云原生数据仓库 AnalyticDB MySQL 版 3.0，详情请参见 ...
pg_dump
pg_dump是 PolarDB PostgreSQL版（兼容Oracle）提供的一种逻辑备份工具，用于将集群中的单个数据库备份为脚本文件或其他存档文件。简介 pg_dump用于备份单个数据库。即使当前数据库正在被访问，也会对正在访问的数据进行一致的备份，并且在...
2022年
本文介绍 PolarDB PostgreSQL版（兼容Oracle）的产品功能动态，分别为内核小版本、控制台、时空数据库和API的更新说明。说明 您可通过如下语句查看 PolarDB PostgreSQL版（兼容Oracle）的内核小版本的版本号：show polar_version;2022年12...
配置OSS输出组件
配置OSS输出组件，可以将外部数据库中读取的数据写入到OSS，或从大数据平台对接的存储系统中将数据复制推送至OSS，进行数据整合和再加工。本文为您介绍如何配置OSS输出组件。前提条件 已创建OSS数据源。具体操作，请参见 创建OSS数据源。...
配置OSS输出组件
配置OSS输出组件，可以将外部数据库中读取的数据写入到OSS，或从大数据平台对接的存储系统中将数据复制推送至OSS，进行数据整合和再加工。本文为您介绍如何配置OSS输出组件。前提条件 已创建OSS数据源。具体操作，请参见 创建OSS数据源。...
配置Amazon S3输出组件
配置Amazon S3输出组件，可以将外部数据库中读取的数据写入到Amazon S3，或从大数据平台对接的存储系统中将数据复制推送至Amazon S3，进行数据整合和再加工。本文为您介绍如何配置Amazon S3输出组件。前提条件 已创建Amazon S3数据源。具体...
配置Amazon S3输出组件
配置Amazon S3输出组件，可以将外部数据库中读取的数据写入到Amazon S3，或从大数据平台对接的存储系统中将数据复制推送至Amazon S3，进行数据整合和再加工。本文为您介绍如何配置Amazon S3输出组件。前提条件 已创建Amazon S3数据源。具体...
PolarDB PostgreSQL版（兼容Oracle）逻辑备份
数据库备份DBS 可满足 PolarDB PostgreSQL版（兼容Oracle）数据库的单表恢复、异地备份、长期归档等需求。本文介绍如何使用DBS备份 PolarDB PostgreSQL版（兼容Oracle）数据库。创建备份计划 具体操作，请参见 创建备份计划。说明 购买时，...
- 产品推荐
- 这些文档可能帮助您