流式数据通道概述
MaxCompute流式数据通道服务可以解决流式服务使用批量数据通道写入数据引发的各种问题，优势如下：更优化的数据存储结构，解决高QPS写入导致的碎片文件问题。提供了增量数据异步处理机制，可以在使用过程中无感知情况下对新写入的增量数据...
新建离线自定义源类型
Dataphin支持自定义离线数据源，以满足不同业务场景数据同步的需求。前提条件 对于RDBMS数据...后续步骤 完成离线自定义源类型创建后，系统将生成该类型的数据源配置项，您可将该类型的数据源接入到Dataphin中。详情请参见 新建自定义数据源。
新建离线自定义源类型
Dataphin支持自定义离线数据源，以满足不同业务场景数据同步的需求。前提条件 对于RDBMS数据...后续步骤 完成离线自定义源类型创建后，系统将生成该类型的数据源配置项，您可将该类型的数据源接入到Dataphin中。详情请参见 新建自定义数据源。
路况层
说明 如果 数据项目 和 数据集 配置项内没有任何可供配置数据类型的内容，请您单击面板内 前往空间构建平台管理数据 处，进入空间构建平台配置数据。详情请参见 空间数据管理概览。蓝图交互 在当前场景编辑器页面，单击左侧图层列表中 路况...
迁移 Oracle 数据库的数据至 OceanBase 数据库 Oracle...
不支持迁移 ROWID、BFILE、XMLType、UROWID、UNDEFINED 和 UDT 类型的数据。不支持 LONG 或 LONG RAW 类型的表进行增量同步。Oracle 数据库 OceanBase 数据库 Oracle 租户 CHAR(n CHAR)CHAR(n CHAR)CHAR(n BYTE)CHAR(n BYTE)NCHAR(n)NCHAR...
概览
AnalyticDB PostgreSQL版 提供多种数据迁移方案，可满足不同的数据同步或迁移的业务需求，您可以在不影响业务的情况下，平滑地与各种类型的数据库实例进行迁移或数据同步。迁移数据到AnalyticDB PostgreSQL版 迁移类型 文档 简介 是否支持...
配置Hive输出组件
数据源 在数据源下拉列表中，展示所有Hive类型的数据源，包括您已拥有同步写权限的数据源和没有同步写权限的数据源。对于没有同步写权限的数据源，您可以单击数据源后的 申请，申请数据源的同步写权限。具体操作，请参见 申请数据源权限。...
设置增量同步位点
详情请参见相应类型的 数据迁移 或 数据同步 项目文档。在 选择迁移类型 或 选择同步类型 页面，根据业务需求进行选择。请注意此处必须勾选 增量同步，并且不能勾选 全量迁移/全量同步。根据提示继续完成配置至 迁移选项/同步选项 页面，在...
DescribeDataAssets-查询数据资产敏感信息
1536751124000 DataType string 数据资产所属的数据类型。OSS_BUCKET Owner string 数据资产所属者账号。dtdep-239-*SensitiveRatio string 在所有数据资产中敏感数据所占的比例。45%Protection boolean 数据资产的防护状态，固定值：false...
从自建Db2迁移至RDS MySQL
DTS基于Db2的CDC复制技术将自建Db2数据库的增量更新数据同步到目标库中，但是CDC复制技术自身具有限制，请参见 CDC复制技术所支持数据类型的限制。费用说明 迁移类型 链路配置费用 公网流量费用 结构迁移和全量数据迁移 不收费。通过公网将...
数据集成概述
例如，源端是VARCHAR类型的数据写到INT类型的目标列中，导致因为转换不合理而无法写入的数据。您可以在同步任务配置时，控制同步过程中是否允许脏数据产生，并且支持控制脏数据条数，即当脏数据超过指定条数时，任务失败退出。由于脏数据...
从自建Db2迁移至RDS MySQL
DTS基于Db2的CDC复制技术将自建Db2数据库的增量更新数据同步到目标库中，但是CDC复制技术自身具有限制，请参见 CDC复制技术所支持数据类型的限制。费用说明 迁移类型 链路配置费用 公网流量费用 结构迁移和全量数据迁移 不收费。通过公网将...
配置HDFS输出组件
如果您还没有HDFS类型的数据源，单击 新建，创建数据源。具体操作，请参见 创建HDFS数据源。文件路径 填写读取文件的路径。您可以在FTP或者HDFS的服务器上获取文件路径。文件类型 选择将数据转换成存储的文件类型。文件类型 包括 Text、ORC...
术语
二级备份的数据全部来自于一级备份，可以永久保存，成本低但恢复速度较慢。更多详情，请参见 备份数据。日志备份（Log Backup）日志备份是把数据库的Redo日志保存下来，用于按时间点恢复，为了保证最近一段时间数据的安全性，避免误操作...
ActionTrail日志清洗
说明 根据业务需求，判断是否需要新建文件夹，将ActionTrail投递过来的数据存储在新建文件夹中。在DLA中完成以下操作：开通DLA服务，请参见 开通云原生数据湖分析服务。初始化DLA数据库主账号密码，请参见 重置数据库账号密码。步骤一：...
购买数据同步项目
您可以根据本文操作购买相应类型的数据同步项目后，再对项目进行具体配置和管理。数据同步项目的计费详情请参见 数据传输计费说明。操作步骤 登录 OceanBase 管理控制台。在左侧导航栏，单击 数据传输>数据同步。在 数据同步 页面，单击 ...
数据同步流程
根据业务需求，购买相应类型的数据同步项目。详情请参见 购买数据同步项目。配置数据同步项目，并在通过预检查后启动项目的运行。详情请参见相应类型的数据同步项目文档。查看数据同步项目的状态。数据同步项目启动后，会根据选择的同步...
配置FTP输出组件
数据源 在数据源下拉列表中，展示所有FTP类型的数据源，包括您已拥有同步写权限的数据源和没有同步写权限的数据源。对于没有同步写权限的数据源，您可以单击数据源后的 申请，申请数据源的同步写权限。具体操作，请参见 申请数据源权限。...
配置FTP输出组件
数据源 在数据源下拉列表中，展示所有FTP类型的数据源，包括您已拥有同步写权限的数据源和没有同步写权限的数据源。对于没有同步写权限的数据源，您可以单击数据源后的 申请，申请数据源的同步写权限。具体操作，请参见 申请数据源权限。...
同步 RDS PostgreSQL 实例的数据至 OceanBase 数据库 ...
FLOAT double precision BINARY_DOUBLE smallserial NUMBER(5)serial NUMBER(10)bigserial NUMBER(20)char CHAR(n)说明 CHAR 数据类型的列默认长度为 1 个字节，支持的最大长度为 2000 个字节。varchar VARCHAR2(n)text CLOB timestamp ...
数据迁移流程
根据业务需求，购买相应类型的数据迁移项目。详情请参见 购买数据迁移项目。配置数据迁移项目，并在通过预检查后启动项目的运行。详情请参见相应类型的数据迁移项目文档。查看数据迁移项目的状态。数据迁移项目启动后，会根据选择的迁移...
创建数据脱敏场景
该场景下，数据在存储过程中便会按照配置的脱敏规则识别敏感数据并将其脱敏，脱敏完成后再将数据存储至指定数据库位置。权限控制 新增、编辑、删除脱敏场景：租户管理员、租户安全管理员 可选择的数据范围为租户下所有项目空间。空间管理员...
数据库导出
存储过程 函数 触发器 视图 事件 说明 不同类型的数据库支持的导出结构类型不同，请以控制台为准。更多选项 单击 大数据导出选项 或 SQL脚本拓展选项，然后选中对应的导出选项。工单附件 您可以上传图片或文档对本次的导出操作进行补充说明...
数据导入方式介绍
弹性导入支持的数据类型为：boolean、tinyint、smallint、int、bigint、float、double、decimal、varchar、date、time、datetime、timestamp。注意事项 弹性导入仅支持在Job资源组中读取源数据和构建索引，会消耗Job型资源组的资源，从而...
通过样本库识别
说明 一个 数据识别规则 仅支持识别一种类型的数据，因此，建议您的每个样本库中存放同类型的数据。如果您需要使用样本库方式识别多个类型的数据，则需要配置多个样本库。例如，您需要识别员工姓名、家庭住址，则需要配置姓名样本库及家庭...
迁移 RDS PostgreSQL 实例的数据至 OceanBase 数据库 ...
FLOAT double precision BINARY_DOUBLE smallserial NUMBER(5)serial NUMBER(10)bigserial NUMBER(20)char CHAR(n)说明 CHAR 数据类型的列默认长度为 1 个字节，支持的最大长度为 2000 个字节。varchar VARCHAR2(n)text CLOB timestamp ...
从PolarDB MySQL版同步至云原生数据仓库 AnalyticDB ...
数据类型映射关系 详情请参见 结构初始化涉及的数据类型映射关系。操作步骤 购买数据同步任务。说明 购买时，选择源实例为 PolarDB、目标实例为 AnalyticDB MySQL，并选择同步拓扑为 单向同步。登录 数据传输控制台。说明 若数据传输控制台...
配置Amazon S3输入组件
数据源 下拉列表中展示Dataphin中所有Amazon S3类型的数据源。对于您没有同步读权限的数据源，您可以单击数据源后的 申请，申请对应数据源的读取权限。申请数据源读取权限的具体操作，请参见 申请数据源权限。如果您还没有Amazon S3类型的...
配置Amazon S3输入组件
数据源 下拉列表中展示Dataphin中所有Amazon S3类型的数据源。对于您没有同步读权限的数据源，您可以单击数据源后的 申请，申请对应数据源的读取权限。申请数据源读取权限的具体操作，请参见 申请数据源权限。如果您还没有Amazon S3类型的...
创建数据源
示例：在 ODC 中创建 OceanBase MySQL 类型的数据源 obmysql4.2.0，并将数据源绑定到项目 odc_4.2.0。信息项 示例值 项目名称 odc_4.2.0 数据源名称 obmysql4.2.0 集群名 odctest 租户名 mysql 数据库用户名 odctest 数据库密码*进入 ...
数据表-数据概况
功能说明 在数据表详情的数据概况标签页，基于对元数据及存储数据的统计，为您提供了数据表更加详细的指标信息，比如表存储大小、表文件总数、DDL最后更新时间、数据最后更新时间、访问次数、分区存储大小，分区文件数，分区最后更新时间等...
计费项
其他类型的数据订阅实例暂不收取数据流量费。数据校验 链路配置费用 详情请参见 数据校验计费方式。专属集群 集群规格费用、公网流量费用、存储费用 详情请参见 DTS专属集群计费方式。常见问题 为什么没有传输数据的按量付费实例还在收费？...
支持的数据库
本文详细介绍DTS支持的数据库、迁移类型、同步初始化类型、同步拓扑和支持订阅的数据类型。说明 关于文中涉及的迁移类型、同步类型、订阅的数据类型等相关术语的详细解释，请参见 基本概念。当前仅当目标库为函数计算FC时，不支持跨地域的...
数据类型转换
本文为您介绍迁移 MySQL 数据库的数据至 OceanBase 数据库 MySQL 租户时，数据类型转换的支持范围。支持的转换类型 数值类型 分类 MySQL 数据库 OceanBase 数据...重要 如果出现不支持转换的数据类型，会导致输出空语句。不支持 SERIAL 类型。
存储说明
本文介绍E-MapReduce集群中数据存储相关的信息，包括磁盘角色、云盘与本地盘，以及OSS。背景信息 关于存储的类型、性能和相关的限制信息，请参见 什么是块存储。存储价格估算如下：本地盘实例存储为0.04 元/GB/月 OSS标准型存储为0.12 元/...
Dataphin支持的实时数据源
Ververica Flink支持的实时数据源 存储类型 数据源类型 读 写 维表读 大数据存储 MaxCompute 支持 支持 支持 DataHub 支持 支持-Hologres 支持 支持 支持 数据湖 Hudi 支持 支持-Iceberg 支持（仅支持原生DDL方式）支持（仅支持原生DDL方式...
管理数仓规划待发布对象
替换规则的生效范围：仅针对 新增 及 变更 类型的数据源。在 新增替换规则 对话框中，配置替换规则。配置规则步骤 描述 一.选择替换数据源的范围 设置数据源类型。选择您需替换数据源对象属性的数据源类型。如MaxCompute。添加圈选规则。...
管理数仓规划待发布对象
替换规则的生效范围：仅针对 新增 及 变更 类型的数据源。在 新增替换规则 对话框中，配置替换规则。配置规则步骤 描述 一.选择替换数据源的范围 设置数据源类型。选择您需替换数据源对象属性的数据源类型。如MaxCompute。添加圈选规则。...
创建数据库
本文将介绍如何在 PolarDB-X 1.0 控制台上根据不同存储类型创建对应的数据库。前提条件 您需要 创建实例 后才能创建数据库。说明 创建实例时所选择的存储类型将决定您在创建数据库时所使用的存储类型，例如您在创建实例时选择的是 RDS ...
OceanBase 数据库支持版本
数据库对象（MySQL 模式）本文档为您介绍 OceanBase 数据库 MySQL 模式下所支持的数据库对象类型、存储方式和数据库对象。与 MySQL 兼容性对比 本文档主要介绍 OceanBase 数据库的 MySQL 模式与原生 MySQL 数据库的兼容性对比信息。PL 参考...
- 产品推荐
- 这些文档可能帮助您