配置PolarDB输入组件
表 选择数据同步的来源表：如果 来源表量 选择了 单表，在下拉列表中选择读取数据的表。如果 来源表 选择了 多表，则按照下图操作指引，添加需要读取数据的多个表。在①处配置筛选多表的表达式，连续多个表的格式如 table[A-Z]、table_[01-...
配置PolarDB输入组件
表 选择数据同步的来源表：如果 来源表量 选择了 单表，在下拉列表中选择读取数据的表。如果 来源表 选择了 多表，则按照下图操作指引，添加需要读取数据的多个表。在①处配置筛选多表的表达式，连续多个表的格式如 table[A-Z]、table_[01-...
配置ClickHouse输入组件
表 选择数据同步的来源表：如果 来源表量 选择了 单表，在下拉列表中选择读取数据的表。如果 来源表 选择了 多表，则按照下图操作指引，添加读取数据的多个表。在①处配置筛选多表的表达式，连续多个表的格式如 table[A-Z]、table_[01-05]...
配置Oracle输入组件
表 选择数据同步的来源表：如果 来源表量 选择了 单表，在下拉列表中选择读取数据的表。如果 来源表 选择了 多表，则按照下图操作指引，添加读取数据的多个表。在①处配置筛选多表的表达式，连续多个表的格式如 table[A-Z]、table_[01-05]...
配置Oracle输入组件
表 选择数据同步的来源表：如果 来源表量 选择了 单表，在下拉列表中选择读取数据的表。如果 来源表 选择了 多表，则按照下图操作指引，添加读取数据的多个表。在①处配置筛选多表的表达式，连续多个表的格式如 table[A-Z]、table_[01-05]...
配置ClickHouse输入组件
表 选择数据同步的来源表：如果 来源表量 选择了 单表，在下拉列表中选择读取数据的表。如果 来源表 选择了 多表，则按照下图操作指引，添加读取数据的多个表。在①处配置筛选多表的表达式，连续多个表的格式如 table[A-Z]、table_[01-05]...
配置AnalyticDB for MySQL 3.0输入组件
表 选择数据同步的来源表：如果 来源表量 选择了 单表，在下拉列表中选择读取数据的表。如果 来源表 选择了 多表，则按照下图操作指引，添加读取数据的多个表。在①处配置筛选多表的表达式，连续多个表的格式如 table[A-Z]、table_[01-05]...
配置AnalyticDB for PostgreSQL输入组件
表 选择数据同步的来源表：如果 来源表量 选择了 单表，在下拉列表中选择读取数据的表。如果 来源表 选择了 多表，则按照下图操作指引，添加读取数据的多个表。在①处配置筛选多表的表达式，连续多个表的格式如 table[A-Z]、table_[01-05]...
配置AnalyticDB for PostgreSQL输入组件
表 选择数据同步的来源表：如果 来源表量 选择了 单表，在下拉列表中选择读取数据的表。如果 来源表 选择了 多表，则按照下图操作指引，添加读取数据的多个表。在①处配置筛选多表的表达式，连续多个表的格式如 table[A-Z]、table_[01-05]...
配置AnalyticDB for MySQL 3.0输入组件
表 选择数据同步的来源表：如果 来源表量 选择了 单表，在下拉列表中选择读取数据的表。如果 来源表 选择了 多表，则按照下图操作指引，添加读取数据的多个表。在①处配置筛选多表的表达式，连续多个表的格式如 table[A-Z]、table_[01-05]...
管理问题数据
数据质量支持您保留数据质量监控过程中从数据表中发现的非预期数据，帮助您快速排查、定位问题，提升数据质量。本文为您介绍如何管理数据质量监控过程中从数据表中发现的非预期数据。背景信息 问题数据表 数据质量支持在部分规则校验不通过...
基本概念
数据库实例：数据库实例是在云中运行的独立数据库环境。一个数据库实例可以包含多个由数据库用户创建的数据库，并且...索引：索引是数据库管理系统对数据库表中一个或多个列的值进行排序的数据结构，使用索引可快速访问数据库表中的特定信息。
创建单物理表服务单元
物理数据表 依次选择数据源类型、数据源（基于您选择的模式，展示可以选择到的数据源类型）和物理数据表。您也可以单击 新增数据源 引入新的业务数据源，以便基于新的业务数据源创建服务单元。如何新增数据源，请参见 创建数据源。服务单元...
采集数据
参数 描述 数据来源 表：选择数据源中的 ods_user_info_d。切分键：建议使用主键或有索引的列作为切分键，仅支持类型为整型的字段。此处设置切分键为 uid。数据去向 文本类型：选择 text 类型。文件名（含路径）：根据您自建OSS的目录进行...
配置MySQL输入
MySQL节点支持分库分表，您可以单击 添加分库分表数据源，从下拉列表中选择相应的 数据源 和 表，添加多个数据源，同时进行同步。重要 所选表的Schema需要保持一致，否则执行会报错。单击工具栏中的 图标。常见问题 实时同步MySQL数据源的...
配置MaxCompute输出组件
表 选择数据同步中输出数据的目标表。如果Hive数据源中没有数据同步的目标表，则您可以通过 一键生成目标表 的功能，简单快速的生成目标表。详细的操作步骤如下：单击 一键生成目标表。Dataphin会自动为您匹配创建目标表的代码，包括目标表...
配置MaxCompute输出组件
表 选择数据同步中输出数据的目标表。如果Hive数据源中没有数据同步的目标表，则您可以通过 一键生成目标表 的功能，简单快速的生成目标表。详细的操作步骤如下：单击 一键生成目标表。Dataphin会自动为您匹配创建目标表的代码，包括目标表...
配置TDH Inceptor输出组件
表 选择数据同步中输出数据的目标表。如果TDH Inceptor数据源中没有数据同步的目标表，则您可以通过 一键生成目标表 的功能，简单快速的生成目标表。详细的操作步骤如下：单击 一键生成目标表。Dataphin会自动为您匹配创建目标表的代码，...
精模
数据面板 重新选择数据：在数据面板内可以单击下方 重新选择数据，打开 选择范围 对话框，重新选择仅针对精模图层的数据范围，详情请参见 使用官方基底数据创建 中的选择场景范围区域的操作步骤。刷新数据：在数据面板内可以单击下方 刷新...
使用MaxCompute控制台（离线）
不支持将数据上传到具有自定义Schema的表中（包括已有表和新建表），自定义Schema相关信息请参见 Schema操作。前提条件 已创建MaxCompute项目，用于存放上传的数据。同时您需拥有对应的数据权限，如：上传至已有表：需具备对应表的数据写入...
数据归档
原理介绍 前提条件 归档的表中必须包含主键。注意事项 前置条件：OceanBase 数据源必须通过 OBproxy 连接（暂不支持对直连的 OceanBase 进行归档操作）。OceanBase 数据源目前仅支持集群实例，新建数据源时必须配置集群名称。OceanBase ...
开发Dataphin数据源并加速数据查询
开发Dataphin数据源即将Dataphin中的逻辑表和物理表配置为供应用调用的Dataphin数据源，同时您可以为已开发的Dataphin数据源所在的计算空间添加Hologres加速计算源，以满足对查询速度有要求的业务场景。本文为您介绍如何开发Dataphin数据源...
配置同步任务中的数据来源和去向
表 选择分析型数据库MySQL版中的一张表，将SQLServer中的数据同步至该表中。导入模式 根据分析型数据库MySQL版中表的更新方式设置导入模式，本例为实时导入。字段映射配置信息：重要 注意列与列之间映射的字段类型是否有做数据兼容。配置项...
写数据表
目标数据表 选择同步到的目标数据源中的表名。生命周期（可选）设置目标表的留存天数，如未设置，默认将保留1天。说明 生命周期决定了目标表在多长时间之后被自动删除。比如设置了生命周期为1天，则表在1天后会被自动删除。特别注意，并不...
配置Hologres输出组件
表 选择Hologres数据源中的数据表。如果Hologres数据源中还没有数据表，则需要提前创建数据表。具体操作，请参见 表。写入模式 源数据源的数据写入目标数据源（Hologres数据源）的模式。写入模式包括SDK模式和SQL模式，适用场景说明如下：...
配置Hologres输出组件
表 选择Hologres数据源中的数据表。写入模式 源数据源的数据写入目标数据源（Hologres数据源）的模式。写入模式包括SDK模式和SQL模式，适用场景说明如下：Hologres 0.8版本推荐选择SDK模式。Hologres 0.9及之后版本推荐选择SQL模式。加载...
新建Flink SQL类型的公共节点
输入数据格式 输入表的数据格式，由数据模型定义，在下拉列表中选择输入数据的逻辑表名称，表示该计算资源中提供数据的数据表的结构。当选择数据表时，需保证输入的模型与上游节点的输出数据模型相同。当选择星号（*）时，代表数据结构为...
恢复PolarDB分布式版数据库
恢复对象 在 源数据库对象 栏中选择需要恢复的数据库或表，将其移动到 已选择数据库对象 栏中。说明 支持恢复单表或单库，减少恢复的数据量，缩短恢复时间RTO（Recovery Time Objective）。在 配置恢复对象 页面，配置以下信息，并单击页面...
库表级恢复
恢复对象 在 源数据库对象 栏中选择需要恢复的数据库或表，将其移动到 已选择数据库对象 栏中。本示例仅恢复 persons 与 sbtest100 表。在 预检查 对话框中显示 预检查通过 后，单击 立即启动。您可以在左侧的 恢复任务 页签中，查看数据库...
库表级恢复
恢复对象 在 源数据库对象 栏中选择需要恢复的数据库或表，将其移动到 已选择数据库对象 栏中。本示例仅恢复 persons 与 sbtest100 表。在 预检查 对话框中显示 预检查通过 后，单击 立即启动。您可以在左侧的 恢复任务 页签中，查看数据库...
PolarDB MySQL版迁移至Kafka
由于全量数据迁移会并发执行INSERT操作，导致目标数据库的表产生碎片，因此全量迁移完成后目标数据库的表存储空间会大于源实例的表存储空间。费用说明 迁移类型 链路配置费用 公网流量费用 结构迁移和全量数据迁移 不收费。通过公网将数据...
使用ETL分析实时订单
Join配置 Join类型符左边的表 选择放置在JOIN类型符左边的表，作为主表。本案例中选择为流表。时态Join时间属性（不选择为普通Join）选择使用时态JOIN时，流表关联时态表的时间属性。如不输入，则默认使用普通JOIN。本案例中选择为 基于...
Db2 for LUW同步至云原生数据仓库 AnalyticDB ...
全量初始化会并发执行INSERT操作，导致目标数据库的表产生碎片，因此全量初始化完成后目标实例的表空间比源实例的表空间大。在DTS同步期间，若有除DTS外的数据写入目标库，则会导致源库与目标库数据不一致。您可以在DTS同步结束后，使用...
PolarDB MySQL版迁移至云原生数据仓库 AnalyticDB ...
由于全量数据迁移会并发执行INSERT操作，导致目标数据库的表产生碎片，因此全量迁移完成后目标数据库的表存储空间会比源实例的表存储空间大。费用说明 迁移类型 链路配置费用 公网流量费用 结构迁移和全量数据迁移 不收费。通过公网将数据...
数据库克隆
在顶部菜单栏中，选择 数据库开发>环境构建>数据库克隆。说明 若您使用的是极简模式的控制台，请单击控制台左上角的 图标，选择 全部功能>数据库开发>环境构建>数据库克隆。单击页面右上角的 数据库克隆。在 数据库克隆工单申请 页面，配置...
恢复MariaDB数据库
恢复对象 在 源数据库对象 栏中选择需要恢复的数据库或表，将其移动到 已选择数据库对象 栏中。说明 支持恢复单表或单库，减少恢复的数据量，缩短恢复时间RTO（Recovery Time Objective）。在 预检查 对话框中显示 预检查通过 后，单击 ...
同步节点
当选择星号（*）时，表示数据结构为任意结构，用于对未创建数据模型的表进行操作，此时物理表必须选择已经存在的表。开发数据表 开发环境中源端输入的物理表，在下拉列表中选择。生产数据源 生产环境中使用源端输入的物理表所在资源。生产...
同步节点
当选择星号（*）时，表示数据结构为任意结构，用于对未创建数据模型的表进行操作，此时物理表必须选择已经存在的表。开发数据表 开发环境中源端输入的物理表，在下拉列表中选择。生产数据源 生产环境中使用源端输入的物理表所在资源。生产...
数据扫描和识别
首次扫描：完成授权后，DSC 会扫描整个数据库或数据项目中所有的表。增量扫描：当有新增数据库或数据项目表时，DSC 会对新增表进行扫描；如果现有数据表结构（列）发生变化，DSC 也会对该表进行扫描。DSC 是否会登录到数据库内获取数据？已...
新建同步节点并运行后上线
当选择星号（*）时，表示数据结构为任意结构，用于对未创建数据模型的表进行操作，此时物理表必须选择已经存在的表。开发数据表 开发环境中源端输入的物理表，在下拉列表中选择。生产数据源 生产环境中使用源端输入的物理表所在资源。生产...
- 产品推荐
- 这些文档可能帮助您