使用DataWorks
如果您需要导出多张表数据，需要创建多个离线数据同步节点。操作流程 通过数据集成导出MaxCompute数据的流程如下：添加MaxCompute数据源 将MaxCompute数据源添加至DataWorks的数据源列表。添加目标数据源 将目标数据源添加至DataWorks的...
管理Kafka JSON Catalog
在一个作业中同步多张表。BEGIN STATEMENT SET;CREATE TABLE IF NOT EXISTS `some_catalog`.`some_database`.`some_table0` AS TABLE `kafka-catalog`.`kafka`.`topic0`/*+OPTIONS('scan.startup.mode'='earliest-offset')*/;CREATE TABLE ...
数据集成侧同步任务配置
实现将多张表数据写入到同一个表中，或统一将源端某固定前缀的库名或表名在写入目标库或表时更新为其他前缀。源表名和目标表名转换规则：源端表名支持通过正则表达式转换为目标端最终写入的表名。示例1：将源端doc_前缀的表数据，写入前缀...
表格填报
支持 添加、删除、复制：可以有多个写入配置从而实现同时写入多张表。配置字段映射：选择已有表或新建表之后，您可以配置填报字段和底表的对应关系。选择 已有表 为对应的 控件 选择写入的 表字段名，将自动匹配表字段名的 字段描述、字段...
DLF数据访问权限控制
说明 同一个申请单提交的多张表权限申请，会按照表Owner的不同自动拆分成多个申请单。查看审批详情。单击目标申请 操作 列的 审批，您可以在 审批详情 对话框查看目标申请的 申请详情、审批记录 等详细信息。审批申请。根据申请的详细内容...
CREATE TABLE AS（CTAS）语句
示例二：分库分表合并同步 对于分库分表合并同步的场景，您可以结合MySQL Catalog，利用正则表达式的表名和库名来匹配所要同步的多张表。使用CTAS可以将这多张分库分表合并到一张Hologres表中，库名和表名会作为额外的两个字段写入到该表中...
基于PostgreSQL标准权限模型授权
一个DEV_GROUP可以拥有多张表，但每张表只能属于一个DEV_GROUP。例如，表TABLE1属于PROJ1_DEV_GROUP，则该表就不属于PROJ2_DEV_GROUP。一个用户可以属于多个DEV_GROUP。例如，User1可以既是PROJ1_DEV_GROUP的成员，也可以是PROJ2_DEV_GROUP...
管理MongoDB Catalog（公测中）
在一个作业中同步多张表。BEGIN STATEMENT SET;CREATE TABLE IF NOT EXISTS `some_catalog`.`some_database`.`some_table0` AS TABLE `mongodb-catalog`.`database`.`collection0`/*+OPTIONS('scan.incremental.snapshot.enabled'='true','...
数据集填报
支持 添加、删除、复制：可以有多个写入配置从而实现同时写入多张表。配置字段映射：选择已有表或新建表之后，您可以配置填报字段和底表的对应关系。选择 已有表 为对应的 控件 选择写入的 表字段名，将自动匹配表字段名的 字段描述、字段...
无锁结构变更概览
无锁结构变更支持在同一变更工单中，对同一数据库下的多张表进行变更。在配置工单的变更SQL时，不同表SQL可使用英文分号;隔开。当表（只有主键或唯一键）进行无锁表结构变更时，不允许更新主键和唯一键，否则会导致变更任务失败。主要原理 ...
使用paiio读写MaxCompute表数据
STRING 无 待读取的表名集合（列表），多张表的Schema必须一致。表名格式为 odps:/${your_projectname}/tables/${table_name}/${pt_1}/${pt_2}/.record_defaults 是 LIST或TUPLE 无 用于读出列的数据类型转换及列为空时的默认值。如果该...
配置并管理实时同步任务
同步时默认将源端数据表写入DataHub同名Topic中，同时，您可以通过添加映射规则定义最终写入目的端的Topic名称，实现将多张表数据写入到同一个Topic中，或统一将源端某固定前缀的表名在写入目标Topic时更新为其他前缀。支持通过正则表达式...
MaxCompute数据访问权限控制
说明 同一个申请单提交的多张表权限申请，会按照表Owner的不同自动拆分成多个申请单。查看审批详情。单击目标申请 操作 列的 审批，您可以在 审批详情 对话框查看目标申请的 申请详情、审批记录 等详细信息。审批申请。根据申请的详细内容...
配置并管理实时同步任务
同步时默认将源端数据表写入目的端同名schema或同名表中，同时，您可以通过添加映射规则定义最终写入目的端的schema或表名称，实现将多张表数据写入到同一个目标表中，或统一将源端某固定前缀的表名在写入目标表时更新为其他前缀。...
一键实时同步至DataHub
同步时默认将源端数据表写入DataHub同名Topic中，同时，您可以通过添加映射规则定义最终写入目的端的Topic名称，实现将多张表数据写入到同一个Topic中，或统一将源端某固定前缀的表名在写入目标Topic时更新为其他前缀。支持通过正则表达式...
MySQL分库分表同步至Hologres（方案1.0）
同步时默认将源端数据表写入目的端同名schema或同名表中，同时，您可以通过添加映射规则定义最终写入目的端的schema或表名称，实现将多张表数据写入到同一个目标表中，或统一将源端某固定前缀的表名在写入目标表时更新为其他前缀。...
一键实时同步至AnalyticDB for MySQL 3.0
您可以通过该功能实现将多张表数据写入到同一个表中，或统一将源端某固定前缀的表名在写入目标表时更新为其他前缀。配置逻辑请参见：数据集成侧同步任务配置。步骤四：设置目标表 确认 写入模式。写入模式 目前仅支持 重放，即源端INSERT一...
整库离线同步至MaxCompute
您可以通过该功能实现将多张表数据写入到同一个表中，或统一将源端某固定前缀的表名在写入目标表时更新为其他前缀。配置逻辑请参见：数据集成侧同步任务配置。步骤四：设置目标表 时间自动分区设置。目前仅支持将源端数据写入MaxCompute...
pg_hint_plan
连接顺序提示 连接顺序提示指定两张或多张表的连接顺序。包括两种强制指定方法：强制执行特定的连接顺序，但不限制每个连接级别的方向。强制连接方向。示例命令如下：/*+NestLoop(t1 t2)MergeJoin(t1 t2 t3)Leading(t1 t2 t3)*/SELECT*FROM...
整库离线同步至MaxCompute
您可以通过该功能实现将多张表数据写入到同一个表中，或统一将源端某固定前缀的表名在写入目标表时更新为其他前缀。配置逻辑请参见：数据集成侧同步任务配置。步骤四：设置目标表 时间自动分区设置。目前仅支持将源端数据写入MaxCompute...
pg_hint_plan
连接顺序提示 连接顺序提示指定两张或多张表的连接顺序。包括两种强制指定方法：强制执行特定的连接顺序，但不限制每个连接级别的方向。强制连接方向。示例命令如下：/*+NestLoop(t1 t2)MergeJoin(t1 t2 t3)Leading(t1 t2 t3)*/SELECT*FROM...
配置并管理实时同步任务
您可以通过该功能实现将多张表数据写入到同一个表中，或统一将源端某固定前缀的表名在写入目标表时更新为其他前缀。配置逻辑请参见：设置来源和同步规则。设置目标表。在 设置目标表 页面，选择 目标 AnalyticDB for MySQL 3.0数据源。确认...
配置并管理实时同步任务
您可以通过该功能实现将多张表数据写入到同一个表中，或统一将源端某固定前缀的表名在写入目标表时更新为其他前缀。配置逻辑请参见：设置来源和同步规则。设置目标表。选择目标 MaxCompute（ODPS）数据源 和 写入模式。时间自动分区设置。...
一键实时同步至Hologres
同步时默认将源端数据表写入目的端同名schema或同名表中，同时，您可以通过添加映射规则定义最终写入目的端的schema或表名称，实现将多张表数据写入到同一个目标表中，或统一将源端某固定前缀的表名在写入目标表时更新为其他前缀。...
MySQL
同一作业包含多个MySQL CDC源表（非CTAS）当作业中包含多个MySQL CDC源表，且不是使用CTAS语句同步时，数据源无法进行复用，需要为每一个CDC源表提供不同的Server ID。同理，如果开启增量快照框架且并行度大于1，需要指定Server ID范围。...
pg_dump
可以通过编写多个-t 来选择多张表，也可以通过在模式中写入通配符来选择多张表。说明 指定-t 时，pg_dump不会尝试备份所选表可能依赖的任何其他数据库对象。因此，不能保证备份特定表后能够成功地将数据恢复到空数据库中。T pattern 即-...
一键实时同步至MaxCompute
示例2：将多张表数据写入到一张目标表。将源端名称为"table_01"，"table_02"，"table_03"的表同步至一张名为"my_table"的表中。配置正则表名转换规则为：源：table.*，目标：my_table。目标表名规则：支持您使用内置的变量组合生成目标表名...
一键实时同步至MaxCompute
示例2：将多张表数据写入到一张目标表。将源端名称为"table_01"，"table_02"，"table_03"的表同步至一张名为"my_table"的表中。配置正则表名转换规则为：源：table.*，目标：my_table。目标表名规则：支持您使用内置的变量组合生成目标表名...
OSS数据源
元数据发现任务可以在单次运行中自动为OSS上面的数据文件创建和更新数据湖元数据（一张或多张表），具有自动探索文件数据字段及类型、自动映射目录和分区、自动感知新增列及分区、自动对文件进行分组建表的能力。OSS数据源配置模式 OSS数据...
一键实时同步至Kafka
实现将多张表数据写入到同一个Topic中，或统一将源端某固定前缀的表名在写入目标Topic时更新为其他前缀。支持通过正则表达式转换写入的Topic名，还支持使用内置变量拼接目标Topic名。配置逻辑请参见：设置同步来源与规则。步骤四：设置目标...
配置并管理实时同步任务
实现将多张表数据写入到同一个Topic中，或统一将源端某固定前缀的表名在写入目标Topic时更新为其他前缀。支持通过正则表达式转换写入的Topic名，还支持使用内置变量拼接目标Topic名。配置逻辑请参见：设置来源和同步规则。设置目标Topic。...
自然语言到SQL语言转义（基于大语言模型的NL2SQL）
如果涉及到多张表，可以将该值设置为4或更大，以扩大召回，提高效果。basic_index_threshold 召回表判断是否相近时所使用的阈值 取值范围：(0,1]。默认值为0.1，表示当数据库表向量匹配超过0.1时才会被选中。推荐的问句样例如下：进行过两...
功能发布记录
更多引擎内部优化：存储引擎优化Tablet Lazy Open机制（主从实例均支持）：超过24小时无访问的表自动关闭内存开销，当打开表的数据量超过阈值时基于LRU策略动态选取对应Tablet进行关闭，降低表多场景下的常驻内存开销。存储引擎优化Schema...
版本发布说明
修复 rename table 对多张表操作时，可能产生死锁的问题。修复带分区函数的子分区表点查时路由裁剪有概率报NPE的问题。修复 select@global.server_id 查询结果不符合预期的问题。修复 create table if not exists like 非预期报错的问题。...
元数据管理概述
可以通过元数据管理中的 绑定逻辑表 功能，将多张 schema 一致的物理表绑定成一张逻辑表，创建同步任务的时候直接选择这张逻辑表，即可将实际多张物理表中的数据同步至目的端。元数据管理限制 目前元数据管理只支持管理 OceanBase 数据源的...
Dataphin为何会将一张逻辑表的调度任务拆成多个调度...
产品名称 Dataphin 产品模块 维度逻辑...也就是说dws_all这张表里面的指标有很多，会按照时间周期进行拆分，比如会按照最近1天的、最近7天的、自然周进行拆分，这个任务节点的SQL代码其实是将自然周的指标拆分出来了 更多信息 无 相关文档<无>
多表合并
多表合并 算子是 两表并集 算子的高级版本，满足多张数据表合并的需求。适用场景 计算链路 计算引擎 是否支持 离线 MaxCompute 是 Hive 是 HiveStorage 是 RDS/MySQL 是 Spark 是 使用说明 来源节点 多表合并算子必须指定2个或者2个以上的 ...
多表连接
主表 多表连接算子中的 主表 是输入节点中的其中一个节点，主表的作用主要是提供连接的字段与其它节点进行连接操作。系统默认指定第一个输入节点为主表，用户可以自由将其它节点设置为主表。重要 如果已经配置了连接条件，重新设置主表将会...
开发限制
Table 每个数据库最多包含8192张表。Partition 每张表最多包含8192个分区。Column 每张表最多包含1017列。Sequence 每个数据库最多支持创建16384个序列。View 每个数据库最多支持创建8192个视图。Global Index 每张表最多支持创建32个全局...
使用限制
table数量 一个数据库最多创建10000个数据表。tag列名称 可见字符，最大长度为200个字符。tag列值 可见字符，最大长度为20480个字符。field列名称 可见字符，最大长度为200个字符。field列值 可见字符，最大长度为20480个字符。timestamp列...
- 产品推荐
- 这些文档可能帮助您