创建并使用MaxCompute表
使用DDL生成表结构后，DataWorks便自动填充表编辑页面的相关配置。若您习惯使用代码编写任务，可使用该方式。说明 由于表名称在进入表编辑页面前已定义，因此，在DDL建表命令中不支持修改表名称，否则将报错。DDL模式仅支持使用命令定义表...
创建并使用MaxCompute表
使用DDL生成表结构后，DataWorks便自动填充表编辑页面的相关配置。若您习惯使用代码编写任务，可使用该方式。说明 由于表名称在进入表编辑页面前已定义，因此，在DDL建表命令中不支持修改表名称，否则将报错。DDL模式仅支持使用命令定义表...
表批读写
如果运行CREATE TABLE的位置已经包含使用Delta Lake存储的数据，Delta Lake将执行以下操作：如果只指定表名和位置，例如：SQL%sql CREATE TABLE events USING DELTA LOCATION '/mnt/delta/events' Hive Metastore中的表会自动继承现有数据...
CREATE TABLE LIKE
使用 CREATE TABLE LIKE 创建的表不会自动同步源表的数据。查询语句中的每一个目标列都要有一个不重复的别名，否则建表语句就会生成同列名的语句导致执行报错。示例如下：CALL hg_create_table_like('new_table','select*,1 as c,''a'' as ...
自动增量排序
自动增量排序功能默认全局开启，无需使用自动增量排序的表可以关闭该功能，具体操作方法，请参见 开启或关闭表级别自动增量排序。如果您需要全局关闭自动增量排序功能，请 提交工单 联系技术支持进行关闭。说明 自动增量排序有助于查询的...
基于RDS表自动推断建表
本文介绍如何基于RDS表实现自动推断建表。前提条件 为了更加方便地演示操作，您需要先通过以下步骤在RDS中准备好测试数据。已创建RDS MySQL实例。如何创建，请参见 创建RDS MySQL实例。已设置IP白名单。如何设置，请参见 设置白名单。已...
分区表常见问题
本文汇总了 PolarDB MySQL版 分区表相关的常见问题。说明 如需了解更多关于分区表的内容，请搜索钉钉群号加群进行咨询。钉钉群号：24490017825。PolarDB MySQL版 是否支持表分区?支持。目前 PolarDB MySQL版 100%兼容MySQL，同时做了功能和...
表删除，更新和合并
在这个部分：写入Delta表时的重复数据删除 缓慢将数据（SCD）类型2操作更改为Delta表 将更改数据写入Delta表 使用Upsert 从流式处理查询foreachBatch 写入Delta表时的重复数据删除 一个常见的ETL用例是通过将日志附加到表中来将日志收集到...
表
PyODPS支持对MaxCompute表的基本操作，包括创建表、创建表的Schema、同步表更新、获取表数据、删除表、表分区操作以及如何将表转换为DataFrame对象。背景信息 PyODPS提供对MaxCompute表的基本操作方法。操作 说明 基本操作 列出项目空间下...
影子表同步
背景信息 ODC 的影子表同步功能支持根据源表的表结构自动在当前库中创建影子表（表名是在源表名上增加前缀或后缀的方式生成），适用于全链路压测等场景。本文档旨在介绍如何在 ODC 上新建和查看影子表同步。说明 ODC V4.0.0 及之后版本的...
删除分区
基于表名进行表组级的分区变更操作（即基于表名自动找查对应的表组并进行操作）ALTER TABLEGROUP BY TABLE r_t1/*表名*/DROP PARTITION p1;场景 2：删除一个包含二级分区的一级分区 对于含有二级分区的一级分区，删除一级分区时，连同一级...
基于模型生成ETL代码
维度表、明细表、汇总表等模型表发布后，DataWorks智能数据建模的模型开发功能支持快速生成代码框架，帮助您提高后续数据开发效率。本文为您介绍如何通过模型开发功能生成代码框架。前提条件 模型表已发布，操作详情请参见 发布模型至引擎...
AUTO模式数据库与DRDS模式数据库
自动分区与手动分区 自动分区 自动分区，指创建表时不指定任何分区定义（如分区键、分区策略等），PolarDB-X 能够自动选择分区键并对表及其索引进行水平分区的功能。AUTO模式数据库支持自动分区，而DRDS模式数据库不支持。示例如下：使用...
增加分区
基于表名进行表组级的分区变更操作（即基于表名自动找查对应的表组并进行操作）ALTER TABLEGROUP BY TABLE r_t1/*表名*/ADD PARTITION(PARTITION p2 VALUES LESS THAN(2022));示例2：增加一个LIST一级分区 假如l_t1与l_t2都采用List分区，...
版本发布说明
发布日期：2023-08-18 大版本：V5.4.17 小版本：16921956 类别 说明 新增&优化 创建AUTO模式数据库的语句中新增default_single=‘on’参数，表示此数据库默认创建单表而且自动打散各个DN。新增支持非事务场景下的跨库单表下推。新增私有...
修改分区
基于表名进行表组级的分区变更操作（即基于表名自动找查对应的表组并进行操作）ALTER TABLEGROUP BY TABLE k_l_ntp_t1/*表名*/MODIFY SUBPARTITION p1sp2/*实际的非模板化二级分区的名字*/ADD VALUES(2017,2019);示例2：修改非模板化二级...
数据注册与字段配置
建议用户直接使用系统默认的Hologres表（不占用用户资源）用于指标计算结果的回写，系统会自动为您建表、存储相关指标数据。当然客户也可以使用自己的Hologres实例表，而不用默认的Hologres表。新增注册MaxCompute表 单击新增数据表，需要...
重组分区
基于表名进行表组级的分区变更操作（即基于表名自动找查对应的表组并进行操作）ALTER TABLEGROUP BY TABLE r_t1/*表名*/REORGANIZE PARTITION p1,p2,p3 INTO(PARTITION p4 VALUES LESS THAN(2024),PARTITION p5 VALUES LESS THAN(2027));...
管理平台系统表和时序/快照表
您可以通过数据服务的离线数据存储功能，查看平台系统表、时序表和快照表。本文介绍查看平台系统表、时序表和快照表的操作步骤，及各存储表的数据内容。查看存储表 登录 物联网平台控制台。在 实例概览 页面，找到对应的企业版实例，单击...
INSERT
通过Flink写入时可以插入父表并自动路由到子表。从Hologres V1.3版本起，支持符合FixedPlan的Insert语句直接写入分区表父表，详情请参见 Fixed Plan加速SQL执行。column table 表中的某个列的名称。您也可以使用子域名或者数组下标限定列...
CREATE DATABASE AS（CDAS）语句
CDAS支持整库级别的表结构和数据的实时同步，还支持表结构变更的同步。本文为您介绍CREATE DATABASE AS（CDAS）的使用方法，并提供了多种使用场景下的示例。背景信息 CDAS是 CTAS 语法的一个语法糖，用于实现整库同步、多表同步的功能。...
基于原生DDL语句创建元表
开发过程中所用到的输入表、输出表、维表可以通过创建元表方式来进行创建和管理，以支持您通过引用元表的方式来创建其他数据表。有效解决原生DDL开发方式的研发路径复杂，密码明文记录，安全性差，研发效率低等问题。更多信息，请参见 ...
基于原生DDL语句创建元表
开发过程中所用到的输入表、输出表、维表可以通过创建元表方式来进行创建和管理，以支持您通过引用元表的方式来创建其他数据表。有效解决原生DDL开发方式的研发路径复杂，密码明文记录，安全性差，研发效率低等问题。更多信息，请参见 ...
清空分区
基于表名进行表组级的分区变更操作（即基于表名自动找查对应的表组并进行操作）ALTER TABLEGROUP BY TABLE k_r_tp_t1/*表名*/TRUNCATE SUBPARTITION sp1;场景4：目标分区是非模板化的二级分区 对于非模板化二级分区，允许单独对某个一级...
操作流程
流程图 流程说明 操作 说明 配置逻辑表质量规则 引用标准自动生成质量规则 通过设置质量规则并运行质量检查计划或者场景画布中引用配置规则的物理表后，您可以查看质量检查结果，方便用户掌握当前物理表的质量状况。具体操作，请参见 设置...
操作流程
流程图 流程说明 操作 说明 配置逻辑表质量规则 引用标准自动生成质量规则 通过设置质量规则并运行质量检测计划或者场景画布中引用配置规则的物理表后，您可以查看质量检查结果，方便用户掌握当前物理表的质量状况。具体操作，请参见 设置...
创建和管理自定义存储表
物联网平台数据服务提供离线数据存储功能，支持自定义分区表、事务表和时序表。自定义存储表可以作为数据服务中数据解析、SQL分析任务和数据可视化的数据源，可以作为数据解析、SQL分析任务的结果输出表，可以集成时序表数据到实时计算...
对象
last_autovacuum timestamp with time zone 最近一次表被自动清理守护进程清理的时间。last_analyze timestamp with time zone 最近一次表被手动分析的时间。last_autoanalyze timestamp with time zone 最近一次表被自动清理守护进程分析...
对象
last_autovacuum timestamp with time zone 最近一次表被自动清理守护进程清理的时间。last_analyze timestamp with time zone 最近一次表被手动分析的时间。last_autoanalyze timestamp with time zone 最近一次表被自动清理守护进程分析...
ANALYZE
在默认的配置中，自动清理守护进程会在表第一次载入数据或者用常规操作改变时负责表的自动分析。当启用自动清理时，定期运行 ANALYZE 是个好主意，或者可以在表内容做了大的修改后运行 ANALYZE。准确的统计信息将帮助规划器选择最合适的...
表回收站
开启 PolarDB-X 1.0 表回收站功能后，通过 DROP TABLE 指令删除的表将被移动至表回收站中不再可见，数据表移动至回收站2小时后，即被自动清理，无法恢复。您可以在表回收站中查看、恢复、清理已删除的表。限制与说明 PolarDB-X 1.0 实例...
数据方案概览
影子表同步 支持根据源表的表结构自动在当前库中创建影子表，支持周期性同步。空库初始化 支持将源数据库的表结构同步至空数据库中，实现快速同步数据库表结构。表一致性修复 用于对比不同表之间的表结构，找出差异并在目标表执行差异脚本...
数据建模
在数据模型管理模块对逻辑表进行层次结构设计、逻辑表定义，引用标准元素定义，保证不同的逻辑表设计人员按照统一口径进行操作，除此以外还支持：逻辑表质量配置、DDL设置、逻辑表物理化、表关系配置等功能。逻辑表层级管理：支持对逻辑...
功能简介
在数据模型管理模块对逻辑表进行层次结构设计、逻辑表定义，引用标准元素定义，保证不同的逻辑表设计人员按照统一口径进行操作，除此以外还支持：逻辑表质量配置、DDL设置、逻辑表物理化、表关系配置等功能。逻辑表层次管理：支持对逻辑表...
功能简介
在数据模型管理模块对逻辑表进行层次结构设计、逻辑表定义，引用标准元素定义，保证不同的逻辑表设计人员按照统一口径进行操作，除此以外还支持：逻辑表质量配置、DDL设置、逻辑表物理化、表关系配置等功能。逻辑表层次管理：支持对逻辑表...
功能更新动态（2023年）
新增表名校验功能，可校验并展示目标库中已存在的同名目标表，若存在同名表，可配置表名置换或勾选自动删除数据源同名表。同步方式优化，选择每日同步，则生成每日调度的周期任务；选择单次同步，则生成手动任务；选择每日同步和单次同步，...
文档更新动态（2023年）
新增表名校验功能，可校验并展示目标库中已存在的同名目标表，若存在同名表，可配置表名置换或勾选自动删除数据源同名表。同步方式优化，选择每日同步，则生成每日调度的周期任务；选择单次同步，则生成手动任务；选择每日同步和单次同步，...
分区管理
分区计划是专门针对 Range 分区的扩展功能，ODC 支持依据用户设置的分区策略对 Range 分区表进行自动管理，用户无需手动创建新分区，以方便维护 Range 分区表。本文档旨在介绍如何在 ODC 上使用分区计划，包括对新建和删除的表分区进行自动...
管理预置指标表
生成预置指标数据API 开启预置指标表统计数据后，对应预置指标表会自动实例化生成数据API。您可以使用对应数据API获取该预置指标表统计的指标数据。在 预置指标 页签，单击该预置指标表对应 操作 列的 数据预览，可查看预置指标表统计的...
普通表快速转换为RANGE分区表
组合使用语法 普通表快速转RANGE分区表 WITHOUT VALIDATION 可以搭配 INTERVAL 分区表（自动创建相同间隔的 RANGE 分区）组合使用。示例 CREATE TABLE t1(ID int,DATE DATE,PRIMARY KEY(ID,DATE));ALTER TABLE t1 partition by RANGE ...
- 产品推荐
- 这些文档可能帮助您