分区
分区表是指拥有分区空间的表，即将表数据按照某个列或多个列进行划分，从而将表中的数据分散存储在不同的物理位置上。合理设计和使用分区，可以提高查询性能、简化数据管理，并支持更灵活的数据访问和操作。概述 分区可以理解为分类，通过...
节点/数据库/表/分区/二级分区
介绍节点、数据库、表、分区表和二级分区的概念。节点 在HybridDB for MySQL中，节点是一个资源单位（比如当前C2规格对应：8 Core 32GB Memory 512GB SSD）。当前在阿里云的控制台中最多能够购买64个节点，如果有需要更多节点，可以通过...
普通表快速转换为RANGE分区表
PolarDB 支持在不做数据重分布的情况下，可以使用该语法快速的将普通表转为RANGE分区表。本文将介绍 PolarDB 普通表快速转RANGE分区表的操作步骤。背景信息 PolarDB 普通表快速转RANGE分区表时，普通表的数据不经校验直接作为分区表的第一...
CREATE DATABASE
CREATE DATABASE 用于创建一个新的PolarDB数据库。简介 CREATE DATABASE 创建一个新的PolarDB数据库。要创建一个数据库，你必须是一个超级用户或者具有特殊的 CREATEDB 特权。默认情况下，新数据库将通过克隆标准系统数据库 template1 被...
可视化管理内部表、外部表或视图
背景信息 MaxCompute Studio支持的表或视图操作如下：创建内部表、外部表或视图 修改内部表或外部表 查看内部表、外部表或视图详细信息 清空表数据或删除分区 删除内部表、外部表或视图 创建内部表、外部表或视图 在IntelliJ IDEA界面的...
INSERT
使用限制 若是分区表，必须插入具体的子表，不能插入分区父表，且插入时，插入时对应的分区字段值要和子表分区字段值一致。目标列的名称可以以任意顺序列出。如果使用 insert into select 的方式插入数据，目标列和查询列类型需要一一对齐...
TRUNCATE TABLE
TRUNCATE TABLE 用于清空表数据或者表分区数据。语法 清空表数据。TRUNCATE TABLE db_name.table_name;清空表中的指定分区。TRUNCATE TABLE db_name.table_name PARTITION partition_name[,.];分区名的数据类型为bigint，您可以通过以下SQL...
Check节点
前提条件 Check节点基于数据源进行校验，使用Check节点前，需先创建对应数据源，具体如下：MaxCompute分区表 已创建MaxCompute数据源并绑定至数据开发（DataStudio）。在DataWorks中，您需要先将MaxCompute项目创建为DataWorks的MaxCompute...
配置AnalyticDB MySQL 2.0数据源
准备工作 在分析型数据库MySQL版中创建数据库、表组和表。详情请参见 快速入门-开通分析型数据库MySQL版服务、创建表组 和 创建表。重要 分析型数据库MySQL版中的表需要创建成实时表（普通表），通过实时导入效率高而且流程简单。操作步骤 ...
INSERT OVERWRITE
场景二：MaxCompute向Hologres的分区表导入数据 在每天定期更新MaxCompute分区表的数据，且需要将MaxCompute分区表向Hologres的分区表导入数据的场景中，希望将数据全量覆盖，实现离线数据对实时数据的修正。此场景使用示例如下所示，将...
新建并启用物理表质量检查计划
用来设置，包含分区字段的待检查物理表分区数据产出的检测时间，保证分区的数据无遗漏。检查周期 当选中 分区产出检测 参数时，才出现该选项。用来设置待检查的物理表中分区数据 产出时间 的检测周期。新建完质量检查计划后，单击 操作 列...
新建并启用物理表质量检查计划
用来设置，包含分区字段的待检查物理表分区数据产出的检测时间，保证分区的数据无遗漏。检查周期 当选中 分区产出检测 参数时，才出现该选项。用来设置待检查的物理表中分区数据 产出时间 的检测周期。新建完质量检查计划后，单击 操作 列...
DDL操作常见问题
没有索引，Hash Clustering可以提供类似数据库中Cluster index的效果，详情请参见 表操作。如何修改表的Hash Clustering属性？增加表的Hash Clustering属性：alter table table_name[clustered by(col_name[,col_name,.])[sorted by(col_...
分区表管理（auto_partition）
AnalyticDB PostgreSQL版 支持将大表定义为分区表，并支持通过auto_partition插件对分区表进行自动删除或新增，当您进行条件查询时，系统只会扫描满足条件的分区，避免全表扫描，从而提升查询性能。...相关文档 表分区定义
MySQL整库实时同步至OSS数据湖
配置页面的右侧为源端数据库表的预览，是根据上述步骤中配置的数据源预览出来的待同步的数据库表和已选择好要同步的数据库表的预览情况。您可根据待同步的源端数据库表的数量，参考以下操作建议，快速选择要同步的库表。如果您的数据库表...
增强E-R
越来越多的系统设计采用应用系统来保障业务之间的依赖关系，导致数据库的外键信息并不会真正的沉淀到数据库外键设计上，不易通过实际数据库的外键信息看到业务数据表中的逻辑关系，进而影响您梳理数据库内的表之间真实的逻辑关系。...
写数据表
前提条件 如果您需要写入分区表，则需要先创建待写入的分区表，再使用该组件写入数据，关于如何创建分区表，详情请参见 创建分区表。使用限制 支持的计算引擎为MaxCompute。可视化配置组件参数 Designer 仅支持通过可视化方式，配置该组件...
2021年
使用跨机并行查询进行分析型查询 支持对分区表使用跨机并行查询的功能，提升数据库性能。对分区表使用跨机并行查询 优化 基于RTO的crash recover时间改进 支持配置polar_crash_recovery_rto参数，指定实例期望的RTO时间，从而保证在发生...
名称解释
分区表（一级分区）HybridDB for MySQL中的表从建模的维度看，可以分为事实表（fact table）和维度表（dimension table），事实表是指分区表（通常是一级分区表），即需要被拆分到不同节点去存储的表，在建表的时候指定分区键就可以生成...
通过联邦分析同步数据
联邦分析使用 AnalyticDB MySQL 的免费高速数据管道服务（APS）将 PolarDB MySQL中的 数据实时同步至 AnalyticDB MySQL 湖仓版（3.0）集群中，帮助您一站式完成数据同步与管理。本文介绍如何通过联邦分析将 PolarDB MySQL中的数据同步至 ...
概述
二级分区允许将表、索引和索引组织的表细分为更小的块，从而能够以更细的粒度级别管理和访问这些数据库对象。例如可以为分区实现一个滚动窗口来支持历史数据分区，同时在另一个维度上进行二级分区。数据库将二级分区表中的每个子分区存储为...
何时选择间隔（Interval）分区
例如，您可以创建一个INTERVAL RANGE分区表，该表分区范围为1个月且当前的转换点为2021年9月15日。如果您尝试为2021年12月10日插入数据，那么将创建2021年9月15日至12月15日所需的3个分区，并将数据插入该分区。下列情况下建议您使用间隔...
写入数据到分区表
创建OSS分区表后，可以通过INSERT OVERWRITE重写OSS数据。本文介绍如何写入数据到分区表。步骤一：创建Schema 登录 DLA控制台。单击左侧导航栏的 Serverless Presto>SQL访问点。单击 登录到DMS，执行以下SQL创建OSS Schema。您也可以通过...
OceanBase 数据库 Oracle 租户至 Oracle 数据库的同步...
如果是 Oracle 数据库至 OceanBase 数据库等库到库的数据迁移或数据同步，OceanBase 数据库上的 PK 名称和 Oracle 数据库的不同，因此无法在 OceanBase 数据库中删除。迁移 OceanBase 数据库 Oracle 租户的数据至 Oracle 数据库时，不支持...
RDS MySQL表分区的限制
RDS MySQL对表分区有以下限制：只能对数据表的整型列进行分区，或者数据列可以通过分区函数转化成整型列。最大分区数目不能超过1024。如果含有唯一索引或者主键，则分区列必须包含在所有的唯一索引或者主键内。不支持外键。不支持全文索引...
计费模式
元数据对象的存储量 元数据对象是指数据湖元数据中存储的数据库、表、分区和索引。计费规则，每月前100万个存储对象免费，超过100万后，超过100万的部分，每10万个对象收费5元/月，不足10万的按10万个收费。计费周期与出账周期，按月统计...
通过联邦分析功能同步至湖仓版
联邦分析使用 AnalyticDB MySQL 的免费高速数据管道服务（APS）将 PolarDB MySQL中的 数据实时同步至 AnalyticDB MySQL 湖仓版（3.0）集群中，帮助您一站式完成数据同步与管理。本文介绍如何通过联邦分析将 PolarDB MySQL中的数据同步至 ...
创建混合分区
表名和分区名与数据库中的名称保持一致。示例：假设表 t1 的 p1 分区为CSV引擎，则该分区的数据文件命名为：t1#P#p1.CSV。注意事项 创建的混合分区表至少需要包含一个在InnoDB引擎上创建的分区。创建包含二级分区的混合分区表时，一级分区...
IMPORT PARTITION
本文档介绍了导入表分区TABLESPACE（ibd文件）的方法。语法 ALTER TABLE…IMPORT PARTITION 命令用于导入表分区的TABLESPACE（ibd文件）。ALTER TABLE table_name IMPORT PARTITION partition_name[,partition_name].TABLESPACE;说明 在...
RDS MySQL表分区的限制
RDS MySQL对表分区有以下限制：只能对数据表的整型列进行分区，或者数据列可以通过分区函数转化成整型列。最大分区数目不能超过1024。如果含有唯一索引或者主键，则分区列必须包含在所有的唯一索引或者主键内。不支持外键。不支持全文索引...
OPTIMIZE PARTITION
本文档介绍了优化分区或子分区、回收未使用的空间和整理分区数据文件的方法。描述 如果从分区或子分区中删除了大量的行，或者对一个带有可变长度的行（即存在VARCHAR、BLOB或TEXT类型的列）进行修改，可以使用 ALTER TABLE…OPTIMIZE ...
EXCHANGE PARTITION
语法 ALTER TABLE.EXCHANGE PARTITION 命令用于将一个分区或子分区与单表进行交换，可以将一个与分区表的表结构相同的单表交换为分区表中的一个分区或子分区。语法如下：ALTER TABLE target_table EXCHANGE PARTITION target_partition ...
COALESCE PARTITION
num 减少的分区数，需要小于表分区总数。示例 减少 sales_hash_hash 表中的2个分区数：ALTER TABLE sales_hash_hash COALESCE PARTITION 2;减少 sales_key_key 表中的2个分区数：ALTER TABLE sales_key_key COALESCE PARTITION 2;
生命周期
MaxCompute表的生命周期（Lifecycle），指表（分区）数据从最后一次更新的时间算起，在经过指定的时间后没有变动，则此表（分区）将被MaxCompute自动回收。这个指定的时间就是生命周期。通过设置生命周期可以实现自动数据清理或数据保留，...
分区表命令列表
ALTER TABLE…RENAME PARTITION 重命名表分区。ALTER TABLE…SPLIT PARTITION 将一个分区划分为两个分区，并重新分配新分区的内容。ALTER TABLE…SPLIT SUBPARTITION 将一个子分区划分为两个子分区，并重新分配子分区的内容。ALTER TABLE…...
读数据表
组件截图 二、参数说明 参数名称 参数说明 参与方 建模的数据输入分别位于己方和对方的数据库中，在任务中，将对应方的ID加入到【读数据表】/【写数据表】组件中。表名 希望进行联邦建模的数据表。分区 DataTrust允许多分区表的输入和输出...
读数据表
本文介绍读数据表算子的使用方法。用途 读数据表 算子用于从数据源中读取数据，作为下游节点输入数据的来源。适用场景 计算链路 计算引擎 是否支持 离线 MaxCompute 是 Hive 是 HiveStorage 是 RDS/MySQL 是 使用说明 选择计算资源 选择...
附加/分离分区
概述 附加（Attach）分区：将一个普通表附加到分区表中，成为分区表的一个分区。分离（Detach）分区：将一个分区表的分区分离出来，成为一个普通表。它避免了将分区表中的数据直接删除，而是将其分离出来作为一个普通表移至别处。语法说明 ...
数据膨胀、倾斜与索引统计
说明 智能诊断会定期在后台每小时整点自动诊断数据库内所有的表,最近诊断时间表明最近一次发起诊断的时间。数据倾斜 说明 数据倾斜页面仅展示表大小超过1 GB的表。参数 说明 库名 数据库名称。模式名 Schema名称。分区表名 分区表名称。...
附加/分离分区
概述 附加（Attach）分区：将一个普通表附加到分区表中，成为分区表的一个分区。分离（Detach）分区：将一个分区表的分区分离出来，成为一个普通表。它避免了将分区表中的数据直接删除，而是将其分离出来作为一个普通表移至别处。语法说明 ...
- 产品推荐
- 这些文档可能帮助您