ODPS-0123031
3）您可以通过拆表，把历史分区数据备份到备份表，把历史分区从当前表删除，请参考 删除分区。错误2：a single instance cannot output data to more than 10000 partitions 错误信息示例 ODPS-0123031:Partition exception-a single ...
移动分区
说明 ALTER TABLE…MOVE PARTITION 命令将分区从当前表空间移动到另一个表空间。ALTER TABLE…MOVE PARTITION 命令可以移动LIST、RANGE或HASH分区表的分区。与上面描述相同的行为适用于与 MOVE SUBPARTITION 子句一起使用的 subpartition_...
写入数据到分区表
创建OSS分区表后，可以通过INSERT OVERWRITE重写OSS数据。本文介绍如何写入数据到分区表。步骤一：创建Schema 登录 DLA控制台。单击左侧导航栏的 Serverless Presto>SQL访问点。单击 登录到DMS，执行以下SQL创建OSS Schema。您也可以通过...
MySQL整库实时同步至OSS数据湖
配置页面的右侧为源端数据库表的预览，是根据上述步骤中配置的数据源预览出来的待同步的数据库表和已选择好要同步的数据库表的预览情况。您可根据待同步的源端数据库表的数量，参考以下操作建议，快速选择要同步的库表。如果您的数据库表...
通过联邦分析同步数据
开启高级配置后可配置 同步库表选择 和 大表分区键设置 参数。同步库表选择 您可以选择需要同步的数据库和数据表。默认同步源端所有的库表。重要 不支持同步无主键的表，无主键的表会被自动过滤。AnalyticDB MySQL 每个集群最多可创建2048...
写数据表
组件截图 二、参数说明 参数名称 参数说明 参与方 建模的数据输入分别位于己方和对方的数据库中，在任务中，将对应方的ID加入到【读数据表】/【写数据表】组件中。表名 希望进行联邦建模的数据表。分区 DataTrust允许多分区表的输入和输出...
什么是TTL功能
基本原理 TTL表的每个物理表都会按照时间做Range分区，所有GSI的物理表跟主表的分区方式一致。随着时间的推移，新的分区会被创建，失效的分区会被删除，如下图所示：说明 PolarDB-X 默认会自动创建新分区和删除失效分区。您也可以在建表时...
创建OSS外部表
示例：通过自定义解析器创建OSS外部表 示例：通过自定义解析器创建OSS外部表-非文本数据 说明 如果您创建的OSS外部表为分区表时，需要在执行 msck 或 alter 命令后才可以使用，详情请参见 补全OSS外部表分区数据语法。更多示例请参见 示例...
RDS MySQL表分区的限制
RDS MySQL对表分区有以下限制：只能对数据表的整型列进行分区，或者数据列可以通过分区函数转化成整型列。最大分区数目不能超过1024。如果含有唯一索引或者主键，则分区列必须包含在所有的唯一索引或者主键内。不支持外键。不支持全文索引...
分区表索引
因此数据库会自动将索引分区与其关联的表分区同步，从而使每个表索引相互独立。本地索引通过指定 LOCAL 属性创建。在与基础表相同的列上对索引进行分区，创建相同数量的分区或子分区，并为它们提供与基础表的相应分区相同的分区范围。当...
分区表索引
因此数据库会自动将索引分区与其关联的表分区同步，从而使每个表索引相互独立。本地索引通过指定 LOCAL 属性创建。在与基础表相同的列上对索引进行分区，创建相同数量的分区或子分区，并为它们提供与基础表的相应分区相同的分区范围。当...
分区表索引
因此数据库会自动将索引分区与其关联的表分区同步，从而使每个表索引相互独立。本地索引通过指定 LOCAL 属性创建。在与基础表相同的列上对索引进行分区，创建相同数量的分区或子分区，并为它们提供与基础表的相应分区相同的分区范围。当...
INTERVAL RANGE简介
INTERVAL RANGE是RANGE分区的扩展，当新插入的数据超过现有分区的范围时，该分区允许数据库自动创建新分区。前提条件 集群版本需为 PolarDB MySQL版 8.0.2版本且Revision version为8.0.2.2.0及以上。您可以通过 查询版本号 确认集群版本。...
RDS MySQL表分区的限制
RDS MySQL对表分区有以下限制：只能对数据表的整型列进行分区，或者数据列可以通过分区函数转化成整型列。最大分区数目不能超过1024。如果含有唯一索引或者主键，则分区列必须包含在所有的唯一索引或者主键内。不支持外键。不支持全文索引...
通过联邦分析功能同步至湖仓版
开启高级配置后可配置 同步库表选择 和 大表分区键设置 参数。同步库表选择 您可以选择需要同步的数据库和数据表。默认同步源端所有的库表。重要 不支持同步无主键的表，无主键的表会被自动过滤。AnalyticDB MySQL 每个集群最多可创建2048...
IMPORT PARTITION
本文档介绍了导入表分区TABLESPACE（ibd文件）的方法。语法 ALTER TABLE…IMPORT PARTITION 命令用于导入表分区的TABLESPACE（ibd文件）。ALTER TABLE table_name IMPORT PARTITION partition_name[,partition_name].TABLESPACE;说明 在...
分区合并
全局索引：使用另一个维度进行水平分区的数据与主表始终保持强一致的分区表。语法 ALTER { TABLE tbl_name|TABLEGROUP tg_name|TABLEGROUP BY TABLE tbl_name } merge_partition_specs_definition|merge_subpartition_specs_definition ...
何时选择间隔（Interval）分区
例如，您可以创建一个INTERVAL RANGE分区表，该表分区范围为1个月且当前的转换点为2021年9月15日。如果您尝试为2021年12月10日插入数据，那么将创建2021年9月15日至12月15日所需的3个分区，并将数据插入该分区。下列情况下建议您使用间隔...
主键与唯一键（AUTO模式）
本节介绍了在AUTO模式数据库中，判断表的主键是Global主键还是Local主键，表的唯一键是Global唯一键还是Local唯一键的方法。主键 在 PolarDB-X 中，主键分为Global主键与Local主键。当创建出的主键：能保证全局唯一，就称为Global主键；只...
MaxCompute表的高级功能
表（分区）数据从最后一次更新时间算起，在指定的时间段（即生命周期）内如果没有变动，则此表（分区）将被MaxCompute自动回收。生命周期只能以表为单位进行设置。创建表test_lifecycle，指定其生命周期为100天。create table test_...
读数据表
组件截图 二、参数说明 参数名称 参数说明 参与方 建模的数据输入分别位于己方和对方的数据库中，在任务中，将对应方的ID加入到【读数据表】/【写数据表】组件中。表名 希望进行联邦建模的数据表。分区 DataTrust允许多分区表的输入和输出...
COALESCE PARTITION
num 减少的分区数，需要小于表分区总数。示例 减少 sales_hash_hash 表中的2个分区数：ALTER TABLE sales_hash_hash COALESCE PARTITION 2;减少 sales_key_key 表中的2个分区数：ALTER TABLE sales_key_key COALESCE PARTITION 2;
基本概念
CREATE DATABASE创建的就是逻辑数据库。一个 AnalyticDB for MySQL 集群最多可创建256个逻辑数据库。AnalyticDB for MySQL 文档中提到的数据库，都是指逻辑库。分片（Shard）根据分布键，将表数据水平分割后得到的子表，称为分片，英文名称...
库表
云原生数据仓库AnalyticDB MySQL 3.0集群中的数据库里面还有其他表，且表里面还有数据，则会导致该报错。您可以删除数据库前需要先删除库中的所有表，此时使用 drop table 语句删除很麻烦，建议您使用新版DMS进行批量删除。登录 数据管理...
数据膨胀、倾斜与索引统计
说明 智能诊断会定期在后台每小时整点自动诊断数据库内所有的表,最近诊断时间表明最近一次发起诊断的时间。数据倾斜 说明 数据倾斜页面仅展示表大小超过1 GB的表。参数 说明 库名 数据库名称。模式名 Schema名称。分区表名 分区表名称。...
多级分区表静态裁剪与并行扫描
为了方便管理和提高查询性能，用户一般会使用分区表，将大表拆分成多张子分区表，每张子分区表又进一步可以拆成二级子分区表，从而形成了多级分区表。支持多级分区表的静态分区裁剪，避免对无关分区进行扫描。同时，针对被裁剪后的分区表，...
清空分区
实际p1下的所有二级分区的数据都会被清空*/表组级用法 同一个表组的所有逻辑表同时进行增加分区的操作，即上述两个表同时执行分区变更：#基于表组名字进行表组级的分区变更操作 ALTER TABLEGROUP tg1/*表组名*/TRUNCATE PARTITION p1;...
生命周期操作
生命周期 MaxCompute表的生命周期（Lifecycle），指表（分区）数据从最后一次更新的时间算起，在经过指定的时间后没有变动，则此表（分区）将被MaxCompute自动回收，这个指定的时间就是生命周期。生命周期回收为每天定时启动，扫描全量分区...
创建表并导入数据
完成集群、租户和数据库的创建后，我们将带领您登录数据库，并创建一个名为 order 的表，并使用 Hash 分区将表分为 16 个分区。背景信息 表信息大概如下：概念介绍 OceanBase 数据库可以把普通的表的数据按照一定的规则划分到不同的区块内...
MSCK REPAIR TABLE
示例 自动同步全表分区。MSCK REPAIR TABLE adb_external_db.partition_table_test;自动同步指定分区。MSCK REPAIR TABLE adb_external_db.partition_table_test SYNC_DIR 'oss:/testBucketName/test_db/partition_table_test/dt=20220619'...
普通表快速转换为RANGE分区表
背景信息 PolarDB 普通表快速转RANGE分区表时，普通表的数据不经校验直接作为分区表的第一个分区的数据，其他分区为空分区。PolarDB 普通表快速转RANGE分区表通常用于想把历史数据放入第一个分区，同时避免使用普通的 ALTER PARTITION BY ...
Hive采集字段
简介 Hive采集工具通过访问Metastore DB 进行相关资源信息采集，当前支持的类型为MySQL数据库。基本信息 通过对Hive的对象信息进行盘点，采集的字段重点举例为：Hive版本 Hive db名称 Hive db大小 表个数 分区表个数 外部表个数 事物表个数...
开发限制
PolarDB-X 高度兼容MySQL协议和语法，但由于分布式数据库和单机数据库存在较大的架构差异，存在SQL使用限制。本文将介绍数据库开发过程中的使用限制。常见标识符限制 类型 最大字符长度 取值范围 Database 32 大小写字母、数字和下划线（_...
INTERVAL RANGE分区
INTERVAL RANGE分区是RANGE分区的扩展，当新插入的数据超过现有分区的范围时，该分区允许数据库自动创建新分区。INTERVAL RANGE分区需要包含Interval子句并为新分区指定范围大小。范围划分的高值由范围划分键值决定，当插入的数据值超过了...
EXCHANGE PARTITION
语法 ALTER TABLE.EXCHANGE PARTITION 命令用于将一个分区或子分区与单表进行交换，可以将一个与分区表的表结构相同的单表交换为分区表中的一个分区或子分区。语法如下：ALTER TABLE target_table EXCHANGE PARTITION target_partition ...
分区表
创建范围（RANGE）分区表 您可以通过给出一个START值、一个END值以及一个定义分区增量值的子句让数据库自动产生分区。默认情况下，START值总是被包括在内而END值总是被排除在外，例如：CREATE TABLE sales(id int,date date,amt decimal(10...
删除分区
全局索引：使用另一个维度进行水平分区的数据与主表始终保持强一致的分区表。语法 ALTER alter_target_definition drop_partition_operation_definition alter_target_definition:TABLE[db_name.]tbl_name|TABLEGROUP tg_name|TABLEGROUP ...
修改分区
全局索引：使用另一个维度进行水平分区的数据与主表始终保持强一致的分区表。语法 ALTER alter_target_definition modify_partition_values_operation_definition alter_target_definition:TABLE[db_name.]tbl_name|TABLE tbl_name.index_...
Hologres结果表
create table Hologres_sink(name varchar,age BIGINT,birthday BIGINT)with(type='hologres',dbname='<yourDbname>',-Hologres的数据库名称。tablename='<yourTablename>',-Hologres用于接收数据的表名称。username='<yourUsername>',-...
数据输入输出
processed_df.to_odps_table("test_processed_odps_table")如果表为分区表，read_odps_table 方法会读取所有分区的数据，因此如果存在多个分区，您可以通过 partitions 参数读取部分的分区数据：df=md.read_odps_table("parted_odps_table...
- 产品推荐
- 这些文档可能帮助您