JindoTable使用说明
使用JindoTable 常见命令如下：accessStat-cache-archive-unarchive-uncache-status-optimize-showTable-showPartition-listTables-dumpmc 注意 指定表时使用 database.table 的格式，指定分区时使用 partitionCol1=1,partitionCol2=2,....
JindoTable使用说明
使用JindoTable 常见命令如下：accessStat-cache-archive-unarchive-uncache-status-optimize-showTable-showPartition-listTables-dumpmc 注意 指定表时使用 database.table 的格式，指定分区时使用 partitionCol1=1,partitionCol2=2,....
CREATE TABLE（AUTO模式）
Hash分区与Key分区是 原生MySQL的标准分区语法 之一，PolarDB-X 为提供灵活强大的分区管理能力（例如分裂、合并与迁移等）以及考虑支持向量分区键下热点散裂，PolarDB-X 不仅在语法上尽量兼容了MySQL的Hash分区与Key分区的建表语法...
JindoTable使用说明
使用JindoTable 常见命令如下：accessStat-cache-archive-unarchive-uncache-status-optimize-showTable-showPartition-listTables-dumpmc-leastUseStat 注意 指定表时使用 database.table 的格式，指定分区时使用 partitionCol1=1,...
JindoTable使用说明
JindoTable提供表或分区级别的热度统计、存储分层和表文件优化的功能。本文为您介绍JindoTable的使用方法。前提条件 本地安装了Java JDK 8。已创建EMR-3.30.0或后续版本的集群，详情请参见 创建集群。使用JindoTable 常见命令如下：...
JindoTable使用说明
JindoTable提供表或分区级别的热度统计、存储分层和表文件优化的功能。本文为您介绍JindoTable的使用方法。前提条件 本地安装了Java JDK 8。已创建EMR-3.30.0或后续版本的集群，详情请参见 创建集群。使用JindoTable 常见命令如下：...
JindoTable使用说明
JindoTable提供表或分区级别的热度统计、存储分层和表文件优化的功能。本文为您介绍JindoTable的使用方法。前提条件 本地安装了Java JDK 8。已创建EMR-3.30.0或后续版本的集群，详情请参见 创建集群。使用JindoTable 常见命令如下：...
手动创建分区表（AUTO模式）
创建一级分区 创建HASH一级分区 使用分区函数 使用单列分区键datetime并通过分区函数to_days转换为日期天数，再进行哈希分区，同时指定分区数目为8：CREATE TABLE tb_h_fn(id bigint not null auto_increment,bid int,name varchar(30),...
分区
分区表是指拥有分区空间的表，即将表数据按照某个列或多个列进行划分，从而将表中的数据分散存储在不同的物理位置上。合理设计和使用分区，可以提高查询性能、简化数据管理，并支持更灵活的数据访问和操作。概述 分区可以理解为分类，通过...
概述
PolarDB PostgreSQL版 分区表的查询优化可以让它相比于同样数据量的普通表性能更加优异，特别是面临超大数据量场景时，合理的使用分区，可以有效地提高查询效率。PolarDB PostgreSQL版 支持分区修剪技术和分区wise-join技术，这两种技术在...
CREATE TABLE.PARTITION BY
使用CREATE TABLE命令的PARTITION BY子句来创建一个分区表，这个分区表中的数据分配在一个或多个分区（和子分区）中。语法介绍 CREATE TABLE命令语法有下面的三种形式：列表分区语法 使用第一种形式创建一个列表分区表：CREATE TABLE...
概述
PolarDB PostgreSQL版（兼容Oracle）分区表的查询优化可以让它相比于同样数据量的普通表性能更加优异，特别是面临超大数据量场景时，合理的使用分区，可以有效地提高查询效率。PolarDB PostgreSQL版（兼容Oracle）支持分区修剪技术和分区...
全局索引
全局索引（GLOBAL INDEX）是分区表上的一种索引技术，可以创建在分区表的非分区键上，也支持提供唯一约束。前提条件 支持的 PolarDB PostgreSQL版 的版本如下：PostgreSQL 14（内核小版本14.6.4.0及以上）说明 您可通过如下语句查看 ...
2024年
修复对分区表使用分区键建立索引无法正确选择Index Scan的问题。修复在JOIN ON条件中，跨级别Sublink上拉导致生成错误执行计划的问题。修复复制表相关函数上拉到Master执行，导致报错或性能下降的问题。修复Limit Pushdown对非向量检索场景...
AnalyticDB PostgreSQL 7.0版使用分区外表
添加二级分区外表 二级分区外表与一级分区外表语法一致，需保证最末级分区为外表定义，即创建父表和一级分区时使用内部分区表语法，二级分区使用外部分区表语法。内部分区表语法请参见 表分区定义，外部分区表语法请参见 添加分区外表。...
选择使用低基数列作为分区键
在云数据库ClickHouse企业版中，当您向没有使用分区键的表发送一个插入语句（插入许多行）时，插入该表所有的行数据将会在存储中写入一个新的Part（即数据片段）。然而，当您向云数据库ClickHouse企业版中有分区键的表发送一个插入语句时，...
降低实例配置
如果您的 云消息队列 Kafka 版 实例的公网流量消耗远小于购买的公网流量配置，或者分区的使用量远小于购买的分区数量，您可以降低公网流量和分区数量配置，从而节约成本。本文介绍如何在 云消息队列 Kafka 版 控制台降低实例的公网流量、...
概述
分区剪枝是指优化器自动从 FROM 和 WHERE 子句里根据分区键提取出需要扫描的分区，减少扫描的数据块，从而避免全表扫描，提高性能。分区剪枝机制支持以下两种剪枝方式：排除约束 快速剪枝 排除约束 参数 constraint_exclusion 用于控制排除...
概述
List Default[Hash]分区类型 支持List Default[Hash]分区 LIST DEFAULT HASH 支持List Default[Hash]分区下面做二级分区 二级分区支持List Default分区 支持通过reorganize从default[Hash]分区分离出List分区 支持通过reorganize List分区...
异常检测
说明 多个分区之间用英文逗号（,）分隔。指定多级分区，格式为 name1=value1/name2=value2。否 selectedCols 输入特征，字段类型没有限制。是 detectStrategy 系统支持Box-plot和AVF选项。Box-plot用于检测连续值类特征。AVF用于检测枚举值...
分区索引
数据分区策略 HASH分区 时间范围分区 多级HASH分区（高级用法）准备工作 使用分区索引前需要创建测试表，语句如下：CREATE TABLE IF NOT EXISTS search_table(user_id bigint,storeId varchar,goodsId varchar,goodsPrice smallint,...
增量同步性能白皮书
单机同步单分区 单机同步4个分区 单机同步8个分区 单机同步32分区 单机同步64分区 2台机器同步64分区 2台机器同步128分区 说明 上述测试场景不是产品能力的极限测试，对表格存储服务端的整体压力较小。测试步骤 创建数据表并进行预分区...
表
表分区 使用PyODPS判断是否为分区表、遍历表全部分区、判断分区是否存在、创建分区等。数据上传下载通道 使用PyODPS操作Tunnel向MaxCompute中上传或者下载数据。说明 更多PyODPS方法说明，请参见 Python SDK方法说明。前提条件：准备运行...
动态分区管理
Hologres的动态分区功能无需预先设定所有分区信息，可依据创建分区表时配置的动态分区规则，自动创建并管理分区子表。同时，还支持将符合条件的分区数据迁移到低频存储设备，在保证查询性能的同时，有效降低存储费用。功能介绍 动态分区...
EMR控制台管理YARN分区
EMR支持在控制台上通过可视化UI管理YARN分区，同时可以批量建立节点组与分区的映射，方便操作。您可以直接在节点组上配置分区属性，扩容和弹性伸缩后，EMR会自动为新增节点打上Node Label，无需重新配置新节点。本文为您介绍如何在EMR控制...
普通表转换为分区表
当单张普通表的数据量超过1亿或者1 TB时，建议使用分区表。本文介绍了使用 ALTER 语法将单张普通表转换为分区表的注意事项以及示例。前提条件 普通表中的主键或唯一键需要包含分区表中的分区键字段。注意事项 普通表转换为分区表的过程中，...
原理
本文概述了分区表模块的主要实现原理，便于用户了解分区表在底层实现时的一些细节，从而能够更好地学习如何去使用分区表。分区表创建原理 分区表的创建主要涉及语法解析模块和执行模块。语法解析模块 分区表创建是分区表整个功能的核心部分...
词频统计
词频统计是指输入一些字符串（手动输入或者从指定的文件读取），用程序来统计这些字符串中总共有多少个单词，每个单词出现的次数。单词的总数（即为Total）为不重复的单词数总和。本文为您介绍 Designer 提供的词频统计。词频指词的频率，...
使用快照创建云盘
使用快照创建一个新的云盘，新云盘的数据与创建快照时原云盘完全一样，可以实现云盘数据的快速复制，以便进行环境克隆或数据备份，这一过程适用于系统盘和数据盘。本文介绍如何使用快照创建一个新云盘。前提条件 您已经为已有系统盘或数据...
创建表并导入数据
Hash 分区 Hash 分区适合于对不能用 Range 分区、List 分区方法的场景，它的实现方法简单，通过对分区键上的 Hash 函数值来散列记录到不同分区中。如果您的数据符合下列特点，使用 Hash 分区是个很好的选择，更多内容参见 分区概述。不能...
热点分区分裂
场景 2：目标分区是包含有二级分区的一级分区 说明 包含二级分区的分区表，如果对其一级分区的热点值进行散列，分裂出的新分区，它的二级分区定义与原热点值所在的分区仍保持一致。表级用法 对于以下分区表：create table t1(a bigint ...
分区管理
分区计划是专门针对 Range 分区的扩展功能，ODC 支持依据用户设置的分区策略对 Range 分区表进行自动管理，用户无需手动创建新分区，以方便维护 Range 分区表。本文档旨在介绍如何在 ODC 上使用分区计划，包括对新建和删除的表分区进行自动...
创建MaxCompute Sink Connector
本文介绍如何创建使用MaxCompute Sink Connector，您可以通过MaxCompute Sink Connector将数据从 云消息队列 Kafka 版 实例的数据源Topic导出至MaxCompute的表中。前提条件 详细步骤，请参见 创建前提。注意事项 如需使用MaxCompute分区...
表格存储建表注意事项
主键的第一列为分区键，可以理解为当表的数据量达到一个设定值时，表格存储会根据分区键列值的范围来进行分区的操作，通过分区来达到数据访问负载均衡的目的。建表时，表内的数据默认拥有一个分区，即该表的所有数据在一个数据分区上。当表...
皮尔森系数
说明 多个分区之间用英文逗号（,）分隔。指定多级分区，格式为 name1=value1/name2=value2。否 col1Name 输入列1的列名。是 col2Name 输入列2的列名。是 outputTableName 输出结果表的表名。是 lifecycle 输出表的生命周期。系统默认无生命...
Jindo sql命令介绍
背景信息 您可以使用Jindo sql命令分析以下数据：使用Jindo sql分析JindoFS访问日志 使用Jindo sql分析元数据 使用Jindo sql分析OSS访问日志 使用限制 EMR-3.36.0及后续版本或EMR-5.2.0及后续版本的集群，支持使用Jindo sql命令。使用Jindo...
Jindo sql命令介绍
背景信息 您可以使用Jindo sql命令分析以下数据：使用Jindo sql分析JindoFS访问日志 使用Jindo sql分析元数据 使用Jindo sql分析OSS访问日志 使用限制 EMR-3.36.0及后续版本或EMR-5.2.0及后续版本的集群，支持使用Jindo sql命令。使用Jindo...
Jindo sql命令介绍
背景信息 您可以使用Jindo sql命令分析以下数据：使用Jindo sql分析JindoFS访问日志 使用Jindo sql分析元数据 使用Jindo sql分析OSS访问日志 使用限制 EMR-3.36.0及后续版本或EMR-5.2.0及后续版本的集群，支持使用Jindo sql命令。使用Jindo...
常见问题
分区索引主要由HASH分区、时间分区或HASH分区和时间分区的组合组成，您可以根据以下场景和建议合理设置分区索引：业务数据有明显的时间属性，例如查询语句携带一个时间字段作为过滤字段，建议设置时间分区属性。在业务查询场景中，多数情况...
使用OSS Foreign Table分区表
例如，分区表需要按照year列划分一级分区，再按照month划分二级分区，其中某个一级分区为 year=2022、二级分区为 month=07，那么属于这个分区的数据文件必须要放在 oss:/bucket/year=2022/month=07 的目录下。创建OSS Server和创建OSS User...
- 产品推荐
- 这些文档可能帮助您