通过RAM Policy为RAM用户授权
访问控制RAM中默认已内置了 表格存储 相关的系统权限策略AliyunOTSFullAccess、AliyunOTSReadOnlyAccess和AliyunOTSWriteOnlyAccess，您可以为RAM用户配置相应系统权限策略。当要实现更细粒度的授权时，您可以使用自定义权限策略为RAM用户...
分区迁移
场景 2：目标分区是含有二级分区的一级分区 迁移含二级分区的一级分区，会将该分区下的所有二级分区全部迁移到指定的存储节点。表级用法 对于以下表：create table t1(a bigint unsigned not null,b bigint unsigned not null,c datetime ...
存储引擎
数据分区：支持数据多级分区，且可按Value或范围进行分区，常用场景为按时间进行分区，可明显降低IO数据量，同时分区支持混合存储，历史数据和活跃数据可分层冷热存储。排序及粗糙集过滤：建表时可指定排序字段，数据通过排序后，一方面可...
基本概念
分区表可存储的数据量较大，通常可以存储千万条甚至千亿条数据。维度表 维度表，又称复制表，集群的每个节点都会存储一份维度表的全量数据。因此，复制表中的数据量不宜过大，最好不超过2万行。由于维度表的变更会广播到集群的所有节点，...
归档为CSV或ORC格式
part_name 需要归档到OSS对象存储中的分区名。注意事项 仅支持对InnoDB引擎上的分区表使用冷数据归档功能。对分区表执行分区归档操作时，至少保留一个分区在InnoDB引擎上，即无法对最后一个InnoDB引擎上的分区执行冷数据归档操作。归档后的...
数据建模
存储大小 取对应分区的物理存储量，与期望值进行比较，只要符合规则则通过。比较方式包括：>、、>=、、=和!主键唯一 对应分区，表主键字段值去重后的count数是否等于分区记录数，等于则规则通过，不等于则规则不通过。多表记录数波动率 源...
什么是子分区
子分区（SUBPARTITION）用于把分区表划分为更小的子集，这些子集会存储在相同或不同的服务器上。如果对一个分区划分了子分区，那么每个分区都至少有一个子分区。如果对一个表划分了子分区，那么数据不会存储在在任何分区表中，而是会存储于...
配置规则：按表（单表）
多级分区表达式 1级分区名=分区值/2级分区名=分区值/N级分区名=分区值 分区值可以是固定值，也可以是内置参数表达式。参数必须使用中括号表示，例如，$[yyyymmdd-N]。分区表必须配置到最后一级分区。DataWorks为您提供了部分内置的业务日期...
功能发布记录
本文介绍了表格存储每次发布涉及的功能变更及对应的文档，帮助您了解 表格存储 的发布动态。2023年 2023年12月 功能名称 功能描述 发布时间 发布地域 相关文档 时序分析存储商业化 使用分析存储（Analytical Store）功能，您可以低成本存储...
何时使用Range-List分区
Range-List分区是指一级分区是Range分区，二级分区是List分区的组合分区类型。Range-List分区通常用于存储历史数据的大表，并且在多个维度上访问。数据的历史视图通常是一个访问路径，但是某些业务用例向访问路径添加了另一种分类。例如，...
通过控制台使用宽表模型
表格存储 提供了控制台、命令行工具（Tablestore CLI）和Tablestore SDK三种访问方式。通过控制台使用宽表模型（WideColumn）时，您需要开通表格存储服务，然后使用控制台进行创建实例、创建数据表、读写表中数据以及使用SQL查询数据的操作...
块存储FAQ
本文汇总了使用块存储时的常见问题。存储容量单位包SCU问题 什么是存储容量单位包SCU？哪些块存储产品可以使用存储容量单位包SCU？存储容量单位包SCU可以单独使用吗？存储容量单位包SCU的抵扣规则是什么？SCU如何计费？SCU可以退款吗？ESSD...
ALTER TABLE
alter table 只会影响分区表的新建分区（包括 insert overwrite 生成的），新分区将按新的聚簇属性存储，老数据分区的聚簇属性和存储保持不变。即在一张曾经做过聚簇属性设置的表上，关闭了聚簇属性，再增加聚簇设置，可以在新分区设置不同...
分区和列操作
分区和列操作为您提供了变更MaxCompute中表的分区或列的操作方法，您可以根据实际业务场景执行相应操作。本文为您介绍如何添加或删除分区、添加或修改列及注释常用操作。分区和列操作详情请参见 分区和列操作。分区和列操作常用命令如下。...
谷歌BigQuery数据迁移至AnalyticDB PostgreSQL版
已准备用于导出谷歌BigQuery数据的谷歌Cloud Storage服务，并创建存储分区（Bucket）。已创建拥有访问谷歌Cloud Storage权限的IAM用户。已开通阿里云对象存储服务（OSS），OSS的详细信息，请参见 什么是对象存储OSS。已创建OSS存储空间，请...
Kafka数据接入
分区顺序消息：默认情况下，保证相同Key的消息分布在同一个分区中，且分区内消息按照发送顺序存储。集群中出现机器宕机时，仍然保证分区内按照发送顺序存储。但是会出现部分分区发送消息失败，等到分区恢复后即可恢复正常。当 存储引擎 ...
分区均衡引流
Topic分区引流 如果某一云存储类型的Topic分区分配不均且流量过大，导致集群某个磁盘水位飙升，那么可以针对此Topic使用Topic分区引流功能，将此Topic分区上的流量引流至磁盘水位较低的节点。风险说明 为了保证集群稳定，进行集群分区均衡...
创建投递任务
如果不设置此参数，则按数据写入表格存储的时间进行分区。parquetSchema：指定需要投递的数据列，必须手动配置投递字段的源表字段、目标字段和目标字段类型。您可以选择任意字段以任意顺序、名称写入列存文件，OSS的列存数据会按Schema数组...
产品优势
随着表数据量的不断增大，表格存储 会进行数据分区的调整从而为该表配置更多的存储。表格存储 可支持不少于10 PB数据存储量，单表可支持不少于1 PB数据存储量或1万亿条记录。高可靠 表格存储 将数据的多个备份存储在不同机架的不同机器上，...
如何选择实例规格？
标准版 流量规格：集群流量的总量÷3（优化）磁盘大小：流量均值×存储时长×3（备份）分区数量：根据实际业务需求 说明 建议您在迁移上云过程中优化分区数以降低成本。专业版 流量规格：集群流量的总量÷3（优化）磁盘大小：流量均值×...
表操作篇
为高效利用表格存储，在设计表格存储的表的主键时，需考虑表的分区键：分区方式 说明 使用 CardID 作为表的分区键 使用 CardID 作为表的分区键是一个比较好的选择。每天每张卡产生的消费记录数从总体上来讲是均匀的，每一个分区中的访问...
常见问题
本文列举了阿里云 表格存储 的常见问题，帮助您快速了解 表格存储。一般性常见问题 什么是 表格存储？表格存储 面向海量结构化数据提供Serverless表存储服务，同时针对物联网场景深度优化提供一站式的IoTstore解决方案。适用于海量账单、IM...
表格存储
适用场景 表格存储 单表支持PB级存储、千万QPS，以及多种索引方式（全局二级索引、全文索引、倒排索引以及时空索引），被广泛用于社交互联网、物联网、人工智能、元数据和大数据等领域结构化数据业务场景。元数据 用户存储海量的文档、媒体...
创建投递任务
如果不设置此参数，则按数据写入表格存储的时间进行分区。Schema：指定需要投递的数据列，必须手动配置投递字段的源表字段、目标字段和目标字段类型。您可以选择任意字段以任意顺序、名称写入列存文件，OSS的列存数据会按Schema数组中的...
使用SDK
如果不设置此参数，则按数据写入表格存储的时间进行分区。parquetSchema：指定需要投递的数据列，必须手动配置投递字段的源表字段、目标字段和目标字段类型。您可以选择任意字段以任意顺序、名称写入列存文件，OSS的列存数据会按Schema数组...
Topic分区倾斜怎么办？
如果由于业务原因，无法新增分区，且Topic存储类型为云存储，您可以通过分区均衡功能将分区位置进行调整。调整后，Topic分区新增的数据会被引流到磁盘水位较低的磁盘上。老磁盘上的数据需要等待消息过期后才会被删除，水位随之下降。更多...
如何快速测试云消息队列 Kafka 版服务端是否正常？
分区顺序消息：默认情况下，保证相同Key的消息分布在同一个分区中，且分区内消息按照发送顺序存储。集群中出现机器宕机时，仍然保证分区内按照发送顺序存储。但是会出现部分分区发送消息失败，等到分区恢复后即可恢复正常。当 存储引擎 ...
步骤三：创建资源
分区顺序消息：默认情况下，保证相同Key的消息分布在同一个分区中，且分区内消息按照发送顺序存储。集群中出现机器宕机时，仍然保证分区内按照发送顺序存储。但是会出现部分分区发送消息失败，等到分区恢复后即可恢复正常。当 存储引擎 ...
数据存储量
说明 表格存储会异步对各个数据分区过期的数据及超过最大版本号的版本数据进行清理操作，并在清理操作完成后统计该数据分区数据量。清理时长与总数据量相关，一般会在24小时内完成。数据清理操作完成后新写入的数据将在下一个数据清理操作...
OSS性能与扩展性最佳实践
如果您在上传大量文件（Object）时，在命名上使用了顺序前缀（如时间戳或字母顺序），可能会出现大量文件索引集中存储于存储空间（Bucket）中的某个特定分区的情况。此时如果您的请求次数过多，会导致请求速率下降。出现此类问题时，建议您...
基本概念
分区顺序消息 默认情况下，保证相同Key的消息分布在同一个分区中，且分区内消息按照发送顺序存储。集群宕机时，不会造成消息乱序。但是会出现部分分区发送消息失败的情况，等到宕机机器重新上线后即可恢复正常。更多信息，请参见 存储引擎...
作为Output接入
分区顺序消息：默认情况下，保证相同Key的消息分布在同一个分区中，且分区内消息按照发送顺序存储。集群中出现机器宕机时，仍然保证分区内按照发送顺序存储。但是会出现部分分区发送消息失败，等到分区恢复后即可恢复正常。当 存储引擎 ...
作为Output接入
分区顺序消息：默认情况下，保证相同Key的消息分布在同一个分区中，且分区内消息按照发送顺序存储。集群中出现机器宕机时，仍然保证分区内按照发送顺序存储。但是会出现部分分区发送消息失败，等到分区恢复后即可恢复正常。当 存储引擎 ...
作为Input接入
分区顺序消息：默认情况下，保证相同Key的消息分布在同一个分区中，且分区内消息按照发送顺序存储。集群中出现机器宕机时，仍然保证分区内按照发送顺序存储。但是会出现部分分区发送消息失败，等到分区恢复后即可恢复正常。当 存储引擎 ...
作为Output接入
分区顺序消息：默认情况下，保证相同Key的消息分布在同一个分区中，且分区内消息按照发送顺序存储。集群中出现机器宕机时，仍然保证分区内按照发送顺序存储。但是会出现部分分区发送消息失败，等到分区恢复后即可恢复正常。当 存储引擎 ...
作为Input接入
分区顺序消息：默认情况下，保证相同Key的消息分布在同一个分区中，且分区内消息按照发送顺序存储。集群中出现机器宕机时，仍然保证分区内按照发送顺序存储。但是会出现部分分区发送消息失败，等到分区恢复后即可恢复正常。当 存储引擎 ...
增量同步性能白皮书
单机同步单分区 单机同步4个分区 单机同步8个分区 单机同步32分区 单机同步64分区 2台机器同步64分区 2台机器同步128分区 说明 上述测试场景不是产品能力的极限测试，对表格存储服务端的整体压力较小。测试步骤 创建数据表并进行预分区...
作为Output接入
分区顺序消息：默认情况下，保证相同Key的消息分布在同一个分区中，且分区内消息按照发送顺序存储。集群中出现机器宕机时，仍然保证分区内按照发送顺序存储。但是会出现部分分区发送消息失败，等到分区恢复后即可恢复正常。当 存储引擎 ...
作为Input接入
分区顺序消息：默认情况下，保证相同Key的消息分布在同一个分区中，且分区内消息按照发送顺序存储。集群中出现机器宕机时，仍然保证分区内按照发送顺序存储。但是会出现部分分区发送消息失败，等到分区恢复后即可恢复正常。当 存储引擎 ...
作为Input接入
分区顺序消息：默认情况下，保证相同Key的消息分布在同一个分区中，且分区内消息按照发送顺序存储。集群中出现机器宕机时，仍然保证分区内按照发送顺序存储。但是会出现部分分区发送消息失败，等到分区恢复后即可恢复正常。当 存储引擎 ...
- 产品推荐
- 这些文档可能帮助您