索引介绍
使用宽表模型的表引擎查询数据时存在依赖主键以及根据属性查询效率低的问题，表格存储提供了二级索引和多元索引用于解决宽表模型的数据查询问题。您也可以为数据表创建映射关系后，像使用传统数据库一样使用SQL查询表中数据。表引擎 宽表...
离线扩容分区和文件系统（Linux数据盘）
具体问题与解决方案请参见 使用fdisk扩容新分区起始位置无法与扩容前保持一致。输入 w：保存修改并退出。以下为扩容分区的命令行交互示例。本示例中，将/dev/vdb1 由20GiB扩容到40GiB。[testuser@ecshost~]#sudo fdisk-u/dev/vdb Welcome ...
2021年
对分区表使用跨机并行查询 GLOBAL INDEX支持对分区表进行DDL操作 支持在对分区表进行DDL操作时（如DROP、SPLIT、MERGE等），操作该分区表下的所有GLOBAL INDEX。支持对分区表进行DDL操作 优化 ORA_HASH函数兼容性 ORA_HASH函数替换为DBMS_...
分区分桶
为了帮助您深入理解 云数据库 SelectDB 版 的分区分桶的概念和如何实施分区分桶，本文档详细阐释了分区分桶的原理和操作示例，以帮助您理解分区分桶原理和如何实施分区分桶。概述 为了能高效处理大数据量的存储和计算，云数据库 SelectDB ...
0004-00000302
问题示例 无 解决方案 降低发起请求的频率。单个阿里云账号的总QPS为10,000，但在不同的读写方式下，实际能达到的值如下：顺序读写：2,000 如果您在上传大量文件时，在命名上使用了顺序前缀（如时间戳或字母顺序），可能会出现大量文件索引...
分区均衡引流
解决此问题的方法是将Topic分区数增加至集群推荐的倍数。在生产环境中，可能会遇到某些业务不能及时调整分区的情况，此时可以使用集群分区均衡功能。此功能会将集群中所有云存储类型的Topic的分区进行引流调整，使每个节点上的分区数尽量...
表格存储建表注意事项
表格存储支持半结构化的表，即建表时只需要...当然，表格存储的扩展能力可以有效地解决表个数的限制，但从表格存储服务本身资源可控性角度来看，表格存储设定了单个账户表个数的限制。如果您仍然需要提高一个账号下表个数的限制，请提交工单。
何时选择间隔（Interval）分区
Interval Range分区是Range分区的扩展，在数据到达时自动创建间隔分区，不需要再手动创建新分区，方便了Range分区维护操作。向RANGE分区表插入数据时，如果插入的数据超出当前已存在分区的范围，将无法插入并且会返回错误；而对于INTERVAL ...
单元化介绍
数据库单点 紧接着数据库单点，解决起来就开始不那么容易了，典型的做法是先垂直拆分，再水平拆分，在这个过程中需要解决多数据源、数据分片、透明访问等问题。机房单点 当应用越来越多、服务器越来越多、数据库越来越多，单个机房的容量...
与标准SQL的主要区别及解决方法
本文为您列举MaxCompute SQL与标准SQL的区别及常见问题解决方法。MaxCompute SQL与标准SQL的基本区别 主要区别 问题现象 解决方法 应用场景 不支持事务（不支持Commit和Rollback，不推荐使用INSERT INTO）。建议代码具备幂等性，支持重新...
分布式线性扩展
本文详细介绍了分布式线性扩展的特性。数据物理分布 PolarDB-X 将数据表以水平分区的方式，分布在多个存储节点...但有了表组的概念之后，由于user表和orders表位于同一表组中，它们的分区迁移、分裂与合并都会同步进行，解决了上述的问题。
表设计
解决方法一：合理设置分区键 针对上面例子中的热点问题，可以把MachineIp放到主键列的第一列，Timestamp放到第二列。这样就把写入压力按照Machine这个级别进行了分散，即写入的是每个Machine的尾部，大部分情况下也足够分散了。类似...
RDS MySQL助力MySQL 5.7升级8.0
与自行升级用户相比，用户进行阿里云RDS MySQL的大版本升级时，无需进行繁琐的检查，也无需反复核查错误日志并逐一解决问题，仅需点击控制台上的升级按钮，所有升级动作将在后台自动完成。针对线上常见的大版本升级失败问题，阿里云RDS ...
503错误
解决方案：单个账号的总QPS为10,000，但在不同的读写方式下，实际能达到的值如下：顺序读写：2,000 如果您在上传大量文件时，在命名上使用了顺序前缀（如时间戳或字母顺序），可能会出现大量文件索引集中存储于存储空间中某个特定分区的...
常见问题
本文列举了阿里云 表格存储 的常见问题，帮助您快速了解 表格存储。一般性常见问题 什么是 表格存储？表格存储 面向海量结构化数据提供Serverless表存储服务，同时针对物联网场景深度优化提供一站式的IoTstore解决方案。适用于海量账单、IM...
表操作篇
CardID 拼接成分区键，而不选择将 DeviceID 和 SellerID 进行拼接的原因是，前一节提到的消费记录表约定所有 DeviceID 相同的消费记录其 SellerID 也相同，因此仅仅拼接 DeviceID 和 SellerID 并不能解决单个分区键值的数据量过大的问题。...
功能发布记录（2023年）
2023.4.11 所有地域 所有DataWorks用户 SQL查询 2023-03 功能名称 功能描述 发布时间 发布地域 使用客户 相关文档 数据治理中心支持使用消息通知治理问题 管理员及个人用户，可将治理工作台中每日治理的待解决问题，以消息通知的形式，通过...
Tunnel SDK常见问题
问题现象 使用Tunnel SDK下载分区表数据，返回如下报错。ErrorCode=MissingPartitionSpec,ErrorMessage=You need to specify a partitionspec along with the specified table.产生原因 使用Tunnel SDK下载分区表数据时，需要指定分区列的...
偏分析场景的实践和优化
同时我们也支持通过指定分区键建分区表，在分析场景中建议您根据如下依据选择分区键：尽可能选择参与JOIN的字段作为分区键，这样做的目的是为了关联条件下推，避免数据被拉取到计算层做计算。尽可能选择值分布均匀的字段作为分区键，这样...
局部事务
为了解决上述问题，您可以使用局部事务功能实现一个分区键值范围内的通用读取-修改-写回流程。使用StartLocalTransaction接口为分区键值创建一个局部事务，并获取局部事务ID。使用GetRow或GetRange接口获取数据，且在请求中需要带上局部...
CREATE TABLE
您将了解到如何创建分区表和维表，以及如何定义表的分布键、分区键、索引、生命周期、冷热数据分层等。设置默认值、自增列 设置主键 设置分布键 设置分区键与生命周期 设置聚集索引 设置全文索引 设置向量索引 设置冷热分层存储策略 表的...
如何实现不锁表转冷存
为了解决这类问题，PolarDB PostgreSQL版 提供了一种不锁表转冷存的途径，本文介绍操作方法。创建扩展 CREATE EXTENSION IF NOT EXISTS pg_repack;操作步骤 PolarDB PostgreSQL版 数据库提供的 pg_repack 插件可以实现在不持有大锁的情况下...
客户案例
而 OceanBase 提供的丰富的分区方式及 OLAP 能力有效地解决了不同场景下，业务指标的构建问题，这对于我们业务开发工作者来说可以更多的关注我需要什么样的指标，而不用考虑如何从存储系统中得到这些数据。大数据处理能力：随着阿里巴巴...
如何实现不锁表转冷存
为了解决这类问题，PolarDB PostgreSQL版（兼容Oracle）提供了一种不锁表转冷存的途径，本文介绍操作方法。创建扩展 CREATE EXTENSION IF NOT EXISTS pg_repack;操作步骤 PolarDB PostgreSQL版（兼容Oracle）数据库提供的 pg_repack 插件...
转换MBR分区为GPT分区
MBR分区格式不支持2 TiB以上的云盘。如果该云盘目前使用的是MBR分区类型，且希望将其扩容至2 TiB以上，需要先将分区类型从MBR转换为GPT。本文为您介绍如何将Linux和Windows数据盘的MBR分区转换为GPT分区。转换Linux数据盘的分区类型 您可以...
Tunnel命令常见问题
问题现象 在DataStudio上执行Tunnel Upload命令上传分区数据时，返回报错如下。FAILED:error occurred while running tunnel command.产生原因 DataStudio不支持Tunnel Upload命令。解决措施 根据DataWorks提供的可视化导入数据功能进行...
2023年
2024年1月 14.9.15.0 内核小版本 类别 说明 相关文档 发布时间 新增 支持分区表扫描算子，加速分区表执行计划的生成，解决大量分区场景下查询慢、内存消耗多的问题。分区表扫描算子 2023年12月 全局执行计划缓存功能，支持进程间共享执行...
MaxCompute近实时增全量一体化架构介绍
解决方案 MaxCompute存储引擎配套支持了合理高效的表数据服务，对存储数据进行自动治理和优化，降低存储和计算成本，提升分析处理性能。如上图所示，Transactional Table 2.0的表数据服务主要分成 Auto Sort、Auto Merge、Auto Partial ...
PolarDB PostgreSQL版：ePQ架构详解
PolarDB PostgreSQL版 实现了弹性跨机并行查询（ePQ）特性，能够帮助您解决原先的 PolarDB PostgreSQL版 在处理复杂的AP查询时会遇到的问题。前提条件 支持的 PolarDB PostgreSQL版 的版本如下：PostgreSQL 11（内核小版本1.1.28及以上）...
功能发布记录
重构Auto Analyze能力，采用分布式Auto Analyze，支持外表Auto Analyze，支持湖仓加速集群Auto Analyze，支持分区表增量Auto Analyze，解决超大表，超宽列Analyze失败等问题，显著减少表缺少统计信息场景，执行计划更稳定，性能消耗更低，...
PolarDB PostgreSQL版：ePQ架构详解
PolarDB PostgreSQL版（兼容Oracle）实现了弹性跨机并行查询（ePQ）特性，能够帮助您解决原先的 PolarDB PostgreSQL版（兼容Oracle）在处理复杂的AP查询时会遇到的问题。前提条件 支持的 PolarDB PostgreSQL版（兼容Oracle）的版本如下：...
宽表模型介绍
4 创建数据表 说明 合理的主键和分区键设计能有效避免数据热点问题，建议您参考 表操作最佳实践 和 表设计的最佳实践 文档进行表设计。创建数据表用于存储业务相关数据。创建数据表时，您可以根据业务需求同时配置如下功能。如果业务中需要...
什么是图计算服务
Graph Compute 与其他开源图计算相比的优势 问题一：查询性能为什么能比开源好很多 图计算服务内核引擎iGraph在分区并发查询的基础上，通过自研的协程异步框架并发召回，将同步串行磁盘访问改造为异步并行，极大的提高了查询性能；...
数据倾斜调优
数据倾斜排查及解决方法 根据使用经验总结，引起数据倾斜的主要原因有如下几类：Join GroupBy Count（Distinct）ROW_NUMBER（TopN）动态分区 其中出现的频率排序为 JOIN>GroupBy>Count(Distinct)>ROW_NUMBER>动态分区。Join 针对Join端产生...
稳定性说明与使用限制
MaxCompute IP白名单 限制项 说明 在MaxCompute项目管理中开启白名单（例如开启经典网络IP白名单），可能导致MaxCompute投递失败 可以在MaxCompute侧执行命令解决白名单导致的MaxCompute投递失败问题。setproject odps.security.ip....
MaxCompute投递（新版）
MaxCompute IP白名单 限制项 说明 在MaxCompute项目管理中开启白名单（例如开启经典网络IP白名单），可能导致MaxCompute投递失败 可以在MaxCompute侧执行命令解决白名单导致的MaxCompute投递失败问题。setproject odps.security.ip....
功能特性
计算 MaxCompute向用户提供了多种经典的分布式计算模型，提供TB、PB、EB级数据计算能力，能够更快速的解决用户海量数据计算问题，有效降低企业成本。功能集 功能 功能描述 参考文档 SQL开发 DDL语句 DDL语句 DDL DML操作 DML操作 DML操作 ...
对接MaxCompute常见问题与诊断
可以尝试重新构建需要进行表结构变更的MaxCompute外部表来解决该问题。常见报错 报错：SERVER_INTERNAL_ERROR message:GetRecordBatch()is not implemented.报错：ERROR:not an ORC file 报错：specified partitions count in MaxCompute ...
功能特性
透明可扩展 OceanBase 数据库独创的总控服务和分区级负载均衡能力使系统具有极强的可扩展性，可以在线进行平滑扩容或缩容，并且在扩容后自动实现系统负载均衡，对应用透明，确保系统的持续运行。此外，OceanBase 数据库支持超大规模集群...
列存索引如何实现高效数据过滤
优点是数据预先按分区键分布，通常均具有较好的过滤效果，如果用户大部分查询条件均包含分区键，并且还有按分区管理数据生命周期的需求，分区表pruning是个不错的选择，可根据需要建立一级或二级分区。minmax：一般需要该列数据分布有较好...
- 产品推荐
- 这些文档可能帮助您