DML操作常见问题
解决措施 一般作业输出动态分区数达到几千已经很大，超过10000可能存在业务逻辑或SQL语法问题。如无逻辑或语法问题，建议修改分区表的分区字段，或将业务逻辑拆分为多个作业，避免出现该错误。向MaxCompute表中插入动态分区时，报错invalid...
ODPS-0123031
解决方案 当某张表超出 60000 个分区时，你可以通过以下方式解决：1）通过设置表生命周期，系统自动删除过期的分区数据与分区，详情请参考 生命周期操作。2）您可以合并历史分区数据，例如把历史一个的数据合并成一个分区，详情可以参考 ...
2023年
ST_ImportGLTF、ST_ImportGLB 缺陷修复 ST_Intersection函数 修复ST_Intersection在对两条轨迹重叠的线段相交时判断错误的问题。ST_intersection 2023年5月 内核小版本（V1.1.32）类别 名称 描述 相关文档 新增 云上polar_superuser 细粒度...
计划加速
该算子用于解决分区表分区数量过多时，查询性能慢的问题。下方展示了当使用 PartitionedTableScan 算子时，分别查询这两个SQL所用的 Planning Time 和内存。explain analyze select*from part_hash;QUERY PLAN-PartitionedTableScan on ...
计划加速
该算子用于解决分区表分区数量过多时，查询性能慢的问题。下方展示了当使用 PartitionedTableScan 算子时，分别查询这两个SQL所用的 Planning Time 和内存。explain analyze select*from part_hash;QUERY PLAN-PartitionedTableScan on ...
分区分桶
为了帮助您深入理解 云数据库 SelectDB 版 的分区分桶的概念和如何实施分区分桶，本文档详细阐释了分区分桶的原理和操作示例，以帮助您理解分区分桶原理和如何实施分区分桶。概述 为了能高效处理大数据量的存储和计算，云数据库 SelectDB ...
出错提示S4目标磁盘分区初始化出错
本文主要介绍在使用SMC迁移时，迁移任务出错提示“S4_*目标磁盘分区初始化出错”的问题描述、问题原因及其解决方案。问题描述 在SMC迁移时，迁移任务出错提示“S4_*目标磁盘分区初始化出错”。其中S4_*可能的错误码如下：S4_105 S4_U28、S4...
出错提示S6磁盘分区创建快照出错
本文主要介绍在使用SMC迁移时，迁移任务出错提示“S6_*磁盘分区创建快照出错”的问题描述、问题原因及其解决方案。问题描述 在SMC迁移时，迁移任务出错提示“S6_*磁盘分区创建快照出错”。其中S6_*可能的错误码如下：S6_8 S6_1 问题原因 块...
Quick Audience数据导入中调度任务...提示表分区无数据
问题描述 Quick Audience数据导入中调度任务执行失败，报错提示表分区无数据...解决方案 数据导入的任务调度的分区日期与业务数据分区日期保持一致，可以在表结构配置的时候对分区日期字段和分区值格式进行设置。适用于 Quick Audience V4版本
出错提示S3磁盘分区数据同步出错
本文主要介绍在使用SMC迁移时，迁移任务出错提示“S3磁盘分区数据同步出错”的问题描述、问题原因及其解决方案。问题描述 在SMC迁移时，迁移任务出错提示“S3_*磁盘分区数据同步出错”。其中S3_*可能的错误码如下：S3_F30 S3_F32 S3_F6 S3_...
出错提示S8磁盘分区数据同步准备出错
本文主要介绍在使用SMC迁移时，迁移任务出错提示“S8_*磁盘分区数据同步准备出错”的问题描述、问题原因及其解决方案。问题描述 在SMC迁移时，迁移任务出错提示“S8_*磁盘分区数据同步准备出错”。其中S8_*可能的错误码如下：S8_U28 S8_U7 ...
Dataphin数据同步报错“分区配置错误，根据您所配置的...
问题描述 Dataphin配置数据同步任务，报错“分区配置错误，根据您所配置的分区没有匹配到源头表中的分区...解决方案 配置同步任务时需要检查源头表的分区，使输入与输出的分区表可以相互匹配。适用于 Dataphin 说明：本文适用于同步任务模块。
出错提示S9磁盘分区头数据同步出错
本文主要介绍在使用SMC迁移时，迁移任务出错提示“S9_*磁盘分区头数据同步出错”的问题描述、问题原因及其解决方案。问题描述 在SMC迁移时，迁移任务出错提示“S9_*磁盘分区头数据同步出错”。其中S9_*可能的错误码如下：S9_F4 S9_F40 问题...
ALTER TABLE
即在一张曾经做过聚簇属性设置的表上，关闭了聚簇属性，再增加聚簇设置，可以在新分区设置不同于之前的聚簇列、排序列及分桶数。由于 alter table 只影响新分区，所以该语句不可以再指定分区。参数说明 详情请参见 CREATE TABLE。使用示例-...
常见问题
使用云消息队列 Kafka 版时客户端的报错及解决方案 无法ping通云消息队列 Kafka 版的接入点 客户端消费问题 订阅者最佳实践 客户端首次接入云消息队列 Kafka 版时出现异常的排查方法 使用云消息队列 Kafka 版时出现消息堆积 为什么消费客户...
出错提示S7磁盘分区头数据同步准备出错
本文主要介绍在使用SMC迁移时，迁移任务出错提示“S7_*磁盘分区头数据同步准备出错”的问题描述、问题原因及其解决方案。问题描述 在SMC迁移时，迁移任务出错提示“S7_*磁盘分区头数据同步准备出错”。其中S7_*可能的错误码如下：S7_U28 S7...
分区均衡引流
背景信息 集群分区均衡引流 当您的Topic上的分区数分配不均衡时，有可能会引起集群分区倾斜，最终导致集群的磁盘性能和容量不能被充分利用的问题。解决此问题的方法是将Topic分区数增加至集群推荐的倍数。在生产环境中，可能会遇到某些业务...
Dataphin管道任务运行失败，提示“分区配置错误”
问题描述 Dataphin管道任务运行失败，提示“分区配置错误”。问题原因 输入配置中分区配置异常，写...解决方案 分区配置需填写具体分区，如需导入多分区，建议分任务执行。适用于 Dataphin 说明：本文适用于公共云v2.9.4-3版本数据集成模块。
计费规则
包年包月计费是一种需要先付费才能使用资源的计费方式，主要适用于稳定的业务运行场景。您需要根据实际业务量分析资源的使用需求，一次性支付一个月、多个月或多年的费用。支付成功后，资源被系统分配，直到资源有效期到期后未继续续费而被...
出错提示S10磁盘分区文件数据同步测试出错
本文主要介绍在使用SMC迁移时，迁移任务出错提示“S10_*磁盘分区文件数据同步测试出错”的问题描述、问题原因及其解决方案。问题描述 在SMC迁移时，迁移任务出错提示“S10_*磁盘分区文件数据同步测试出错”。其中S10_*可能的错误码如下：S...
分区设计
表的数据将拆解成多个数据分区独立存储，通常的设计原则是：主键（Primary Key）单实例数据库不要求表一定要有主键，但是对于分布式数据库，主键则是必须的，以保证一行数据是全局唯一的，避免迁移过程出现问题。如果用户没有特殊的性能...
CREATE TABLE
使用一级HASH分区时，如果自定义的HASH键存在热点问题，则可能导致大量数据写入同一个分区中，影响查询和写入性能，建议考虑多级分区，对数据进一步打散。创建搜索表，按照storeId列进行HASH分区（也就是一级HASH分区），分区数量为16。...
初始化小于等于2 TiB数据盘（Linux）
初始化云盘FAQ 创建GPT分区时，分区未对齐如何解决？运行以下命令，查看云盘参数。cat/sys/block/vdb/queue/optimal_io_size cat/sys/block/vdb/queue/minimum_io_size cat/sys/block/vdb/alignment_offset cat/sys/block/vdb/queue/...
分区表常见问题
在 PolarDB MySQL版 8.0.1和8.0.2版本中，不存在该问题，分区的内存都是共享的。建议您升级您的内核版本。为什么添加分区的（ADD PARTITION）操作耗时长，如何避免？操作耗时长是因为在该分区表上有大事务正在进行。PolarDB MySQL版 8.0.2...
计费概述
后续使用各个子产品时，子产品计费项将分别计费，费用明细将出现在PAI的产品账单中。各个子产品的计费说明，请参见 计费说明。和其他产品组合开通 在开通PAI产品时，您可以组合开通其他产品，例如：OSS、MaxCompute、DataWorks等。组合开通...
常见问题
本文汇总了Hudi使用时的常见问题。Spark查询Hudi数据重复，如何处理？Hive查询Hudi数据重复，如何处理？Spark查询Hudi表分区裁剪不生效？使用Spark的alter table语句时，报错xxx is only supported with v2 tables，如何处理？Spark查询...
Linux实例SWAP分区的配置和常见问题处理
sysctl-p 常见问题处理 常见问题描述 使用mkswap创建SWAP时出现类似如下报错信息：mkswap:error:swap area needs to be at least 40 KiB 问题原因 指定的SWAP分区文件太小，SWAP分区文件至少应该大于40KB。解决方法 重新生成更大的文件格式...
CDN无法变更计费方式
问题原因 CDN将无法按流量计费变更为按带宽峰值计费或月结95带宽峰值计费的原因如下：计费方式变更为按带宽峰值计费时，需要业务满足近30天的带宽峰值超过5Gbps。计费方式变更为月结95带宽峰值计费时，需要业务满足月消费金额大于10万。...
常见问题
如果单表数据量超过10亿，或查询RT和查询QPS无法满足要求时可以通过创建分区索引来解决相关问题。分区索引需要关注的内容，请参见 分区索引的适用场景和不适用场景有哪些？和 创建分区索引时，需要关注哪些参数？分区索引的适用场景和不...
Linux实例中数据恢复
在处理磁盘相关问题时，您可能会碰到操作系统中数据盘分区丢失的情况。本文介绍了Linux系统下常见的数据盘分区丢失的问题以及对应的处理方法，同时提供了使用云盘的常见误区以及最佳实践，避免可能的数据丢失风险。前提条件 在修复数据前，...
计费概述
本文为您介绍MaxCompute计费项、计费方式、查看账单详情、续费管理等计费相关说明。MaxCompute包含的计费说明如下表所示。计费管理 说明 计费项与计费方式 介绍MaxCompute费用组成、计费项与计费方式、计费方式选择。新用户免费试用额度 您...
使用fdisk扩容新分区起始位置无法与扩容前保持一致
问题描述 使用fdisk扩容新分区起始位置无法与扩容前保持一致，具体信息如下所示。查看vdb1磁盘分区情况，如下图所示，扩容前分区起始位置63。使用fdisk删除分区后，新建分区时最小起始位置为2048，无法与原分区保持一致。问题原因 用户在...
确认表血缘
若上游节点产出的表分区值与下游节点依赖的表分区不匹配，您可根据业务需要综合考量，是否需要修改节点的调度参数配置，以此方式实现节点产出的表分区与节点依赖的表分区数据相匹配。若需依赖上游节点上一周期产出的表分区数据，您可考虑...
表设计规范
单个分区中数据量较大的情况下，MaxCompute执行任务时会进行分片处理而不影响分区裁剪的优势。单个分区中文件数较多时，会影响MaxCompute Instance数量，造成资源浪费和SQL性能的下降。采用多级分区时，建议先按日期分区，然后按交易类型...
流量计费保护
分时费用明细：查看分时总费用、流量计费保护功能节省的费用（包括流量处理费和功能费）。云监控告警 一小时内的峰值QPS大于流量计费保护阈值时，云监控会自动给告警联系人发送告警邮件、短信。您可以在收到告警信息时，及时查看并处理告警...
Dataphin中汇总逻辑表补数据生成SQL中...输入的业务日期
概述 Dataphin中汇总逻辑表补数据时，生成的SQL中事实逻辑表筛选日期是最大分区（20230516），而不是补数据输入的业务日期（20230505）。详细信息 汇总逻辑表补数据生成的SQL中，具体分区是由事实逻辑表的“分区与生命周期”中设置的。该...
应用场景
但随着支付宝业务的飞速发展，发现系统中的单机容量开始出现不足，在分库分表的架构下，这种情况只能通过将数据继续拆分成 M*N 份来解决，导致一方面耗时耗力，另外一方面技术风险非常高。而 OceanBase 数据库利用分区表的方案及其带来的...
与标准SQL的主要区别及解决方法
本文为您列举MaxCompute SQL与标准SQL的区别及常见问题解决方法。MaxCompute SQL与标准SQL的基本区别 主要区别 问题现象 解决方法 应用场景 不支持事务（不支持Commit和Rollback，不推荐使用INSERT INTO）。建议代码具备幂等性，支持重新...
Kafka常见问题
本文介绍使用Kafka时可能遇到的问题及解决方法。如何清理Kafka组件输出日志 如何清理Kafka-Manager服务输出日志 是否可以停止Kafka-Manager服务 报错“ERROR:Wile executing topic command:Replication factor:1 larger than available ...
弹性QPS计费说明
如果您的业务QPS通常比较平稳，仅在大促、新业务上线等特定场景才会出现QPS突增，您购买高防实例时业务QPS规格可以选择为正常场景下的QPS，然后开启弹性QPS，避免QPS超限导致的业务丢包或限流问题。本文介绍了DDoS高防实例弹性QPS的计费...
- 产品推荐
- 这些文档可能帮助您