Tunnel SDK常见问题
每一次上传只支持将数据上传到一张表或表的一个分区，有分区的表一定要指定上传的分区，多级分区一定要指定到末级分区。使用Tunnel SDK上传数据时，编写完UDF打成JAR包后上传，对JAR包大小有要求吗？JAR包不能超过10 MB，如果JAR包超过10 ...
数据消费框架原理
背景信息 Tunnel Client可以解决全量和增量数据处理时的常见问题，例如负载均衡、故障恢复、Checkpoint、分区信息同步确保分区信息消费顺序等。使用Tunnel Client后，您只需要关心每条记录的处理逻辑。Tunnel Client的代码详情请参见 ...
Logview诊断实践
产生原因二：Project做过迁移，分区过滤未能处理好，导致读取了比较老的分区。解决措施：过滤掉不必要读取的老分区。执行阶段 Logview的 Detail 界面有执行计划（执行计划没有全部完毕），且作业状态还是Running。执行阶段卡住或执行时间比...
故障取消
cancelReason Long Body 否 取消原因 取消原因 problemNotifyType Long Body 否 PROBLEM_NOTIFY PROBLEM_NOTIFY 通告类型 PROBLEM_NOTIFY：故障通告 PROBLEM_UPDATE：故障更新 PROBLEM_UPGRADE：故障升级 PROBLEM_DEGRADE：故障降级 ...
故障排查
排查故障的经典步骤与常见原因 如何通过查看日志排查故障？ACK集群异常 添加Kubernetes集群节点的常见问题 容器镜像仓库构建服务失败问题排查 容器镜像服务源码绑定失败问题排查 Kubernetes集群如何指定安全组 Kubernetes集群网络异常的...
出错提示S6磁盘分区创建快照出错
本文主要介绍在使用SMC迁移时，迁移任务出错提示“S6_*磁盘分区创建快照出错”的问题描述、问题原因及其解决方案。问题描述 在SMC迁移时，迁移任务出错提示“S6_*磁盘分区创建快照出错”。其中S6_*可能的错误码如下：S6_8 S6_1 问题原因 块...
为什么发送给Topic的消息在分区中分布不均衡
可能原因 发送消息时指定了分区，导致未指定的分区没有消息。发送消息时指定了消息Key，按照对应的Key发送消息至对应的分区，导致分区消息不均衡。通过代码重新实现了分区分配策略，但策略逻辑有问题，导致分区消息不均衡。
DML操作常见问题
FAILED:ODPS-0123031:Partition exception-a single instance cannot output data to more than 10000 partitions 产生原因 虽然单个MaxCompute表允许有6万个分区，但是单个作业涉及的输出表分区数量只允许有10000个。出现这个错误，通常是...
DeviceLinkDown
告警信息 事件名称 事件级别 状态码 状态描述 DeviceLinkDown CRITICAL linkdown Device Link State Change 可能原因 用户侧交换机设备故障。用户侧交换机配置故障。用户侧交换机和设备的连线问题。处理方法 检查用户侧交换机。...
配置规则：按模板（批量）
说明 试跑错误的可能原因为：表或表分区不存在、表数据不符合质量校验规则。定义报警接收人：订阅管理 您可以单击 订阅管理，选择 订阅方式 及 接受对象，目前支持通过 邮件通知、邮件和短信通知、钉钉群机器人、钉钉群机器人@ALL、飞书群...
Tunnel命令常见问题
ErrorCode=NoSuchPartition,ErrorMessage=The specified partition does not exist 产生原因 数据要插入的目标分区不存在。解决措施：您可以先通过 show partitions table_name;命令来判断分区是否存在，并通过 alter table table_name add...
查看分区状态
当Kafka集群出现消息堆积、磁盘水位过高等异常情况时，可查看分区状态了解服务端的消息量及各个分区的消费进度，定位异常原因。前提条件 已创建Topic 操作步骤 登录 云消息队列 Kafka 版 控制台。在 概览 页面的 资源分布 区域，选择地域。...
云盘扩容后使用growpart扩展GPT分区失败该如何处理？
可能原因 初始化数据盘（例如/dev/vdb）时，未按推荐的分区对齐方式进行分区，即未按要求执行 mkpart primary 1 100%命令设置分区的开始位置和结束位置。您可以执行以下命令查看分区是否对齐：fdisk-l：查看 Start 值是否为 2048。如果不是...
为什么分区消费时间相差较大、滞后明显或乱序？
原因 同一个 Group 的所有消费端实例，会按分区均匀分配。在此条件下，消费的消息是否均匀，取决于客户的Producer在发送消息时，发送消息对各个分区是否均匀：如果消费端个数N可以整除24（默认分区个数），那么分区对消费端的分配就是均匀...
出错提示S4目标磁盘分区初始化出错
本文主要介绍在使用SMC迁移时，迁移任务出错提示“S4_*目标磁盘分区初始化出错”的问题描述、问题原因及其解决方案。问题描述 在SMC迁移时，迁移任务出错提示“S4_*目标磁盘分区初始化出错”。其中S4_*可能的错误码如下：S4_105 S4_U28、S4...
Dataphin数据同步报错“分区配置错误，根据您所配置的...
问题描述 Dataphin配置数据同步任务，报错“分区配置错误，根据您所配置的分区没有匹配到源头表中的分区”。com.alibaba.dt.pipeline.plugin.center.exception.DataXException: Code:[OdpsReader-33],Description:[分区配置错误.].-分区...
分区表常见问题
分区表查询计划不准确主要的原因是统计信息不准确，在8.0.2版本中已经针对这个问题做了分区级别统计信息优化，建议您将版本升级到8.0.2。PolarDB MySQL版 的物理表如何分区？一般情况下，每个分区是一个Innodb表，Hybrid分区可以放在其他...
出错提示S3磁盘分区数据同步出错
本文主要介绍在使用SMC迁移时，迁移任务出错提示“S3磁盘分区数据同步出错”的问题描述、问题原因及其解决方案。问题描述 在SMC迁移时，迁移任务出错提示“S3_*磁盘分区数据同步出错”。其中S3_*可能的错误码如下：S3_F30 S3_F32 S3_F6 S3_...
出错提示S2磁盘分区文件数据同步出错
本文主要介绍在使用SMC迁移时，迁移任务出错提示“S2_*磁盘分区文件数据同步出错”的问题描述、问题原因及其解决方案。问题描述 在SMC迁移时，迁移任务出错提示“S2_*磁盘分区文件数据同步出错”。其中S2_*可能的错误码如下：S2_R255 S2_R...
出错提示S9磁盘分区头数据同步出错
本文主要介绍在使用SMC迁移时，迁移任务出错提示“S9_*磁盘分区头数据同步出错”的问题描述、问题原因及其解决方案。问题描述 在SMC迁移时，迁移任务出错提示“S9_*磁盘分区头数据同步出错”。其中S9_*可能的错误码如下：S9_F4 S9_F40 问题...
消息查询
在使用Kafka的过程中遇到无法正确消费消息、消息丢失、消息延迟等消费问题时，您可通过消息查询功能查看指定消息的详细内容和相关属性，帮助您排查异常原因。若确定消息所在Topic的分区ID以及消息位点，可采用按位点查询消息；若不确定消息...
出错提示S8磁盘分区数据同步准备出错
本文主要介绍在使用SMC迁移时，迁移任务出错提示“S8_*磁盘分区数据同步准备出错”的问题描述、问题原因及其解决方案。问题描述 在SMC迁移时，迁移任务出错提示“S8_*磁盘分区数据同步准备出错”。其中S8_*可能的错误码如下：S8_U28 S8_U7 ...
出错提示S7磁盘分区头数据同步准备出错
本文主要介绍在使用SMC迁移时，迁移任务出错提示“S7_*磁盘分区头数据同步准备出错”的问题描述、问题原因及其解决方案。问题描述 在SMC迁移时，迁移任务出错提示“S7_*磁盘分区头数据同步准备出错”。其中S7_*可能的错误码如下：S7_U28 S7...
出错提示S10磁盘分区文件数据同步测试出错
本文主要介绍在使用SMC迁移时，迁移任务出错提示“S10_*磁盘分区文件数据同步测试出错”的问题描述、问题原因及其解决方案。问题描述 在SMC迁移时，迁移任务出错提示“S10_*磁盘分区文件数据同步测试出错”。其中S10_*可能的错误码如下：S...
Dataphin资产地图表的分区概览没有及时同步显示的原因
问题描述 相关表的分区是存在的，Dataphin资产地图表的分区...问题原因 因为该表是外部表，且从ODPS-SDK那里拿不到dmlTime变化，导致无法识别到分区新增了。解决方案 目前可通过手动刷新元数据的方式来显示表的分区概览信息。适用于 Dataphin
FTP的文件列表下的隐藏文件不显示
使用FTP工具连接云虚拟主机后，基于数据安全因素，一般情况下，默认在远程站点区域的文件列表中隐藏文件不显示。您需要通过更改FTP客户端的设置，来强制显示该隐藏文件。本文介绍这种情况的原因和解决方案。问题现象 通过FTP工具连接到 ...
副本集架构
隐藏节点（Hidden节点）通过操作日志（oplog）同步主节点的数据，可在从节点故障时接替该故障节点成为新的从节点，也可在只读节点故障时接替该故障节点成为新的只读节点，保障高可用。隐藏节点仅用作高可用，对客户端不可见。隐藏节点不在...
Topic删除后不能减少分区？
可能原因 老版本删除Topic时，不会彻底清除路由，导致再次创建Topic时无法减少分区。升级到新版本后，那些曾经在老版本删除过的Topic，其路由仍然保留着，为了对其进行彻底清除，需要”创建->删除->再创建”Topic，待该流程完成之后，就...
转换MBR分区为GPT分区
MBR分区格式不支持2 TiB以上的云盘。如果该云盘目前使用的是MBR分区类型，且希望将其扩容至2 TiB以上，需要先将分区类型从MBR转换为GPT。本文为您介绍如何将Linux和Windows数据盘的MBR分区转换为GPT分区。转换Linux数据盘的分区类型 您可以...
回切至本地物理机
如果扩充的是包含系统分区的磁盘，那么扩充的这部分空间会被ECS自动填充给系统分区，这样在恢复到本地的物理机时可能会出现分区越界的问题。如果系统分区相对源端机器被扩容，将会收缩相应的空间，确保和源端机器保持一致。反向注册。确认...
为什么Topic有分区时间显示1970或“-”？
可能原因 出现此问题的原因可能是以下情况中的一种：该分区没有消息数据，或者消息都已过期。客户端版本过低，或者传递的时间戳为null。Local存储引擎：开源Apache Kafka接口未提供该数据，所以未显示。云存储引擎：最近更新时间存在缓存...
使用表格存储过程中返回503错误码
问题原因 表格存储使用共享存储的机制，以数据分区为逻辑单位，因此在负载均衡的过程中不会有实际数据的迁移，只是数据表元信息的变更。在元信息变更的过程中，为了保证数据的一致性，涉及到的数据分区会有短暂的不可用时间，正常情况下...
故障应急协同
故障通告及更新 基于7x24监控值班工作特性，对于业务异常达到故障等级时，以用户定制的（语音、短信、IM）的方式在约定时间内将故障影响信息以及处理进展通知给对应的接收人/组，并持续更新直至故障结束。故障应急协同群 故障发生后，可以...
围绕混沌工程的平台实践
原则3在生产环境中运行实验 混沌工程推荐故障演练是在生产环境中进行，主要的原因有以下两点：系统的行为会根据环境和流量模式的变化，例如系统依赖的组件在测试环境和生产环境会有比较大的差异。系统的监控和人员的应急响应在测试环境和...
在线分区维护
原因是事务访问到了DDL所创建出来的新分区，可通过重新执行事务解决。使用说明及示例 在线分区维护功能，使得分区表的数据访问和分区维护相互不影响，用户可以更自由的进行分区维护，而不影响分区表业务流量，使用示例及效果如下：#在客户...
Node Labels特性使用
必须配置其所有祖先队列的相同分区容量才能使指定队列的实际资源量大于0，原因是包括root节点在内的 yarn.scheduler.capacity.<queue-path>.accessible-node-labels.<label>.capacity 的默认值为0，所以必须配置 yarn.scheduler.capacity....
DeleteQualityFollower
调用DeleteQualityFollower接口，删除分区表达式的订阅用户。删除后，当数据质量的监控规则被触发，该订阅用户将不会再收到通知消息。数据质量是通过分区表达式来确定需要配置的监控规则。通过该规则帮助您第一时间感知源端数据的变更与ETL...
MaxCompute分区表数据导入
注意事项 使用临时表的原因是为了保证原子性，只有在导入完成后才绑定至分区表，为了避免导入任务失败时还需要重新删除表等操作。对于更新子表分区数据场景，需要删除子表和重新绑定临时表放入一个事务过程中，保证该过程的事务性。使用...
为什么同一个分区被多个消费线程消费了？
问题现象 消费客户端使用“StickyAssignor”分配模式消费消息时，发现同一个分区被多个消费线程消费，出现数据错乱的情况。可能原因 您的客户端低于2.3版本。2.3版本以前的客户端有可能将同一个分区分配给多个消费线程进行消费。更多信息，...
PolarDB MySQL版8.0.2版本发布日志
修复分区表的所有分区在分区剪枝阶段都被裁剪掉的情况下，使用RANGE INDEX访问分区表的全局二级索引时，触发ASSERT CRASH（断言错误）的问题。修复将冷数据归档为ORC格式时，因表中存在Blob类型的字段导致归档失败的问题。修复MRR等场景下...
- 产品推荐
- 这些文档可能帮助您