数据详情
右上角展示了数据的状态以及对应的可执行操作，若数据处于运行中状态且被服务引用，则会展示最新索引详情 未上线数据 运行中表的表 已下线的表 配置管理 调度配置 目前仅支持依赖数据源产出新分区的调度策略 全量更新阈值 系统提供四个维度...
DML操作常见问题
问题类别 常见问题 插入或更新数据 执行INSERT操作过程中出现错误，会损坏原有数据吗？执行INSERT INTO或INSERT OVERWRITE操作时，提示Table xxx has n columns，but query has m columns，如何解决？执行INSERT INTO或INSERT OVERWRITE...
扩容分区和文件系统（Linux）
在ECS控制台上扩容云盘容量后，对应分区和文件系统并未扩容，您还需要进入ECS实例内部继续扩容云盘的分区和文件系统，将扩容部分的容量划分至已有分区及文件系统内，使云盘扩容生效。本文为您介绍如何通过两个步骤完成Linux实例云盘的分区...
管理问题数据
支持保留问题数据的规则列表与问题数据口径 目前支持保留问题数据的监控规则，及各规则问题数据的定义，详情请参见：附录：支持保留问题数据的规则列表与问题数据口径。注意事项 目前仅MaxCompute表支持配置保留问题数据功能。目前仅部分...
ANALYZE和AUTO ANALYZE
常见问题 出现如下情况，代表Auto Analyze工作未正常，请参照解决方法进行处理。表的统计信息是0条 问题现象：通过 hologres_statistic.hg_table_statistic 表查看表的统计信息，没有数据。可能原因：Auto Analyze没有工作，或者该表不符合...
Windows实例中数据恢复
底层存储的三副本提供对数据磁盘的物理层保护，但是，如果系统内部使用云盘逻辑上出现问题，例如中毒、误删数据、文件系统损坏等情况，还是可能出现数据丢失。此时，您需要通过快照、异地备份等相关技术最大保证数据的安全性。最佳实践 ...
查看实例风险
Topic 格式转换 同步发送问题 碎片化发送问题 单分区Topic风险 Topic分区倾斜问题 生产流量 分区数量配额 分区分配策略问题 Group 消费消息接收耗时 消费消息排队耗时 消费消息读磁盘耗时 消费消息读磁盘耗时 消费消息格式转换时间 Group...
通过SMC客户端导入迁移源
说明 如果导入迁移源失败，您可以根据回显信息，解决问题后，根据迁移源操作系统对root权限和sudo权限的支持情况，依次运行以下命令，退出后台程序并重新导入迁移源。常见问题及修复方案的更多信息，请参见 SMC FAQ 和 故障排除。使用sudo...
离线扩容分区和文件系统（Linux数据盘）
具体问题与解决方案请参见 使用fdisk扩容新分区起始位置无法与扩容前保持一致。输入 w：保存修改并退出。以下为扩容分区的命令行交互示例。本示例中，将/dev/vdb1 由20GiB扩容到40GiB。[testuser@ecshost~]#sudo fdisk-u/dev/vdb Welcome ...
实例启动异常常见错误与对应解决方案
可能原因如下：系统注册表损坏、磁盘问题、驱动问题、系统文件损坏或丢失、启动配置数据（Boot Configuration Data，BCD）文件损坏等。用户误操作、病毒、第三方杀毒软件、异常强制重启。解决方案 针对系统进入修复模式，建议您采用微软...
何时选择间隔（Interval）分区
说明_p 作为前缀的分区名将会保留为系统命名规则，手动管理分区（创建新分区或者重命名分区的操作）时，将不允许使用此类型的分区名。例如，ADD PARTITION 和 REORGANIZE PARTITION 操作将不允许使用‘_p’作为前缀的分区名；但是 DROP ...
Linux实例的/etc/fstab文件配置错误导致系统启动异常
阿里云对第三方产品的性能、可靠性以及操作可能带来的潜在影响，不做任何暗示或其他形式的承诺 问题描述 通过远程连接软件无法登录Linux实例，通过 使用管理终端连接Linux实例 远程连接时，发现系统出现进入到急救模式（emergency mode）的...
OSS性能与扩展性最佳实践
如果您在上传大量文件（Object）时，在命名上使用了顺序前缀（如时间戳或字母顺序），可能会出现大量文件索引集中存储于存储空间（Bucket）中的某个特定分区的情况。此时如果您的请求次数过多，会导致请求速率下降。出现此类问题时，建议您...
应用场景
但随着支付宝业务的飞速发展，发现系统中的单机容量开始出现不足，在分库分表的架构下，这种情况只能通过将数据继续拆分成 M*N 份来解决，导致一方面耗时耗力，另外一方面技术风险非常高。而 OceanBase 数据库利用分区表的方案及其带来的...
PolarDB MySQL版8.0.2版本发布日志
修复了在分区剪枝时因没有定位到分区而可能出现的死循环问题。8.0.2.2.18 类别 说明 发布时间 问题修复 修复删除相同的SQL语句类型中，最后一个只填写了keyword而没有schema和table的CCL规则时，可能导致节点崩溃的问题。2023-09-17 8.0.2....
Tunnel常见错误码
解决措施 检查代码确保满足如下要求：startOffset必须大于等于0。count必须大于0。报错信息：ErrorCode=StatusConflict,ErrorMessage=Cannot close upload now:Close Upload Session Failed.Because of Status Conflict.Current Status:...
Hive作业异常排查及处理
alter table[TableName]DROP IF EXISTS PARTITION(ds)insert overwrite 动态分区导致作业失败 报错日志：通过 insert overwrite 操作动态分区或执行类似存在 insert overwrite 操作的作业时，出现 Exception when loading xxx in table 报...
多元索引最佳实践
主键设计对多元索引的同步速度有一定的影响，对数据表主键的要求是写入数据时要尽可能分散到数据表的不同分区，因此如果写入TPS较高时，需要尽可能分散在数据表的多个分区中，避免出现写单分区、写尾部分区等问题。目前仅支持从数据表中...
日志投递MaxCompute后，如何检查数据完整性
在日志服务数据投递MaxCompute场景下，需要在MaxCompute表分区维度上检查数据完整性，即MaxCompute表中某个分区中数据是否已经完整。使用保留字段_partition_time_作为表分区列，如何判断分区数据是否已完整_partition_time_由日志的time...
利用定时开关机节省成本
此问题不复杂但是需要运维人员来维护大量的实例，若通过人工操作所有实例，可能会浪费大量的时间和人力，而且容易出现问题。所以需要一个自动化的系统，来处理定时开关机的问题。目前 OOS 系统运维管理 OOS（CloudOps Orchestration ...
在使用阿里云服务的过程中我应该避免哪些操作？
否则，阿里云可能无法解决由以下违规操作引起的问题：1)Windows系统中的PV Drivers 程序不可删除 PV Drivers程序为服务器虚拟化驱动程序，请不要针对该程序进行任何操作，如果删除会导致服务器出现异常。2)云服务器禁止更改网卡的MAC地址 ...
SQL其他常见问题
本文为您介绍在MaxCompute中执行SQL时，与数据类型、SQL限制等相关的常见问题。问题类别 常见问题 数据类型 MaxCompute的时间类型字段是否可以不带时分秒？在执行MaxCompute SQL过程中，对DOUBLE类型的数据进行等值比较，为什么结果不符合...
使用实例时镜像相关问题
以下情况可能导致系统无法正常启动，您可以通过FreeBSD内核源码打补丁编译内核的方式，避免或解决系统无法启动的问题。使用非阿里云提供的FreeBSD镜像及相关自定义镜像创建ECS实例时，系列V及以上实例规格族的ECS实例可能出现无法正常启动...
常见问题
使用rsync同步时报错"input/output error"问题分析：ossfs与rsync同步使用本身会出现问题。此案例中，用户对一个141 GB的大文件进行cp操作，使磁盘读写处于非常高的负载状态，从而产生此报错。解决方案：如果想要将OSS文件下载到本地ECS，...
Linux实例中存在未正确挂载的云盘
问题描述 在Linux实例中如果未正确挂载云盘，重启系统后可能导致系统无法正常启动。问题原因 已经设置了相关命令进行挂载，但是没有在/etc/fstab 文件中配置自动挂载或配置出错。系统启动时就可能出现异常，导致启动失败。解决方案 为了...
常见问题
如果单表数据量超过10亿，或查询RT和查询QPS无法满足要求时可以通过创建分区索引来解决相关问题。分区索引需要关注的内容，请参见 分区索引的适用场景和不适用场景有哪些？和 创建分区索引时，需要关注哪些参数？分区索引的适用场景和不...
主机健康诊断
物联网边缘计算的主机管理页面为您提供了主机健康诊断功能，可以对主机的系统配置、系统运行状态、系统软件运行状态、主机网络状态、主机历史运行状态进行全方位的诊断，帮助您了解主机的健康状态，及时发现并解决常见的问题。使用限制 仅...
表设计
假设数据分布不均匀，会出现以下问题：数据写入和读取能力受限于单个分区的能力，或者是单机能力，存在明显瓶颈。在某些数据处理场景下，热点或者数据分布不均会导致明显的长尾效应，拖慢整体速度。某个数据系统或者模块往往仅仅是整个业务...
创建服务器迁移任务
如果迁移源的系统盘是单分区结构，则只会生成 分区0。数据盘 数据盘<N>：表示迁移后阿里云云服务器数据盘的大小，单位为GiB。数据盘大小取值范围：20~32768。您可以设置 数据盘 前复选框的选中情况，自行选择是否迁移目标数据盘。变量表示...
表设计规范
例如，在规范化设计表的同时对数据通道中的数据采集方式进行优化，可以减少分布式系统中小文件的问题，降低表和分区的维护数量。表设计主要影响 表设计影响的操作有：创建表、导入数据、更新表、删除表及管理表。其中，导入数据场景按照...
Hologres SQL语句的常见问题
本文为您介绍编写和优化Hologres SQL语句时可能遇到的常见问题及解决方法。报错：Creating publication with table that without binlog is not supported now 报错：bigint out of range 报错：too many shards in this instance 报错：...
偏分析场景的实践和优化
尽可能选择值分布均匀的字段作为分区键，这样可以避免由于分布式不均导致出现计算长尾现象，严重拖慢大查询性能。合理设计二级分区 PolarDB-X 的DRDS模式数据库支持二级分区。当数据量过大或者有数据倾斜时，二级分区的选择至关重要，如果...
离线同步数据质量排查
环境信息排查 问题 解决方案 查询了错误或不完整的数据源、表、或者分区等。DataWorks标准项目分为开发数据源、生产数据源，在开发环境运行任务使用开发数据源，在生产环境运行任务使用生产数据源，再对数据数量和内容比对时，需要确认下...
Kafka常见问题
本文介绍使用Kafka时可能遇到的问题及解决方法。如何清理Kafka组件输出日志 如何清理Kafka-Manager服务输出日志 是否可以停止Kafka-Manager服务 报错“ERROR:Wile executing topic command:Replication factor:1 larger than available ...
云系统侧出现问题
如果云系统侧出现问题导致ECS实例无法创建或者启动，您可以通过本文了解此类问题的解决方案。前提条件 您已通过自助问题排查功能中的 实例问题排查>实例无法连接或启动异常>实例启动异常 诊断项对ECS实例进行了诊断排查，诊断结果中有以下...
版本发布说明
修复CoHash的Right分区函数计算结果不正确导致的分区路由问题，发布日期：2023-12-27 大版本：V5.4.18 小版本：17034692 类别 说明 新增&优化 新增支持AUTO模式数据库的co_hash分区策略。优化使用AB表方案进行事务日志清理的流程，避免一次...
数据倾斜调优
数据倾斜排查及解决方法 根据使用经验总结，引起数据倾斜的主要原因有如下几类：Join GroupBy Count（Distinct）ROW_NUMBER（TopN）动态分区 其中出现的频率排序为 JOIN>GroupBy>Count(Distinct)>ROW_NUMBER>动态分区。Join 针对Join端产生...
表结构设计
A：执行以下SQL，可以查看表的所有二级分区及分区的统计信息：SELECT partition_id,-分区名 row_count,-分区总行数 local_data_size,-分区本地存储所占用空间大小 index_size,-分区的索引大小 pk_size,-分区的主键索引大小 remote_data_...
Presto FAQ
解决方案：您可以查看自己的OSS的数据是否正常同步。性能相关问题 如何解决查询报错：“Query exceeded distributed user memory limit of 2.00TB or Query exceeded per-node user memory limit of xxGB”？DLA Presto中一个查询能使用的...
数据源
数据质量诊断模块可以帮助您全面检测数据存在的问题，并提示您如何解决这些问题。系统每天24:00会自动生成当天0:00-24:00期间的数据诊断报告。您也可以点击“启动诊断”按钮，结合自己的实际需求生成特定时间段内的数据诊断报告（数据诊断...
- 产品推荐
- 这些文档可能帮助您