如何处理消息堆积
解决方案 若出现消息堆积，可参考以下措施进行定位和处理。判断消息堆积在 云消息队列 RocketMQ 版 服务端还是客户端。查看客户端本地日志文件 ons.log，搜索是否出现如下信息：the cached message count exceeds the threshold 出现相关...
数据倾斜调优
MapReduce 在了解数据倾斜之前首先需要了解什么是MapReduce，MapReduce是一种典型的分布式计算框架，它采用分治法的思想，将一些规模较大或者难以直接求解的问题分割成较小规模或容易处理的若干子问题，对这些子问题进行求解后将结果合并成...
Spark常见问题
本文为您介绍使用Spark过程中的常见问题。问题类别 常见问题 开发Spark 如何自检项目工程？在DataWorks上运行ODPS Spark节点的步骤是什么？MaxCompute Spark如何在本地进行调试？如何通过Spark访问VPC环境内的服务？如何把JAR包当成资源来...
常见问题
本文汇总了YARN使用时的常见问题。集群问题汇总 集群有状态重启包括哪些内容？如何启用RM HA？如何检查ResourceManager服务是否正常？如何了解应用运行状况？应用问题排查流程 单任务/容器（Container）最大可用资源由哪些配置项决定？资源...
消费重试
应用场景 云消息队列 RocketMQ 版 的消费重试主要解决的是业务处理逻辑失败导致的消费完整性问题，是一种为业务兜底的策略，不应该被用作业务流程控制。以下场景建议使用消息重试 业务处理失败，且失败原因跟当前的消息内容相关，比如该...
列存索引中TopK算子的实现
在没有索引的情况下，此类查询在数据库中是通过基于堆的经典TopK算法来实现的，逻辑如下：在内存中维护一个大小为K的堆，堆顶元素是最小的元素，将遍历到的数据与堆顶元素比较，如果比堆顶元素大，替换堆顶元素，并重建堆。遍历完数据后，...
基本概念
它可以是一个问题、一段文字描述，甚至可以是带有一堆参数的文字描述。大模型会基于 prompt 所提供的信息，生成对应的文本或者图片。Prompt模板 您可以通过设计不同Prompt模板来满足垂直场景需求，而无需每次拼接完整Prompt。Prompt优化 对...
查看分区状态
分区用于存储消息，每个Topic由一个或多个分区组成，分区状态展示了各个分区的消息总量、最大及最小消费位点。当Kafka集群出现消息堆积、磁盘水位过高等异常情况时，可查看分区状态了解服务端的消息量及各个分区的消费进度，定位异常原因。...
时序引擎版本说明
功能优化 修复TSQL条件中出现BOOLEAN数据类型的数据时可能出现异常的问题。3.4.17（稳定版本）发布日期 类型 说明 2022年06月17日 新特性 支持设置写入的最大时间（即当前时间和偏移时间），超过偏移时间后写入的数据会被丢掉。功能优化 ...
消息堆积和延迟问题
本文主要介绍 云消息队列 RocketMQ 版 TCP协议的Java客户端使用过程中，经常会出现的消息堆积和消息延迟的问题。通过了解 云消息队列 RocketMQ 版 客户端的消费原理和消息堆积的主要原因，帮助您可以在业务部署前更好的规划资源和配置，或...
应用内存不足
本文介绍在使用消息队列时出现应用内存不足时的一些常见问题及解决方法。现象 在应用部署的机器上查看内存已消耗完。在/{user.home}/logs/sofamq.log 能搜索到 OutOfMemory 关键字。在消息队列控制台查看目标 Group ID 的消费者状态，堆积...
创建报警
当规则被触发时，系统会以您指定的报警方式向报警联系人分组发送报警信息，以提醒您采取必要的问题解决措施。前提条件 创建联系人：仅可将联系人分组设为报警的通知对象。背景信息 默认报警条件：为避免您在短时间内收到大量报警信息，系统...
创建报警
当规则被触发时，系统会以您指定的报警方式向报警联系人分组发送报警信息，以提醒您采取必要的问题解决措施。前提条件 说明 目前公有云已不支持使用旧版报警功能，您可以使用新版告警管理功能创建告警规则。更多信息，请参见以下链接。应用...
如何解决备份客户端OOM问题
通用类备份失败问题，建议您尝试参考 如何处理备份失败问题 解决。方法1：拆分备份目录 将备份计划中的备份文件路径拆分为多个目录。在同一个备份计划中，拆分目录的备份任务会串行执行。由于每个拆分目录的数据量相对于原始大目录有所减少...
内存管理
缺点：内存维测信息少，出现问题较难定位；申请的内存大小有限制，一般为1K以下。常用配置 内存的常用配置都在各个单板的k_config.h中，如果不需修改，则会使用k_default_config.h里面的默认配置。当然由于其本身是宏定义，也可在board对应...
常见问题
引用SDK后提示ClassNotFoundException 问题背景 例如出现以下问题：解决方案 查找不到的这个类是属于哪个包的。执行命令：mvn dependency:tree，查看这个包是否产生冲突。当前SDK依赖的netty和netty-tcnative包版本如下：io.netty:netty-...
使用容器水平伸缩（HPA）
如何解决HPA启动时CPU或内存飙高造成扩容出多余Pod的多弹现象？为什么HPA审计日志数值未达阈值但扩缩了？HPA缩容时，能够决定Pod缩容的顺序吗？相关文档 其他相关操作文档 关于如何在Kubernetes提供External Metrics支持的情况下，基于阿里...
JVM内存配置最佳实践
如果JVM堆空间大小设置过大，可能会导致Linux系统的OOM Killer被激活，进而结束（kill）Java应用进程，在容器环境下可能会表现为频繁异常重启。本文介绍在容器环境下JVM堆参数的配置建议，以及OOM的相关常见问题。通过-XX:MaxRAMPercentage...
系统检查点或作业快照
本文为您介绍实时计算Flink版系统检查点或作业快照相关的常见问题。两次Checkpoint最小间隔时间计算方式 VVR 8.x和VVR 6.x使用的GeminiStateBackend有什么区别？报错：org.apache.flink.util.SerializedThrowable 报错：You are using the ...
V5.1.x系列实例版本说明
解决DISTINCT在部分跨库JOIN场景下会出现报错的问题。修复分库分表情况下聚合函数查询带LIMIT时返回结果不正确的问题。解决BigDecimal类型在类型转换过程会消耗大量CPU的问题。修复SHOW FULL STATS连接数不准确的问题。修复SHOW FULL STATS...
RAM角色和STS Token常见问题
出现该问题的原因及解决方法如下：该RAM用户缺少允许STS扮演角色的权限策略。请为该RAM用户添加系统策略（AliyunSTSAssumeRoleAccess）或自定义策略。更多信息，请参见 为RAM用户授权 或 能否指定RAM用户具体可以扮演哪个RAM角色。RAM角色...
常见问题
A：Lindorm通过 compaction 机制异步将冷数据从热存储归档至冷存储，系统触发时间默认为冷热分界线的一半，最小为1天，最大为 major compaction 周期的一半，major compaction 周期默认为20天。例如，冷热分界线为3天，则默认1.5天就会自动...
节点异常问题排查
本文介绍关于节点异常问题的诊断流程、排查思路、常见问题及解决方案。本文目录 类别 内容 诊断流程 诊断流程 常见排查方法 节点故障诊断 检查节点的详情 检查节点的状态 检查节点的事件 检查节点的诊断日志 检查节点的关键组件 检查节点的...
常见报错
如果出现节点失联或者无法分配分片的情况，需要先解决这些问题，具体操作如下：登录Kibana控制台。查看未分配的分片。GET/_cluster/allocation/explain 说明 如果集群中没有未分配的分片，则返回error。重新分配失败的分片。POST/_cluster/...
指标说明
debug.ReadGCStats()，调用该函数时，会将传入参数GCStats结构体的 PauseQuantile 字段设置为5，这样函数将会返回最小、25%、50%、75%和最大这5个GC暂停时间百分位数。然后prometheus Go客户端根据返回的GC暂停时间百分位数、以及NumGC和...
指标说明
debug.ReadGCStats()，调用该函数时，会将传入参数GCStats结构体的 PauseQuantile 字段设置为5，这样函数将会返回最小、25%、50%、75%和最大这5个GC暂停时间百分位数。然后prometheus Go客户端根据返回的GC暂停时间百分位数、以及NumGC和...
导入与导出
原因：MaxCompute服务出现临时问题。解决方法：您需要 提交工单，联系技术支持解决。通过创建MaxCompute外表导入数据时，为什么会出现ErrorCode=Local Error,ErrorMessage=connect timed out报错？原因：MaxCompute服务出现临时问题。解决...
分析视图简介
接下来问题诊断部分会将gc日志中应用存在的较为严重的问题，标在时间轴上，下方会指出这些问题中最严重，最应该优先解决的问题，给出问题发生的时间段（可通过点击时间来查看该时间段的数据以便于分析问题），然后给出常见的排查和调优方法...
堆叠区域图
本文介绍移动组件中堆叠区域图的图表样式和配置面板的功能。图表样式 堆叠区域图是移动端组件中折线图的一种，支持自定义y轴区间、多系列数据配置，以折线和区域相结合的方式，智能地展示多维实时数据的变化趋势。配置面板 搜索配置：单击 ...
堆叠区域图
本文介绍移动组件中堆叠区域图的图表样式和配置面板的功能。图表样式 堆叠区域图是移动端组件中折线图的一种，支持自定义y轴区间、多系列数据配置，以折线和区域相结合的方式，智能地展示多维实时数据的变化趋势。配置面板 搜索配置：单击 ...
Spark
本文汇总了使用 AnalyticDB MySQL Spark的常见问题及解决方案。常见问题概览 如何查看Spark应用信息？如何解决提交Spark应用时，出现User%s do not have right permission[*]to resource[*]报错？如何解决运行Spark应用时，出现No space ...
OOM常见问题排查指南
关于该问题产生的原因、主要影响和解决方法具体如下：产生原因 元数据占用内存多 表现为Meta内存使用率高：表数据量增加，数据总量也随之增加，元数据占用内存多，当没有任务运行时，内存水位也会高，通常建议一个Table Group下不要超过...
堆叠柱形图
关闭开关，组件内y轴需要自定义调整刻度的最大值和最小值。留白：y轴两端留空白的距离比例值，取值范围为0~1。轴标签：y轴轴标签的样式，可单击 图标控制y轴轴标签的显隐。参数 说明 显示格式 y轴轴标签内容显示格式的样式，可选 原始值、...
常见报错
解决方案：请设置正确的DNS服务器地址，更多信息请参见 解决因域名解析失败导致的连接问题。OOM command not allowed when used memory>'maxmemory' 可能原因：Redis 实例已使用的内存超过该实例的最大配置（maxmemory）。说明 如果是 ...
常见报错
解决方案：请设置正确的DNS服务器地址，更多信息请参见 解决因域名解析失败导致的连接问题。OOM command not allowed when used memory>'maxmemory' 可能原因：Tair 实例已使用的内存超过该实例的最大配置（maxmemory）。说明 如果是 Tair ...
堆叠柱形图
关闭开关，组件内y轴需要自定义调整刻度的最大值和最小值。留白：y轴两端留空白的距离比例值，取值范围为0~1。轴标签：y轴轴标签的样式，可单击 图标控制y轴轴标签的显隐。参数 说明 显示格式 y轴轴标签内容显示格式的样式，可选 原始值、...
Spark FAQ
本文汇总了使用DLA Spark的常见问题及解决方案。常见问题 如何处理Spark作业报错：The VirtualCluster's name is invalid or the VirtualCluster's is not in running state？如何处理Spark作业报错：User%s do not have right permission...
SparkSQL自适应执行
阿里云E-MapReduce 3.13.0及后续版本的SparkSQL支持自适应执行功能，可以用来解决Reduce个数的动态调整、数据倾斜和执行计划的动态优化问题。使用限制 本文针对SparkSQL自适应执行涉及到的参数适用于Spark 2.x。如果您使用的是Spark 3.x，...
统计聚合
通过统计聚合接口可以实现求最小值、求最大值、求和、求平均值、统计行数、去重统计行数、按字段值分组、按范围分组、按地理位置分组、按过滤条件分组、直方图统计、日期直方图统计、嵌套功能；同时支持多个统计聚合功能组合使用，满足复杂...
GBDT二分类V2
梯度提升决策树(Gradient Boosting Decision Trees)二分类，是经典的基于梯度提升（Gradient Boosting）的有监督学习模型，可以用来解决二分类问题。支持计算资源 支持的计算引擎为MaxCompute。算法简介 梯度提升决策树(Gradient Boosting ...
- 产品推荐
- 这些文档可能帮助您