配置资源规整时忽略特定容器
一般情况下，容器内指定的vCPU和内存为容器资源上限，实际运行实例时，系统会动态调整资源分配。因此对于实例内一些不影响业务的特定容器，您可以通过设置环境变量_ECI_RESOURCE_IGNORE_:TRUE 的方式，实现实例资源规整时忽略这些容器，...
列存索引中TopK算子的实现
动态选择内存磁盘算法 内存算法和磁盘算法不同，如果使用一个固定的阈值来作为选择内存算法或磁盘算法的依据（比如K小于阈值时使用内存算法，否则使用磁盘算法），那么针对不同的可用执行内存就需要设置不同的阈值，带来了人工干预的开销。...
停用词过滤
内存数 默认为系统自动分配。方式二：PAI命令方式 使用PAI命令方式，配置该组件参数。您可以使用SQL脚本组件进行PAI命令调用，详情请参见 SQL脚本。PAI-name FilterNoise-project algo_public \-DinputTableName=”test_input”-...
实例规格族
规格族 规格族 说明 适用场景 通用型 独享被分配的内存和存储空间，共享CPU和I/O，存在资源争抢的风险。通过资源复用换取利用率最大化，性价比较高，享受规模红利。对价格敏感的客户。对性能稳定性要求较低的业务场景。独享型 本地盘版：独...
Enclave CLI子命令说明
run-enclave：运行Enclave 该子命令用于根据您指定的Enclave镜像文件启动一个新的Enclave，同时会将Enclave资源分配服务预留的vCPU和内存资源分配给运行的Enclave。说明 当前一个ECS实例中仅支持运行一个Enclave。用法 enclave-cli run-...
特征离散
每个核心内存 每个CPU分配的内存大小。方式二：PAI命令方式 使用PAI命令方式，配置该组件参数。您可以使用SQL脚本组件进行PAI命令调用，详情请参见 SQL脚本。PAI-name fe_discrete_runner_1-project algo_public-DdiscreteMethod=...
实例规格族
实例规格族 规格族 说明 适用场景 支持的数据库 共享规格 独享被分配的内存和存储资源，与同一物理机上的其他共享规格实例共享CPU资源。通过资源复用换取CPU使用率最大化，性价比较高，享受规模红利。实例有资源争抢风险。追求高性价比，...
指标说明
scrape_samples_post_metric_relabeling-scrape_samples_scraped-process_virtual_memory_max_bytes-process_virtual_memory_bytes 即VSS（Virtual Set Size），指虚拟内存集，是全部分配的内存，包括分配但未使用的内存、共享内存、换出的...
指标说明
scrape_samples_post_metric_relabeling-scrape_samples_scraped-process_virtual_memory_max_bytes-process_virtual_memory_bytes 即VSS（Virtual Set Size），指虚拟内存集，是全部分配的内存，包括分配但未使用的内存、共享内存、换出的...
OOM常见问题排查指南
V1.1.24版本开始，计算节点运行时内存取消单节点20 GB的限制，采用动态调整节点内存，定期检查内存水位，如果元数据较少时，会尽量将剩余可用内存都分配给查询运行时使用，尽量保证运行时内存最大化分配，保障Query获得足够内存分配。...
样本稳定指数（PSI）
内存数 每个CPU Core使用的内存大小，默认系统自动分配。方式二：PAI命令方式 使用PAI命令方式，配置该组件参数。您可以使用SQL脚本组件进行PAI命令调用，详情请参见 SQL脚本。PAI-name psi-project algo_public-DinputBaseTableName=psi_...
安装Enclave CLI
修改配置项内容，具体的配置项说明如下：memory_mib：分配的内存大小，单位：MiB。cpu_count：分配的vCPU个数。以如下配置为例，表示为Enclave分配1024 MiB内存和2 vCPU。Enclave configuration file.#How much memory to allocate for ...
YARN指标
MemoryAllocatedMB yarn_cluster_allocatedMB 集群已分配的内存大小。单位：MB。MemoryTotalMB yarn_cluster_totalMB 集群总内存大小。单位：MB。ReserveVCore yarn_cluster_reservedVirtualCores 集群被预留调度的虚拟核数。...
节点资源预留策略
hugepages-1Gi:0 hugepages-2Mi:0 memory:5824732Ki#节点可分配的内存，单位KiB。pods:64 计算节点可分配资源 可分配资源的计算公式：可分配资源（Allocatable）=总资源（Capacity）-预留资源（Reserved）-驱逐阈值（Eviction-Threshold）...
ALIYUN:Flink:Namespace
说明 目标项目空间中创建的内存数量要小于工作空间中剩余的内存数量（工作空间购买的总内存数量减去其他项目空间已分配的内存数量），否则会报错。返回值 Fn:GetAtt InstanceId：实例ID。Namespace：项目空间名称。示例 JSON 格式 {...
协方差
内存数 每个核心的内存，如果未配置，则系统自动分配。单位为MB。方式二：PAI命令方式 使用PAI命令方式，配置该组件参数。您可以使用SQL脚本组件进行PAI命令调用，详情请参见 SQL脚本。PAI-name cov-project algo_public-DinputTableName=...
初始化
释放内存池，相当于释放了请求过程中各资源分配的内存。aos_pool_destroy(p);释放之前分配的全局资源，在程序生命周期内只需要调用一次。aos_http_io_deinitialize();return 0;} 使用自定义域名初始化请求选项 以下代码用于自定义域名初始...
添加弹性伸缩规则
yarn_resourcemanager_queue_AvailableMB YARN root队列可供分配的内存量。yarn_resourcemanager_queue_PendingMB YARN root队列待分配的内存量。yarn_resourcemanager_queue_AllocatedMB YARN root队列已分配的内存量。yarn_...
动态修改Pod资源参数
ack-koordinator提供对Pod内存参数动态修改的能力，可以在不重启Pod的情况下，修改CPU、内存、磁盘IO等单机隔离参数。本文介绍如何使用ack-koordinator动态修改Pod资源参数。前提条件 已通过kubectl连接Kubernetes集群。具体操作，请参见 ...
成本洞察功能说明
应用已分配且未使用资源=绿色柱状图-黄色柱状图 集群剩余资源可分配量=Y轴-绿色柱状图 分析流程：未分配资源浪费：您可以参考集群剩余资源可分配量，使用集群中未被分配使用的浪费资源。通过调整集群中Pod的资源需求量（Request），或适当...
集群成本分析与优化-容器服务ACK
Memory Request 为当前该命名空间已被分配的内存，CPU Usage 为真实消耗的内存，Actual CPU Utilization 为实际的内存利用率。② 资源分配情况和真实消耗情况的趋势，蓝色曲线表示已分配的资源，红色曲线表示真实消耗的资源。在Pod调度时，...
DescribeDedicatedHostGroups-查询RDS主机组信息
0 MemAllocatedAmount float 当前专属集群中已分配的内存数量。16384 CpuAllocationRatio integer 当前专属集群的 CPU 超配比。单位：百分号（%）。关于超配比的更多信息，请参见 管理集群。200 MemAllocationRatio integer 当前专属集群的...
DescribeDedicatedHostGroups-查询RDS主机组信息
0 MemAllocatedAmount float 当前专属集群中已分配的内存数量。16384 CpuAllocationRatio integer 当前专属集群的 CPU 超配比。单位：百分号（%）。关于超配比的更多信息，请参见 管理集群。200 MemAllocationRatio integer 当前专属集群的...
DescribeDedicatedHostGroups-查询RDS主机组信息
0 MemAllocatedAmount float 当前专属集群中已分配的内存数量。16384 CpuAllocationRatio integer 当前专属集群的 CPU 超配比。单位：百分号（%）。关于超配比的更多信息，请参见 管理集群。200 MemAllocationRatio integer 当前专属集群的...
DescribeDedicatedHostGroups-查询RDS主机组信息
0 MemAllocatedAmount float 当前专属集群中已分配的内存数量。16384 CpuAllocationRatio integer 当前专属集群的 CPU 超配比。单位：百分号（%）。关于超配比的更多信息，请参见 管理集群。200 MemAllocationRatio integer 当前专属集群的...
节点异常问题排查
节点已分配的内存资源总量）集群节点临时存储不足的判定方式：当前Pod请求的临时存储总量>（节点可分配的临时存储总量-节点已分配的临时存储总量）如果当前Pod请求的资源总量大于节点可分配的资源总量减去节点已分配的资源总量，Pod就不会...
节点异常问题排查
节点已分配的内存资源总量）集群节点临时存储不足的判定方式：当前Pod请求的临时存储总量>（节点可分配的临时存储总量-节点已分配的临时存储总量）如果当前Pod请求的资源总量大于节点可分配的资源总量减去节点已分配的资源总量，Pod就不会...
查看作业性能
内存分配：查看不同类分配的内存情况。锁耗时：查看锁竞争、死锁导致的性能下降问题。ITimer：在相同时间间隔下，查看每个间隔内所有线程之间CPU的消耗情况。说明 火焰图的详情请参见 火焰图。内存动态 JVM不同内存区域的内存变化。线程...
查看集群日报与分析
指标 描述 集群算力内存时（GB*Hour）集群所有任务的算力内存时之和，任务的算力内存时是一个累积值，计算方式是 任务分配的内存（GB）*任务的运行时间（Hours）。集群算力CPU时（Core*Hour）集群所有任务的算力CPU时之和，任务的算力CPU时...
随机采样
核内存分配 取值为正整数，单位为MB，范围(1,65536)，默认系统自动分配。方式二：PAI命令方式 使用PAI命令方式，配置该组件参数。您可以使用SQL脚本组件进行PAI命令调用，详情请参见 SQL脚本。PAI-name RandomSample \-project algo_public...
租户参数列表说明
writing_throttling_maximum_duration 通过控制内存分配进度，控制写入速度。指定在触发写入限速后，剩余 memstore 内存分配完所需的时间。div_precision_increment 除法结果精度在被除数精度基础上的增量。MySQL 兼容功能。ob_sql_work_...
如何将一棵LSM-Tree塞进NVM
Halloc内存分配器 Halloc是针对LSM-tree专用的PM内存分配器，通过三个关键技术以解决传统通用PM内存分配器存在的效率低、碎片化等问题，基于对象池的内存预留方案、应用亲和的内存管理以及统一化地址空间管理。其主要架构如下图所示，...
Alibaba Cloud Linux 3镜像发布记录
增加内核接口memory.duptext_nodes，用于限制duptext的内存分配节点。kfence增强（自研）Arm64架构新增自研的kfence增强功能，能够灵活动态开关kfence，全量捕获内存污染问题，从而兼顾线上探测和线下调试。新增捕获到内存问题时立即宕机的...
作业配置说明
Infinity spark.dynamicAllocation.executorIdleTimeout 动态资源分配时，若Executor空闲时间超过该值，Executor资源将被释放。单位为秒（s）。600s 执行配置项 配置项 说明 默认值 spark.speculation 是否开启推测执行功能。取值：true：...
加权采样
核内存分配 取值为正整数，范围(1,65536)，默认系统自动分配。方式二：PAI命令方式 使用PAI命令方式，配置该组件参数。您可以使用SQL脚本组件进行PAI命令调用，详情请参见 SQL脚本。PAI-name WeightedSample-project algo_public \-...
排查内存使用率高的问题
说明 大部分OOM场景是由于动态内存管理失效引起，例如限流时请求堆积导致动态内存快速上升、过于复杂或不合理的Lua脚本也可能导致OOM。步骤一：分析内存使用情况 查询指定时段的内存使用率信息，具体操作，请参见 查看监控数据。以下示例中...
如何排查slab_unreclaimable内存占用高的原因？
内核组件或驱动程序通过调用内存分配接口（kmalloc等）向slab分配器申请内存，但是内核组件或驱动程序又没有正确释放内存，这将导致不可用内存越来越多，可用内存越来越少。排查步骤 远程连接待排查问题的Linux实例。具体操作，请参见 连接...
Persistent Buffer Pool
背景信息 PolarDB PostgreSQL版 的内存可以分为Shared Buffer Pool、Dynamic Shared Memory Areas以及进程私有内存三部分：Shared Buffer Pool：集群启动时采用预分配的方式建立的一大段共享内存，通过确定offset来对各个功能模块划分使用...
排查Redis实例内存使用率高的问题
说明 大部分OOM场景是由于动态内存管理失效引起，例如限流时请求堆积导致动态内存快速上升、过于复杂或不合理的Lua脚本也可能导致OOM。云数据库Redis企业版（Tair）增强了对动态内存的控制，推荐选用。附录2：查看内存占用情况的其他方法 ...
成本数据模型介绍
示例一：已知计算资源单价 例如，在常见的通过计算资源估算Pod成本的场景下，您可以参见以下公式完成Pod成本的分摊：Pod成本占比=Pod模拟成本/Σ（集群下Node成本）Pod模拟成本=（CPU单价*CPU分配量+内存单价*内存分配量+GPU单价*GPU分配量...
- 产品推荐
- 这些文档可能帮助您