挂载EmptyDir Volume以修改shm大小
本文介绍如何设置Memory类型的emptyDir Volume的sizeLimit，并将其挂载到/dev/shm，从而修改ECI Pod的shm大小，解决共享内存不够用的问题。功能场景 默认情况下，Kubernetes创建的Pod，其共享内存默认为64 MiB（即/dev/shm 大小为64 MiB）...
Shared Server
PolarDB PostgreSQL版 针对上述问题，从数据库内部提供了 Shared Server（本文简称SS）内置连接池功能，采用共享内存+Session Context+Dispatcher转发+Backend Pool的架构，实现了用户连接与后端进程的解绑。后端进程具备了Native、Shared...
启动ACCL容器
PyTorch多进程处理、多线程Dataloader等会大量使用共享内存通信，故而建议为容器分配足够的共享内存空间。其他可行选项包括：shm-size=8g-v/dev/shm:/dev/shm-device=dev/infiniband-ulimit memlock=-1:1 挂载RDMA网卡设备并移除内存页锁定...
资源组管理
如果MEMORY_SHARED_QUOTA参数设置为100%，那么资源组内部的所有内存都将被视为共享内存，所有任务都可以使用这块内存；如果MEMORY_SHARED_QUOTA参数值小于100%，系统将根据设定的比例将内存划分为固定部分和共享部分，固定部分是每个任务...
持久缓存池（Warm Buffer Pool）
技术原理 PolarDB MySQL版 的持久缓存池功能利用了Linux的共享内存（Shared Memory）技术，将物理机内部的InnoDB缓存池从 PolarDB 的进程中独立起来，以实现主节点快速重启的能力。持久缓存池的技术架构如下：缓存池的控制信息、Page的控制...
文件存储
pg_dynshmem 用于动态共享内存的文件。所有节点存储一份 pg_snapshots 导出的快照（snapshot）。pg_replslot replication slot数据。pg_stat_tmp 统计子系统的临时文件。pg_stat 统计子系统的持久化文件。pg_serial 已提交的Serializable...
闪回表
内存占用 打开闪回日志功能需要增加的共享内存大小为以下三项之和：polar_flashback_log_buffers*8 kB polar_flashback_logindex_mem_size MB polar_flashback_logindex_queue_buffers MB 打开快速恢复区需要增加大约32 KB的共享内存大小，...
闪回表
内存占用 打开闪回日志功能需要增加的共享内存大小为以下三项之和：polar_flashback_log_buffers*8 kB polar_flashback_logindex_mem_size MB polar_flashback_logindex_queue_buffers MB 打开快速恢复区需要增加大约32 KB的共享内存大小，...
Global CatCache
PolarDB PostgreSQL版（兼容Oracle）引用了Global CatCache功能，将Cat/Sys Cache保存在所有进程都可以访问的共享内存中，确保Cat/Sys Cache的内存消耗不再受连接数的影响，大大提高了服务稳定性。参数说明 参数 级别 说明 polar_enable_...
共享内存通信（SMC）使用说明
Alibaba Cloud Linux 3提供的共享内存通信SMC（Shared Memory Communication）是一种兼容socket层、使用共享内存技术实现的高性能内核网络协议栈。根据共享内存技术的不同，SMC又可以细分为基于Internal Shared Memory（ISM）技术的SMC ...
共享内存通信（SMC）使用说明
Alibaba Cloud Linux 3提供的共享内存通信SMC（Shared Memory Communication）是一种兼容socket层、使用共享内存技术实现的高性能内核网络协议栈。根据共享内存技术的不同，SMC又可以细分为基于Internal Shared Memory（ISM）技术的SMC ...
PolarDB PostgreSQL版架构介绍
内核中的共享内存分成2部分：全局结构，ProcArray等。BufferPool结构；其中BufferPool通过具名共享内存来分配，在进程重启后仍然有效。而全局结构在进程重启后需要重新初始化。而BufferPool中并不是所有的Page都是可以复用的。例如：在重启...
使用实时性能功能
注意：这是与 CPU 共享的内存，不是 GPU 专用内存。Code 您的应用用于处理代码和资源（如 dex 字节码、经过优化或编译的 dex 代码、.so 库和字体）的内存。PrivateOther 包含了 Stack，System 占用，还有一些应用使用的系统不确定如何分类...
真机性能报告
重要 这是与 CPU 共享的内存，不是 GPU 专用内存。Code 您的应用用于处理代码和资源（如 dex 字节码、经过优化或编译的 dex 代码、.so 库和字体）的内存。PrivateOther 包含了 Stack，System 占用，还有一些应用使用的系统不确定如何分类的...
系统类故障排查
“total”指总计物理（swap）内存的大小，“used”指已使用物理内存（swap）的大小，“free”指可用的物理内存（swap）大小，“shared”指多个进程共享的内存总额，“buff/cache”指磁盘的缓存大小，“available”指可以被新应用程序使用的...
离线全量Key分析
您可以通过离线全量Key分析功能来分析 Tair 的备份文件，快速发现实例中的大Key，帮助您掌握Key在内存中的占用和分布、Key过期时间等信息，为您的优化操作提供数据支持，帮助您避免因Key倾斜引发的内存不足、性能下降等问题。该功能由 ...
高级配置：内存缓存本地目录
该缓存支持LRU淘汰策略和不同实例间的共享，以文件系统目录的形式呈现。无需修改业务代码，直接读取缓存配置的目标本地目录中的文件，即可享受加速效果。同一服务的不同实例之间会形成一个p2p网络。在进行实例扩容时，可以通过p2p网络从...
指标说明
nginx_ingress_controller_success-process_resident_memory_bytes 即RSS（Resident Set Size），指的是常驻内存集，是进程实际使用的内存，他不包括分配但未使用的内存，也不包括换出的内存页面，但包含共享内存。process_open_fds 通过...
指标说明
nginx_ingress_controller_success-process_resident_memory_bytes 即RSS（Resident Set Size），指的是常驻内存集，是进程实际使用的内存，他不包括分配但未使用的内存，也不包括换出的内存页面，但包含共享内存。process_open_fds 通过...
离线全量Key分析
通过离线全量Key分析功能来分析Redis的备份文件，可以快速发现实例中的大Key，帮助您掌握Key在内存中的占用和分布、Key过期时间等信息，为您的优化操作提供数据支持，帮助您避免因Key倾斜引发的内存不足、性能下降等问题。该功能由 ...
pg_shmem_allocations
pg_shmem_allocations 视图显示从服务器的主共享内存段的分配模式。简介 pg_shmem_allocations 视图显示从服务器的主共享内存段的分配模式。说明 此视图不包括使用动态共享内存基础架构分配的内存。列名称 列类型 描述 name text 共享内存...
pg_shmem_allocations
pg_shmem_allocations 视图显示从服务器的主共享内存段的分配模式。简介 说明 pg_shmem_allocations 视图不包括使用动态共享内存基础架构分配的内存。匿名分配是直接使用 ShmemAlloc()分配，而不是通过 ShmemInitStruct()或 ShmemInitHash...
内存诊断
内存诊断有普通内存诊断和共享内存诊断两种方式，具体内存诊断方式根据需求而定。普通内存 可以通过观察 polar_stat_activity_rt 视图，如下所示：SELECT pid,rss FROM polar_stat_activity_rt ORDER BY rss DESC;\watch 1 进而可通过 ...
内存诊断
内存诊断有普通内存诊断和共享内存诊断两种方式，具体内存诊断方式根据需求而定。普通内存 可以通过观察 polar_stat_activity_rt 视图，如下所示：SELECT pid,rss FROM polar_stat_activity_rt ORDER BY rss DESC;\watch 1 进而可通过 ...
闪回表
在闪回表的过程中，目标表涉及到的页面在共享内存池中换入换出，可能会造成其他数据库访问性能的抖动。建议在业务低峰期操作。闪回表操作结束后，可以根据 NOTICE 提示，查询对应的闪回表的数据并和原表进行数据比对。如果存在数据缺失，...
如何将一棵LSM-Tree塞进NVM
为了应对这些挑战，针对LSM-tree专用优化的高效PM内存管理器Halloc，提出了优化的基于PM的半持久化内存表用以替换传统方案DRAM中的内存表，使用ROR无锁免日志算法去除传统方案依赖WAL保持事务的ACID属性，设计全局有序的Global Index持久化...
Persistent Buffer Pool
PostgreSQL为实现进程间并行计算设计的共享内存区，可以动态扩展。Process Global Area：进程工作使用的内存区。包含以下两部分。Memory Context。逻辑直接控制的内存。内存划分如图所示：其中，Shared Buffer Pools在 PolarDB PostgreSQL...
ECS资源复用版
Memory资源 共享内存可用 MaxCompute实际购买成功的ECS实例的内存总数。共享内存计划上限 共享单元中包含的ECS实例的内存总数。共享内存使用 实际被使用的内存数量。说明 ECS共享资源可用值小于计划上限值，可能是由于ECS资源预定容量不足...
共享私有池
共享管理 页签下展示了私有池所加入的共享单元，以及私有池的共享容量使用情况。使用共享私有池 阿里云账号B和阿里云账号A在同一个资源目录时，共享私有池以后，阿里云账号B可以直接使用共享私有池。阿里云账号B和阿里云账号A不在同一个...
成本洞察功能说明
内存资源：内存资源使用量：当前该命名空间真实消耗的内存量。内存资源请求量：当前该命名空间已被分配的内存量。内存资源总容量：集群总内存量。内存资源使用率：当前该命名空间的内存使用量占请求量的比例。GPU资源：GPU显存资源使用量：...
MySQL 实际内存分配情况介绍
共享内存 执行如下命令，即可查询示例的共享内存分配情况：show variables where variable_name in('innodb_buffer_pool_size','innodb_log_buffer_size','innodb_additional_mem_pool_size','key_buffer_size','query_cache_size');...
MySQL实际内存分配情况介绍
内存共享 执行如下命令，即可查询示例的共享内存分配情况：show variables where variable_name in('innodb_buffer_pool_size','innodb_log_buffer_size','innodb_additional_mem_pool_size','key_buffer_size','query_cache_size');...
如何基于LSM-tree架构实现一写多读
Replica节点在回放日志进行资源回收时，需要将内存和磁盘资源分开，内存资源在各个节点是独立的，磁盘资源是共享的，因此Replica节点的内存资源可以独立释放，而磁盘资源则统一由Primary节点来释放。对于行级多版本的回收，同样需要由...
ResourceConfig
名称 类型 描述 示例值 object 资源配置 CPU string CPU 核心数 10 GPU string GPU 核心数 3 Memory string 内存容量 10Gi SharedMemory string 共享内存容量 5Gi GPUType string GPU 类型 Tesla-V100-16G
Node应用内存泄漏分析方法论与实战
RSS：Resident Set Size 实际使用物理内存（包含共享库占用的内存）。案例分析 回到之前说到的菜鸟物流大市场。发现问题 菜鸟物流大市场上线之后，经常收到alimonitor的告警通知，如下图：于是打开了 Node.js 性能平台查看慢日志，果然有...
数据库
等待事件类型描述 等待事件类型 等待事件名称 描述 LWLock ShmemIndexLock 正等待在共享内存中查找或者分配空间。OidGenLock 正等待分配或者赋予OID。XidGenLock 正等待分配或者赋予事务 ID。ProcArrayLock 正等待在事务结尾得到快照或者...
数据库
等待事件类型描述 等待事件类型 等待事件名称 描述 LWLock ShmemIndexLock 正等待在共享内存中查找或者分配空间。OidGenLock 正等待分配或者赋予OID。XidGenLock 正等待分配或者赋予事务 ID。ProcArrayLock 正等待在事务结尾得到快照或者...
内存诊断
诊断结果以图表的方式展示系统内存整体使用情况，将容器内的缓存和共享内存归属到具体的文件夹下，清晰展示系统内存使用情况，便于运维。本文介绍内存诊断的具体内容。内存诊断包括内存总览、内存分析和OOM分析，用于浏览节点及Pod内存使用...
共享型
共享内存型e4包括的实例规格及指标数据如下表所示。实例规格 vCPU 内存（GiB）网络带宽（Gbit/s）网络收发包PPS（万）多队列 弹性网卡 单网卡私有IP ecs.e4.small 1 8.0 0.5 5 1 2 2 ecs.e4.large 2 16.0 0.5 10 1 2 2 ecs.e4.xlarge 4 32....
ModifyImageSharePermission-管理镜像共享权限
不能共享已经被弃用的镜像。403 PublicImageAgreement.NotSigned The current account has not signed"Community Image Terms of Service".当前账户没有签署社区镜像协议。403 InvalidParameter.IsPublic The specified parameter IsPublic...
- 产品推荐
- 这些文档可能帮助您