共享内存通信（SMC）使用说明
Alibaba Cloud Linux 3提供的共享内存通信SMC（Shared Memory Communication）是一种兼容socket层、使用共享内存技术实现的高性能内核网络协议栈。根据共享内存技术的不同，SMC又可以细分为基于Internal Shared Memory（ISM）技术的SMC ...
共享内存通信（SMC）使用说明
Alibaba Cloud Linux 3提供的共享内存通信SMC（Shared Memory Communication）是一种兼容socket层、使用共享内存技术实现的高性能内核网络协议栈。根据共享内存技术的不同，SMC又可以细分为基于Internal Shared Memory（ISM）技术的SMC ...
共享内存通信（SMC）常见问题
如果您在Alibaba Cloud Linux 3系统中启用了共享内存通信SMC（Shared Memory Communication），且使用过程中遇到无法正常通信、部分端口不可用、对比TCP没有应用性能提升等问题，可以参考本文提供的方案进行排查并解决。启用SMC后应用性能...
启动ACCL容器
PyTorch多进程处理、多线程Dataloader等会大量使用共享内存通信，故而建议为容器分配足够的共享内存空间。其他可行选项包括：shm-size=8g-v/dev/shm:/dev/shm-device=dev/infiniband-ulimit memlock=-1:1 挂载RDMA网卡设备并移除内存页锁定...
基于eRDMA增强型实例部署Redis
本文介绍如何在eRDMA增强型实例上部署共享内存通信SMC（Shared Memory Communication）和Redis，然后基于SMC测试Redis处理请求的能力。背景信息 共享内存通信SMC是一种兼容socket层、使用共享内存技术实现的高性能内核网络协议栈。根据共享...
内存诊断
内存诊断有普通内存诊断和共享内存诊断两种方式，具体内存诊断方式根据需求而定。普通内存 可以通过观察 polar_stat_activity_rt 视图，如下所示：SELECT pid,rss FROM polar_stat_activity_rt ORDER BY rss DESC;\watch 1 进而可通过 ...
内存诊断
内存诊断有普通内存诊断和共享内存诊断两种方式，具体内存诊断方式根据需求而定。普通内存 可以通过观察 polar_stat_activity_rt 视图，如下所示：SELECT pid,rss FROM polar_stat_activity_rt ORDER BY rss DESC;\watch 1 进而可通过 ...
pg_shmem_allocations
说明 此视图不包括使用动态共享内存基础架构分配的内存。列名称 列类型 描述 name text 共享内存分配的名字.未使用的内存为NULL，并且匿名分配的为。off int8 分配开始的偏移量。匿名分配和未使用的内存为 NULL。size int8 分配的大小。...
pg_shmem_allocations
简介 说明 pg_shmem_allocations 视图不包括使用动态共享内存基础架构分配的内存。匿名分配是直接使用 ShmemAlloc()分配，而不是通过 ShmemInitStruct()或 ShmemInitHash()。默认情况下，pg_shmem_allocations 视图只能被超级用户读取。pg_...
Persistent Buffer Pool
Instance级生命周期：在集群退出或者异常退出重启后进行清理的集群级共享内存。内存划分如图所示：影响PBP可用性的指标 集群退出前的PBP不是所有场景都适用。在集群启动时，如果出现以下情况，则无法使用PBP。集群的规格改变，需要使用不同...
Persistent Buffer Pool
Instance级生命周期：在集群退出或者异常退出重启后进行清理的集群级共享内存。内存划分如图所示：影响PBP可用性的指标 集群退出前的PBP不是所有场景都适用。在集群启动时，如果出现以下情况，则无法使用PBP。集群的规格改变，需要使用不同...
持久缓存池（Warm Buffer Pool）
Allocate from shared memory PolarDB从共享内存中分配内存。Attach to clean shutdown shared memory PolarDB连接到已清理的关闭的缓存池。Attach to abnormal shutdown shared memory PolarDB连接到异常崩溃的缓存池。mysqlshm工具 ...
MySQL 实际内存分配情况介绍
共享内存 执行如下命令，即可查询示例的共享内存分配情况：show variables where variable_name in('innodb_buffer_pool_size','innodb_log_buffer_size','innodb_additional_mem_pool_size','key_buffer_size','query_cache_size');...
Shared Server
参数说明 Shared Server的典型配置参数说明如下：参数 说明 polar_enable_shm_aset 是否开启全局共享内存。默认关闭，重启生效。取值如下：on：开启全局共享内存。off：关闭全局共享内存。polar_ss_shared_memory_size Shared Server全局...
Shared Server
参数说明 Shared Server的典型配置参数说明如下：参数 说明 polar_enable_shm_aset 是否开启全局共享内存。默认关闭，重启生效。取值如下：on：开启全局共享内存。off：关闭全局共享内存。polar_ss_shared_memory_size Shared Server全局...
Resource Manager
背景信息 PolarDB PostgreSQL版 的内存可以分为以下三部分：共享内存 进程间动态共享内存 进程私有内存 进程间动态共享内存和进程私有内存是 动态分配 的，其使用量随着集群承载的业务运行情况而不断变化。过多使用动态内存，可能会导致...
Resource Manager
背景信息 PolarDB PostgreSQL版（兼容Oracle）的内存可以分为以下三部分：共享内存 进程间动态共享内存 进程私有内存 进程间动态共享内存和进程私有内存是 动态分配 的，其使用量随着集群承载的业务运行情况而不断变化。过多使用动态内存，...
MySQL实际内存分配情况介绍
MySQL 的内存大体可以分为共享内存和session私有内存两部分，下面将详细介绍各部分的构成。内存共享 执行如下命令，即可查询示例的共享内存分配情况：show variables where variable_name in('innodb_buffer_pool_size','innodb_log_buffer...
文件存储
pg_dynshmem 用于动态共享内存的文件。所有节点存储一份 pg_snapshots 导出的快照（snapshot）。pg_replslot replication slot数据。pg_stat_tmp 统计子系统的临时文件。pg_stat 统计子系统的持久化文件。pg_serial 已提交的Serializable...
数据库
等待事件类型描述 等待事件类型 等待事件名称 描述 LWLock ShmemIndexLock 正等待在共享内存中查找或者分配空间。OidGenLock 正等待分配或者赋予OID。XidGenLock 正等待分配或者赋予事务 ID。ProcArrayLock 正等待在事务结尾得到快照或者...
数据库
等待事件类型描述 等待事件类型 等待事件名称 描述 LWLock ShmemIndexLock 正等待在共享内存中查找或者分配空间。OidGenLock 正等待分配或者赋予OID。XidGenLock 正等待分配或者赋予事务 ID。ProcArrayLock 正等待在事务结尾得到快照或者...
Global Plan Cache
polar_gpc_mem 大于0时，集群在启动时会预留此时设置的共享内存。当共享内存不足时，新的Plan Cache会暂时存放到本地。当不经常使用或者失效的GPC被清理以后，会释放出共享内存空间，之后本地的Plan Cache会尝试移动到GPC中。polar_enable_...
全局执行计划缓存
polar_gpc_mem 大于0时，集群在启动时会预留此时设置的共享内存。当共享内存不足时，新的Plan Cache会暂时存放到本地。当不经常使用或者失效的GPC被清理以后，会释放出共享内存空间，之后本地的Plan Cache会尝试移动到GPC中。polar_enable_...
全局执行计划缓存
polar_gpc_mem 大于0时，集群在启动时会预留此时设置的共享内存。当共享内存不足时，新的Plan Cache会暂时存放到本地。当不经常使用或者失效的GPC被清理以后，会释放出共享内存空间，之后本地的Plan Cache会尝试移动到GPC中。polar_enable_...
查看详细信息
SHMEM 共享内存，以及tmpfs和devtmpfs。INACTIVE 长时间未被访问过的内存页。ANON_PAGES 匿名内存页。COMMITTED_AS 完成当前负载预计需要的内存。MEM_TOTAL 系统可用总内存，不包括kernel占用的内存，这个值在系统运行期间一般是固定不变的...
共享型
共享内存型e4包括的实例规格及指标数据如下表所示。实例规格 vCPU 内存（GiB）网络带宽（Gbit/s）网络收发包PPS（万）多队列 弹性网卡 单网卡私有IP ecs.e4.small 1 8.0 0.5 5 1 2 2 ecs.e4.large 2 16.0 0.5 10 1 2 2 ecs.e4.xlarge 4 32....
ECS资源复用版
Memory资源 共享内存可用 MaxCompute实际购买成功的ECS实例的内存总数。共享内存计划上限 共享单元中包含的ECS实例的内存总数。共享内存使用 实际被使用的内存数量。说明 ECS共享资源可用值小于计划上限值，可能是由于ECS资源预定容量不足...
PolarDB PostgreSQL版架构介绍
T5时刻，只读节点再次读取页面P1，由于BufferPool中不存在P1，因此从共享内存上读取了最新的P1，但是只读节点并没有回放LSN=300的日志，读取到了一个对其来说超前的 未来页面。未来页面 的问题是：部分页面是 未来页面，部分页面是正常的...
PolarDB PostgreSQL版架构介绍
T5时刻，只读节点再次读取页面P1，由于BufferPool中不存在P1，因此从共享内存上读取了最新的P1，但是只读节点并没有回放LSN=300的日志，读取到了一个对其来说超前的 未来页面。未来页面 的问题是：部分页面是 未来页面，部分页面是正常的...
基于TairString实现高性能分布式锁
如果一台主机上的多个进程需要并发访问某项资源，则可以使用进程间同步的原语，例如信号量、管道、共享内存等。但如果多台主机需要同时访问某项资源，就需要使用一种在全局可见并具有互斥性的锁了。这种锁就是分布式锁，可以在分布式场景中...
服务网格落地
SOFAMosn 的 Metric 迁移：蚂蚁团队使用了共享内存来共享新老进程的 Metric 数据，保证在迁移的过程中 Metric 数据也是正确的。内存复用机制 内存复用机制主要特征如下：基于 sync.Pool。Slice 复用使用 Slab 细粒度，提高复用率。常用结构...
SysOM内核层容器监控
该指标提供有关容器内存使用情况的统计信息，包括容器的总内存（Total）、剩余内存（Free）、可用内存大小（Available）、页缓存（Cache）、块缓存（Buffers）、共享内存（Shmem）、可回收内存（SReclaimable）、不可回收内存（SUnreclaim...
指标说明
nginx_ingress_controller_success-process_resident_memory_bytes 即RSS（Resident Set Size），指的是常驻内存集，是进程实际使用的内存，他不包括分配但未使用的内存，也不包括换出的内存页面，但包含共享内存。process_open_fds 通过...
指标说明
nginx_ingress_controller_success-process_resident_memory_bytes 即RSS（Resident Set Size），指的是常驻内存集，是进程实际使用的内存，他不包括分配但未使用的内存，也不包括换出的内存页面，但包含共享内存。process_open_fds 通过...
什么是云虚拟主机
具体对比项如下所示：对比项 共享云虚拟主机 独享云虚拟主机 云服务器ECS 适用人群 初级入门建站用户 企业建站用户 有技术能力、懂得服务器配置及维护的用户及开发者 CPU 共享 独享 除共享型ECS实例外，其他类型实例均为独享CPU 内存 共享 ...
高级配置：内存缓存本地目录
描述 cache capacity 被加速文件占用的最大内存。当加速文件占用的最大内存超过该限制时，默认采用LRU策略淘汰。path 加速文件的源目录。该目录可以是OSS或NAS中的加速文件挂载到容器中的挂载路径，也可以是挂载路径下的子目录，或者是容器...
资源组管理
MEMORY_LIMIT 资源组内存占总内存的百分比，可进行 全局共享内存。所有资源组（包括默认admin_group和default_group）配置的内存百分比总和为分配给各个资源组的预留部分。如果此总和小于100，则数据库会将剩余未预留的内存分配给资源组...
内存诊断
进程内存 以进程维度按内存大小排序，并分解成匿名内存、文件缓存和共享内存。Pod内存 Pod内存分析功能够解析容器组和容器内部文件缓存和共享内存对应的文件，以及文件缓存活跃和非活跃的占比。检查项 说明 Pod Pod名称。容器 容器名称。...
元数据仓库共享模型标准访问方式
您可以通过元仓共享模型通信表以检查最新数据是否产出，每天元仓共享模型产出后，将更新通信表数据。通信表说明如下：data_share_finish：基础元数据模型通信表。data_security_finish:数据安全模块共享模型通信表。data_service_finish:...
- 产品推荐
- 这些文档可能帮助您