启动ACCL容器
PyTorch多进程处理、多线程Dataloader等会大量使用共享内存通信，故而建议为容器分配足够的共享内存空间。其他可行选项包括：shm-size=8g-v/dev/shm:/dev/shm-device=dev/infiniband-ulimit memlock=-1:1 挂载RDMA网卡设备并移除内存页锁定...
共享内存通信（SMC）常见问题
如果您在Alibaba Cloud Linux 3系统中启用了共享内存通信SMC（Shared Memory Communication），且使用过程中遇到无法正常通信、部分端口不可用、对比TCP没有应用性能提升等问题，可以参考本文提供的方案进行排查并解决。启用SMC后应用性能...
指标说明
nginx_ingress_controller_success-process_resident_memory_bytes 即RSS（Resident Set Size），指的是常驻内存集，是进程实际使用的内存，他不包括分配但未使用的内存，也不包括换出的内存页面，但包含共享内存。process_open_fds 通过...
指标说明
nginx_ingress_controller_success-process_resident_memory_bytes 即RSS（Resident Set Size），指的是常驻内存集，是进程实际使用的内存，他不包括分配但未使用的内存，也不包括换出的内存页面，但包含共享内存。process_open_fds 通过...
pg_shmem_allocations
pg_shmem_allocations 视图显示从服务器的主共享内存段的分配模式。简介 pg_shmem_allocations 视图显示从服务器的主共享内存段的分配模式。说明 此视图不包括使用动态共享内存基础架构分配的内存。列名称 列类型 描述 name text 共享内存...
pg_shmem_allocations
pg_shmem_allocations 视图显示从服务器的主共享内存段的分配模式。简介 说明 pg_shmem_allocations 视图不包括使用动态共享内存基础架构分配的内存。匿名分配是直接使用 ShmemAlloc()分配，而不是通过 ShmemInitStruct()或 ShmemInitHash...
共享内存通信（SMC）使用说明
Alibaba Cloud Linux 3提供的共享内存通信SMC（Shared Memory Communication）是一种兼容socket层、使用共享内存技术实现的高性能内核网络协议栈。根据共享内存技术的不同，SMC又可以细分为基于Internal Shared Memory（ISM）技术的SMC ...
共享内存通信（SMC）使用说明
Alibaba Cloud Linux 3提供的共享内存通信SMC（Shared Memory Communication）是一种兼容socket层、使用共享内存技术实现的高性能内核网络协议栈。根据共享内存技术的不同，SMC又可以细分为基于Internal Shared Memory（ISM）技术的SMC ...
Persistent Buffer Pool
背景信息 PolarDB PostgreSQL版 的内存可以分为Shared Buffer Pool、Dynamic Shared Memory Areas以及进程私有内存三部分：Shared Buffer Pool：集群启动时采用预分配的方式建立的一大段共享内存，通过确定offset来对各个功能模块划分使用...
Persistent Buffer Pool
背景信息 PolarDB PostgreSQL版（兼容Oracle）的内存可以分为Shared Buffer Pool、Dynamic Shared Memory Areas以及进程私有内存三部分：Shared Buffer Pool：集群启动时采用预分配的方式建立的一大段共享内存，通过确定offset来对各个功能...
持久缓存池（Warm Buffer Pool）
技术原理 PolarDB MySQL版 的持久缓存池功能利用了Linux的共享内存（Shared Memory）技术，将物理机内部的InnoDB缓存池从 PolarDB 的进程中独立起来，以实现主节点快速重启的能力。持久缓存池的技术架构如下：缓存池的控制信息、Page的控制...
文件存储
pg_dynshmem 用于动态共享内存的文件。所有节点存储一份 pg_snapshots 导出的快照（snapshot）。pg_replslot replication slot数据。pg_stat_tmp 统计子系统的临时文件。pg_stat 统计子系统的持久化文件。pg_serial 已提交的Serializable...
数据库
等待事件类型描述 等待事件类型 等待事件名称 描述 LWLock ShmemIndexLock 正等待在共享内存中查找或者分配空间。OidGenLock 正等待分配或者赋予OID。XidGenLock 正等待分配或者赋予事务 ID。ProcArrayLock 正等待在事务结尾得到快照或者...
数据库
等待事件类型描述 等待事件类型 等待事件名称 描述 LWLock ShmemIndexLock 正等待在共享内存中查找或者分配空间。OidGenLock 正等待分配或者赋予OID。XidGenLock 正等待分配或者赋予事务 ID。ProcArrayLock 正等待在事务结尾得到快照或者...
查看详细信息
SHMEM 共享内存，以及tmpfs和devtmpfs。INACTIVE 长时间未被访问过的内存页。ANON_PAGES 匿名内存页。COMMITTED_AS 完成当前负载预计需要的内存。MEM_TOTAL 系统可用总内存，不包括kernel占用的内存，这个值在系统运行期间一般是固定不变的...
共享型
共享内存型e4包括的实例规格及指标数据如下表所示。实例规格 vCPU 内存（GiB）网络带宽（Gbit/s）网络收发包PPS（万）多队列 弹性网卡 单网卡私有IP ecs.e4.small 1 8.0 0.5 5 1 2 2 ecs.e4.large 2 16.0 0.5 10 1 2 2 ecs.e4.xlarge 4 32....
ECS资源复用版
Memory资源 共享内存可用 MaxCompute实际购买成功的ECS实例的内存总数。共享内存计划上限 共享单元中包含的ECS实例的内存总数。共享内存使用 实际被使用的内存数量。说明 ECS共享资源可用值小于计划上限值，可能是由于ECS资源预定容量不足...
SysOM内核层容器监控
该指标提供有关容器内存使用情况的统计信息，包括容器的总内存（Total）、剩余内存（Free）、可用内存大小（Available）、页缓存（Cache）、块缓存（Buffers）、共享内存（Shmem）、可回收内存（SReclaimable）、不可回收内存（SUnreclaim...
资源共享概述
提升共享体验：资源基于相同的共享机制运作，您不必适应不同云资源的差异化共享操作，提升共享体验。基本概念 概念 说明 共享单元 共享单元是资源共享的实例。共享单元本身也是一种云资源，拥有独立的ID和ARN（Aliyun Resource Name）。...
使用资源目录和共享VPC实现多账号网络互通
共享VPC 企业可以基于资源共享机制，在资源目录内，将一个成员（资源所有者）的非默认VPC交换机共享给其他成员（资源使用者）使用，使多个成员在一个集中管理、共享的VPC内创建云资源，例如：云服务器ECS、负载均衡SLB、云数据库RDS等。...
什么是云虚拟主机
具体对比项如下所示：对比项 共享云虚拟主机 独享云虚拟主机 云服务器ECS 适用人群 初级入门建站用户 企业建站用户 有技术能力、懂得服务器配置及维护的用户及开发者 CPU 共享 独享 除共享型ECS实例外，其他类型实例均为独享CPU 内存 共享 ...
高级配置：内存缓存本地目录
在大部分模型推理场景中，业务进程通过OSS或NAS将模型文件挂载到本地目录，进行模型读取、...当服务进行扩容时，新的实例会自动加入已有的内存共享集群，并且初始化模型加载时可以直接从远端进行读取。因此，弹性扩缩容更快，更适合弹性场景。
资源组管理
资源组在共享内存中可以进行数据交换和共享，以便实现进程间通信和协作。如果MEMORY_SHARED_QUOTA参数设置为100%，那么资源组内部的所有内存都将被视为共享内存，所有任务都可以使用这块内存；如果MEMORY_SHARED_QUOTA参数值小于100%，系统...
发布日志
新增屏幕共享时支持音频共享（要求系统为Android 10或以上，场景为媒体模式、音乐模式）。V2.5.1@2021-08-18 新增数据打标功能，精确统计各组数据。优化屏幕共享功能，提升弱网和低性能设备的可用性。修复因GRTN（Tenfold）协议切网或断网...
功能发布记录（2.0）
新增屏幕共享时支持音频共享（要求系统为Android 10或以上，场景为媒体模式、音乐模式）。V2.5.1@2021-08-18 新增数据打标功能，精确统计各组数据。优化屏幕共享功能，提升弱网和低性能设备的可用性。修复因GRTN（Tenfold）协议切网或断网...
内存诊断
共享内存 共享内存允许两个或更多进程访问同一块内存，是进程通信方式之一。tmpfs Linux临时文件系统，是一种基于内存的文件系统，读写的文件内容只存在内存中。hugetlb 基于文件系统的大页内存。内核内存 内核态内存重点关注Sunreclaim及...
调度概述
共享GPU调度概述 共享GPU调度专业版 GPU/CPU拓扑感知调度 调度器基于节点异构资源的拓扑信息，如GPU卡之间的NVLink、PcleSwitch等通信方式、CPU的NUMA拓扑结构等，在集群维度进行最佳的调度选择，为工作负载提供更好的性能。CPU拓扑感知...
控制面质量
最近几年，云原生概念越来越火，蚂蚁集团历来热衷于技术创新，积极在云原生领域实践 Service Mesh 理念，结合现有技术架构，将一些通用能力（通信/数据/安全等）抽离出来，沉淀出了 MOSN。同时，依托于 Istio 的能力，扩展出了 Service ...
发布日志
修复设置无效音频设备容错机制缺失的问题。修复日志路径钟含有中文时无效的问题。V1.17.50@2021-06-21 修复开启伴奏功能后有杂音的问题。V1.17.49@2021-06-08 优化订阅视频分辨率为1080P时的清晰度。V1.17.47@2021-04-30 支持选择默认设备...
实践教程概览
MemVerge Memory Machine部署使用实践 MemVerge Memory Machine是一款大内存算例加速软件，支持可横向扩展的内存节点集群，以提供HPC应用程序所需的大规模内存容量，以及内存系统的企业级数据服务和数据高可用性。本教程介绍如何在E-HPC...
多租户安全
本文主要介绍如何同时保证租户之间公平地分配共享集群资源，以最大程度的避免恶意租户对其他租户的攻击。背景信息 隔离的安全程度分为软隔离(Soft Multi-tenancy)和硬隔离（Hard Multi-tenancy）。软隔离更多面向企业内部的多租需求，该...
内存诊断
内存诊断有普通内存诊断和共享内存诊断两种方式，具体内存诊断方式根据需求而定。普通内存 可以通过观察 polar_stat_activity_rt 视图，如下所示：SELECT pid,rss FROM polar_stat_activity_rt ORDER BY rss DESC;\watch 1 进而可通过 ...
内存诊断
内存诊断有普通内存诊断和共享内存诊断两种方式，具体内存诊断方式根据需求而定。普通内存 可以通过观察 polar_stat_activity_rt 视图，如下所示：SELECT pid,rss FROM polar_stat_activity_rt ORDER BY rss DESC;\watch 1 进而可通过 ...
元数据仓库共享模型标准访问方式
您可以通过元仓共享模型通信表以检查最新数据是否产出，每天元仓共享模型产出后，将更新通信表数据。通信表说明如下：data_share_finish：基础元数据模型通信表。data_security_finish:数据安全模块共享模型通信表。data_service_finish:...
出现OOM Killer的原因及解决方案
Linux操作系统内存不足时，会先触发内存回收机制释放内存，并将这部分被释放的内存分配给其他进程。如果内存回收机制不能处理系统内存不足的情况，则系统会触发OOM Killer（Out of Memory Killer）强制释放进程占用的内存，达到给系统解压...
Hologres管控台的监控指标
Query计算的内存会采用弹性机制，即单个Worker最低使用20 GB，最高使用根据实例的总空闲内存浮动，如果其他分类中内存占用较多，会导致计算部分弹性的内存越少。如果Query占用的内存较多，甚至出现了OOM的现象，说明Query较复杂或者并发度...
Linux系统的ECS实例的系统、内存或进程出现异常，查看...
内存页的大小是根据硬件和操作系统的设计来决定的，它的选择考虑了内存的利用率、地址空间大小和操作系统的内存管理机制等因素。关于如何查看系统日志的具体操作，请参见 查看实例的系统日志和屏幕截图。问题原因 该问题可能是由于ECS实例...
Shared Server
PolarDB PostgreSQL版 针对上述问题，从数据库内部提供了 Shared Server（本文简称SS）内置连接池功能，采用共享内存+Session Context+Dispatcher转发+Backend Pool的架构，实现了用户连接与后端进程的解绑。后端进程具备了Native、Shared...
Shared Server
PolarDB PostgreSQL版（兼容Oracle）针对上述问题，从数据库内部提供了 Shared Server（本文简称SS）内置连接池功能，采用共享内存+Session Context+Dispatcher转发+Backend Pool的架构，实现了用户连接与后端进程的解绑。后端进程具备了...
捕获内核的内存污染问题（KFENCE）
order 0单页 order 0单页也是Linux内核中一种内存分配机制，内存被分割成固定大小的页框（page frame），一般为4 KiB。order 0的单页指的就是一个普通的4 KiB大小的内存页框，它是内存分配的基本单位。当应用程序或内核需要分配一小块内存...
- 产品推荐
- 这些文档可能帮助您