日志采集Agent对比
受GIL限制，Fluentd单进程最多使用1个cpu核，可以使用插件multiprocess以多进程的形式支持更大的日志吞吐。Logtail logtail 0.9.4版本，设置正则表达式进行日志结构化，数据LZ4压缩后以HTTP协议写到阿里云日志服务，设置batch_size为4000条...
iOS SDK快速入门
如果您的App存在多进程且开启了断点续传功能，您应只在主进程初始化SDK。如果子进程也有采集数据的需求，您需要确保 SetPersistentFilePath 方法传入的文件路径的唯一性，否则可能会导致日志数据错乱、丢失等问题。使用时应注意多线程导致...
Llama3-8B大模型微调训练
num_processes 1：设置并行处理的进程数量为1，即不进行多进程并行处理。config_file/ml/code/multi_gpu.yaml：指定配置文件的路径。ml/code/sft.py：指定要运行的Python脚本的路径。脚本/ml/code/sft.py 接受的参数：model_name./LLM-...
通过NFS使用NAS动态存储卷
关于NAS并发写入的一些限制条件，请参见 如何避免多进程或多客户端并发写同一日志文件可能出现的异常？和 如何解决向NFS文件系统中写入数据延迟问题？在使用极速NAS文件系统时，配置动态存储卷StorageClass中的 path 需要以/share 为父目录...
一个应用可以部署多个微服务吗？
不推荐。建议一个应用部署一个微服务，您可以完整地管理微服务的生命周期，包括部署、回滚等。如果您在一个容器中运行了多个进程，将无法对其进行隔离管理。
进程监控
名称：支持填入多个进程名称，用逗号隔开即可，例如 100.88.8.144-7104:alipay_dev_dzf-1-0:0000006460,100.88.8.144-7100:u_dev_sit_mysql-8-6:0000007520。在拉取进程列表中，您可以查看到进程的名称、延时数据、TPS（Transactions Per ...
在Linux系统内启动某个服务时提示task:Cannot ...
解决方案 您可以参考以下步骤，根据实际需要调高 kernel.pid_max 的值（即允许系统运行更多的进程数）。说明 64位系统允许设置的 kernel.pid_max 最大值为2 22，32位系统允许设置的 kernel.pid_max 最大值为32,768。远程连接ECS实例。具体...
工作负载推荐配置
很多刚刚接触容器的人喜欢按照旧习惯把容器当作虚拟机（VM）使用，在一个容器里放多个进程：监控进程、日志进程、sshd进程，甚至整个Systemd。这样操作存在两个问题：判断Pod整体的资源占用会变复杂，不方便实施Pod Resource涉及到的...
概述
生产者集群 用来表示发送消息应用，一个生产者集群下包含多个生产者实例，可以是多台机器，也可以是一台机器的多个进程，或者一个进程的多个生产者对象。一个生产者集群可以发送多个 Topic 消息。发送分布式事务消息时，如果生产者中途意外...
Resource Manager
当前Resource Manager限制内存的方式为：在集群内存使用超过Resource Manager参数设定的内存水位线后，会对使用内存较多的进程发送SIGTERM信号，终止进程以释放内存。具体参数说明如下：参数 说明 enable_resource_manager 是否启动...
Resource Manager
当前Resource Manager限制内存的方式为：在集群内存使用超过Resource Manager参数设定的内存水位线后，会对使用内存较多的进程发送SIGTERM信号，终止进程以释放内存。具体参数说明如下：参数 说明 enable_resource_manager 是否启动...
ECS环境自动安装探针
说明 ECS扫描出的进程默认按照 进程工作目录 进行分组，您可以选择多个进程组。您可以在ECS服务器上使用 ls-al/proc/${pid}/cwd 命令查看进程工作目录。如果您的Java进程没有被扫描出来，请确认应用是否通过主机方式部署（容器部署的应用暂...
一键诊断
通讯模型 ALLReduce：将多个进程的数据聚合在一起，通过运算将它们缩减为单个值，并把结果分发给所有进程。ALLGather：将所有进程的数据收集到一个结构中，以便每个进程访问数据。ALLGatherA：在 ALLGather 的基础上增加了数据类型参数，...
资源组
使用限制 资源限制维度 资源组整个功能是基于限制单个或者多个进程所使用资源实现的。资源组的基本限制维度是进程，由于 PolarDB PostgreSQL版（兼容Oracle）的一个会话对应一个进程，同时一个会话只能有一个用户登录到一个数据库，因此，...
概述
基于Tablestore Sink Connector，您可以将Apache Kafka中的数据批量...在distributed模式下，所有任务通过多个进程并行执行，此模式支持根据进程变化自动均衡任务以及在执行任务过程中提供容错能力，稳定性更好。建议您使用distributed模式。
系统类故障排查
“total”指总计物理（swap）内存的大小，“used”指已使用物理内存（swap）的大小，“free”指可用的物理内存（swap）大小，“shared”指多个进程共享的内存总额，“buff/cache”指磁盘的缓存大小，“available”指可以被新应用程序使用的...
进程监控
云监控采集CPU消耗Top5进程的CPU使用率，可能存在以下问题：如果您的进程占用多个CPU，则会出现CPU使用率超过100%的情况，因为采集结果为多核CPU的总使用率。如果您查询的时间范围内，CPU消耗Top5的进程不固定，进程列表会显示该时间范围内...
pg_locks
因此，如果多个进程持有或者正在等待一个可锁对象上的锁，同一个可锁对象可能出现很多次。但是，一个当前没有被锁的对象根本不会出现。有多种不同类型的可锁对象：整个关系（如表）、关系的单个页、关系的单个元组、事务 ID（包括虚拟和...
pg_locks
因此，如果多个进程持有或者正在等待一个可锁对象上的锁，同一个可锁对象可能出现多次。但是，一个当前没有被锁的对象不会出现。存在几种不同类型的可锁定对象：整个关系（例如，表）、关系的单独页面、关系的单独元组、事务ID（包括虚拟ID...
Linux实例系统总体负载的查询及分析
sar是Linux系统中较为全面的性能分析工具，可以从多个方面对系统的活动进行监控和报告，包括文件读写情况、系统调用使用情况、串口、CPU效率、内存使用情况、进程活动及IPC有关的活动情况等等。安装sar工具 如果您的系统中默认未安装sar...
任务
在同一个执行阶段内，会有多个进程，也称之为Worker，共同完成该执行阶段的计算工作。同一个执行阶段的不同Worker只是处理的数据不同，执行逻辑完全相同。计算型任务在执行时，会被实例化，您可以对这个实例（Instance）进行操作，例如 ...
API概览
CreateAppSessionBatchSync 批量同步创建应用会话 批量创建应用会话，平台会按顺序调配资源，启动多个进程。StopAppSessionBatch 批量停止应用会话 批量停止应用会话。后续停止结果会通过HTTP接口返回。GetAppCcu 查询运行中会话统计信息 ...
操作系统监控
如果该监控指标数值比较高，则说明服务器开了太多的进程或线程。（Agent）cpu.user 当前用户空间占用CPU百分比。cpu_user userId、instanceId Maximum、Minimum、Average 用户进程对CPU的消耗。（Agent）cpu.wait 当前等待IO操作的CPU...
如何使用Prometheus监控Windows
指标名称 指标级别 指标来源 指标说明 可用物理内存（MB）Critical WMI（AvailableMBytes）多个进程之间对RAM的争用将不可避免地导致分页，进而导致性能下降。为了保证机器继续运转，需要确保机器有足够的RAM来处理日常的工作负载。持续的...
如何使用Prometheus监控Windows
指标名称 指标级别 指标来源 指标说明 可用物理内存（MB）Critical WMI（AvailableMBytes）多个进程之间对RAM的争用将不可避免地导致分页，进而导致性能下降。为了保证机器继续运转，需要确保机器有足够的RAM来处理日常的工作负载。持续的...
日志报表仪表盘
无 启动次数最多的20个进程 表格 今天（整点时间）启动次数排名前20的进程，包括进程名、进程路径、启动次数等。无 触发Bash最多的前20个进程 表格 今天（整点时间）触发Bash排名前20的进程，包括父进程名、触发总数等。无 启动进程最多的...
绑定多个EAIS实例
在ECS实例上，支持不同进程使用不同的EAIS实例或多个进程同时使用一个EAIS实例，但不支持一个进程同时使用多个EAIS实例。操作步骤 步骤一：绑定EAIS实例至ECS实例 登录 EAIS控制台。在 EAIS控制台 页面左上角选择创建的实例所在地域。在...
使用AIACC-Training TensorFlow版
对数据集做shard的注意事项 由于AIACC-Training是由多个进程启动同一份训练代码，因此您需要对数据集做数据集切分为子数据集，使每个进程处理与训练不同的子数据集。TensorFlow为 tf.data.Dataset 类提供了自动切分数据的 shard()接口，您...
自有App的常见问题
一般是多个进程初始化导致的互踢重连。请参见DemoApp中添加一个主进程判断，仅在主进程里面初始化。主要判断代码如下。其他SDK,仅在主进程上初始化 String packageName=this.getPackageName();if!packageName.equals(ThreadTools....
运维与监控FAQ
11-06 03:10:15,993 INFO[default]/dev/virtio-ports/org.qemu.guest_agent.0:1 2019-11-06 03:10:15,993 ERROR[default]Failed to open gshell:Device or resource busy 排查：方法一：运行以下命令确认云助手Agent是否开启了多个进程。...
ZooKeeper的使用场景和MSE ZooKeeper的优势
共享锁（Shared Locks）：又称为读锁，多个进程可以同时获取这把锁进行读操作，但是如果某个进程要获取写操作权限，那么此进程必须没有读数据的操作，且此进程是第一个获取到写操作类型的锁。分布式队列：利用ZooKeeper的持久化有序节点，...
PolarDB PostgreSQL版架构介绍
可以看到，主要的IO操作由原来的单个回放进程offload到了多个用户进程。通过上述优化，能显著减少回放的延迟，比其他云原生数据库快30倍。优化3：DDL锁回放优化 在主节点执行DDL时（例如，drop table），需要在所有节点上都对表上排他锁，...
PolarDB PostgreSQL版架构介绍
可以看到，主要的IO操作由原来的单个回放进程offload到了多个用户进程。通过上述优化，能显著减少回放的延迟，比其他云原生数据库快30倍。优化3：DDL锁回放优化 在主节点执行DDL时（例如，drop table），需要在所有节点上都对表上排他锁，...
什么是AI分布式训练通信优化库AIACC-ACSpeed
自适应cpu-affinity 问题分析 受到不同numa-node架构、不同Linux调度策略的影响，单机内部的多个进程可能会发生资源争抢，一方面导致额外调度的context等消耗，另一方面导致单机内部多个进程之间性能不一致的发生。而分布式训练大多是同步...
容器文件防御
一个文件防护目录下，最多支持配置10个白名单进程、10个文件目录白名单。设置进程白名单和文件目录白名单应遵循以下原则：最小权限原则：只有当进程、文件或目录的访问对容器的正常运行是必不可少的时候，才将其列入白名单。精确指定：设置...
查看和处理漏洞
如果单台服务器上有多个进程匹配该漏洞，待处理漏洞列表会显示多条信息。Linux漏洞详情面板各字段说明，请参见 Linux软件漏洞详情页参数说明。在漏洞详情面板的 待处理漏洞 列表的 状态 列，查看漏洞的修复状态。是否已处理 状态 说明 已...
应用上云方案设计
进程整理：应用程序尽量做到一个进程运行，如果使用多个进程比如Nginx+PHP也可以接受，但一定要目的单一，易于管理。同时也需要保证进程的无状态特性，使用内存存储 session 造成粘性是无法接受的，并且状态应该持久化入数据库。单一的、无...
并行计划
这个进程执行对一个或者多个索引的扫描并且构建出一个位图指示需要访问哪些表块。这些表块接着会在合作进程之间划分（和并行顺序扫描中一样）。换句话说，堆扫描以并行方式进行但底层的索引扫描不是并行。在一个 并行索引扫描 或者 并行...
创建守护进程集工作负载DaemonSet
DaemonSet可以确保在每个节点上仅运行一个容器副本（Pod），如果集群中有新增节点，也将为其新增一个Pod。...在守护进程集名称右侧的 操作 列中，选择 更多>查看Yaml、更多>删除，查看守护进程集的YAML信息和删除守护进程集。
异常：内存溢出OutOfMemoryException
查看任务管理器-详细信息，查看chrome.exe进程是否为多个，若有多个chrome进程，则需要排查代码中是否有重复打开多个chrome网页未关闭的逻辑，需要保证代码在执行完毕或执行出错时可以关闭chrome网页。2.若任务管理器中chrome进程正常，...
- 产品推荐
- 这些文档可能帮助您