JVM参数配置说明
但是操作系统对一个进程内的线程个数有一定的限制，无法无限生成，一般在3000个~5000个。XX:NewRatio=n 设置年轻代和年老代的比值。XX:NewRatio=4，设置年轻代（包括Eden和两个Survivor区）与年老代的比值（除去持久代）。如果设置为4，...
术语表
一个用户在压测过程中可能是一个进程或者一个线程。并发 虚拟用户。并发模式 虚拟用户模式，可以通过该模式摸底业务系统能同时承载的在线用户数。压测场景 压测场景是若干个基于HTTP/HTTPS的URL/API的组合。URL/API可能关联了数据文件，...
术语表
一个用户在压测过程中可能是一个进程或者一个线程。并发模式 虚拟用户模式，如果想要摸底业务系统能同时承载的在线用户数，可以通过该模式。压测场景 压测场景是若干个基于HTTP/HTTPS的URL/API的组合。URL/API可能关联了数据文件表示不同...
使用Webshell诊断应用
以Java应用为例，有进程检查、线程以及JVM的健康状态检查。操作示例如下。执行以下命令，检查应用的Java进程是否存在。ps-ef|grep java 说明 容器内通常使用主进程启动应用，如果应用被停止，则容器也会退出，SAE 自动将退出的容器重新启动...
使用AIACC-Training MXNet版
Perseus下训练模式为单process、单GPU，如果默认线程数设置过大，可以根据单节点的GPU数目，等比例缩小preprocess的线程数。例如preprocess的线程数默认值为24，而单节点GPU数目为8，那么您可以将preprocess的线程数降低为3或4。单机时正常...
数据开发常见问题
问题分析：终止Shell作业时会给Shell进程发送终止信号，如果YARN Application的驱动程序和Shell进程不存在父子进程关系，则YARN Application不会随Shell进程的终止而终止。例如Hive、sqoop、spark-submit（cluster模式）均存在这种情况。...
流量防护
并发数阈值 资源的并发线程数（即该资源正在执行的线程数）阈值。在 配置防护行为 配置向导，选择 关联行为，然后单击 新增。规则创建成功后，您可以在 并发隔离 页签对目标规则进行 编辑 或 删除 等操作。配置熔断规则 熔断规则可以监控...
日志类别及字段说明
进程快照日志 aegis-snapshot-process 记录系统中进程活动的日志，包括进程ID、进程名称、进程启动时间等信息。通过记录和分析进程快照日志，您可以了解系统中进程的活动情况、资源占用情况，检测异常进程、CPU占用和内存泄露等问题。DNS...
日志类别及字段说明
进程快照日志 aegis-snapshot-process 记录系统中进程活动的日志，包括进程ID、进程名称、进程启动时间等信息。通过记录和分析进程快照日志，您可以了解系统中进程的活动情况、资源占用情况，检测异常进程、CPU占用和内存泄露等问题。DNS...
管理限流降级规则
并发数阈值 资源的并发线程数（即该资源正在执行的线程数）阈值。在 配置防护行为 配置向导，设置 接口类型 和 关联行为，然后单击 新增。规则创建成功后，您可以在 并发隔离 页签，对目标规则进行编辑、复制、删除等操作。配置熔断规则 熔...
实时推流
case AlibabaNls:NlsEvent:TranscriptionStarted:/调用start()后,成功与云端建立连接,sdk内部线程上报started事件/通知发送线程start()成功,可以发送数据 kSemaphore.notify();break;case AlibabaNls:NlsEvent:SentenceBegin:printf("#d,%d...
PolarDB MySQL版8.0.1版本发布日志
修复执行库表恢复的新流程时，因磁盘满载导致线程无法退出的问题。修复使用Prepare Statement处理大量并发请求或执行复杂查询时，占用大量内存的问题。修复使用列存索引（IMCI）查询包含BIT类型数据的视图时，查询结果不正确的问题。修复对...
使用Tapdata Cloud导入MySQL数据
修改完成后，执行如下命令重启MySQL进程。etc/init.d/mysqld restart 登录MySQL数据库后，执行如下命令确认Binlog配置已生效，即 format 的取值为 ROW。SHOW VARIABLES LIKE 'binlog_format';返回示例如下：+-+-+|Variable_name|Value|+-+-...
DB2数据源
另外出于性能考虑采用了 PreparedStatement+Batch，并且设置了 rewriteBatchedStatements=true，将数据缓冲到线程上下文Buffer中，当Buffer累计到预定阈值时，才发起写入请求。说明 整个任务至少需要具备 insert into 的权限，是否需要其它...
Java应用CPU使用率高
edas busy-threads 2 5#显示指定Java进程的前5个使用CPU高的线程，[$JVM_PID]为Java进程的进程号，您可以使用ps-ef|grep java命令查看Java进程的进程号。edas busy-threads-p[$JVM_PID]#显示Java进程中前10个使用CPU高的线程。edas busy-...
HDFS指标
ThreadsBlocked hdfs_journalnode_jvm_ThreadsBlocked JournalNode进程中由于资源或锁原因被组织的线程个数 MemHeapMaxM hdfs_journalnode_jvm_MemHeapMaxM JournalNode设置的JVM最大内存大小。单位：MB。MemMaxM hdfs_journalnode_jvm_...
启动ACCL容器
PyTorch多进程处理、多线程Dataloader等会大量使用共享内存通信，故而建议为容器分配足够的共享内存空间。其他可行选项包括：shm-size=8g-v/dev/shm:/dev/shm-device=dev/infiniband-ulimit memlock=-1:1 挂载RDMA网卡设备并移除内存页锁定...
测试指标
操作系统内核参数主要包括信号量、进程、文件句柄，一般不要超过设置的参数值即可，具体如下：一级指标 二级指标 单位 解释 内核参数 Maxuprc 个 限制每个用户的用户进程的最大数量 Max_thread_proc 个 定义每个进程允许的最大线程数量 ...
创建作业
ntomp 1-nsteps 100000-pin on-s topol_pme.tpr#-ntomp指定每个进程开启的OpenMP线程数，-nsteps指定模拟迭代步数 执行结果 创建作业完成后，在作业列表页即可查看已提交的作业。单击该作业操作列的 详情。在弹出的作业信息面板页，即可...
RDS MySQL 5.7开放参数一览表
您可以在这里了解到截止到发表日MySQL 5.7所有已开放的参数信息。说明 参数说明内容来自MySQL官方社区。...对于有空洞的表，如果该表正在被另一个线程使用，则新行将插入到该表的末尾。否则，MySQL会获取普通的写锁，并将行插入到空洞中。...
使用GROMACS进行分子动力学模拟
THREADS=1 cd/home/gmx.test/water-cut1.0_GMX50_bare/0096#前处理过程，生成tpr格式输入文件/opt/gromacs-gpu/2018.1/bin/gmx_mpi grompp-f pme.mdp-c conf.gro-p topol.top-o topol_pme.tpr#-ntomp指定每个进程开启的OpenMP线程数，-...
RDS MySQL开放参数一览表
您可以在这里了解到截止到发表日MySQL5.7、MySQL8.0所有已开放的参数信息。说明 参数说明内容来自MySQL官方...对于有空洞的表，如果该表正在被另一个线程使用，则新行将插入到该表的末尾。否则，MySQL会获取普通的写锁，并将行插入到空洞中。...
自适应扫描
由于自适应扫描线程与各个PX worker进程之间的通信数据很少，频率不高，所以重用了已有的QC进程与PX worker进程之间的libpq连接进行报文通信。自适应扫描线程通过poll的方式在需要时同步轮询PX Worker进程的请求和响应。扫描任务协调。PX ...
自适应扫描
由于自适应扫描线程与各个PX worker进程之间的通信数据很少，频率不高，所以重用了已有的QC进程与PX worker进程之间的libpq连接进行报文通信。自适应扫描线程通过poll的方式在需要时同步轮询PX Worker进程的请求和响应。扫描任务协调。PX ...
配置变更风险管理
级别 影响力 例子 P0 全网 全局路由规则，网络配置，负载均衡配置 P1 应用集群 集群限流阈值，集群服务端点 P2 主机级别关键配置 主机资源配置，线程池大小 P3 进程级别非关键配置 日志级别 P4 无关紧要的配置 版本信息 避免配置项集中于...
如何统计表行数
通过Lindorm SQL统计表行数的速度比使用HBase RowCounter统计表行数的速度快，是因为Lindorm自动将COUNT的统计逻辑分布式地下发给每一个Lindorm进程，相当于多线程进行统计，而HBase Shell是单线程进行统计。但是COUNT的统计过程仍然是扫描...
Linux实例系统总体负载的查询及分析
plist-sz：进程列表中进程（processes）和线程（threads）的数量。ldavg-1：最后1分钟的系统平均负载。ldavg-5：过去5分钟的系统平均负载。ldavg-15：过去15分钟的系统平均负载。查看内存负载 执行如下命令，查看内存负载。sar-r 1 3 系统...
代码大页
透明大页 透明大页（Transparent Huge Pages）是一种隐式使用大页的方式，在用户进程无感知的情况下，系统后台通过启动内核线程异步扫描每一个进程的虚拟地址空间，整合合适的虚拟地址空间VMA（Virtual Memory Area）为2 MB大页。...
Alibaba Cloud Linux 2系统的ECS实例无法正常删除Pod...
exit_to_usermode_loop+0x95/0x100[]do_syscall_64+0x178/0x1a0[]entry_SYSCALL_64_after_hwframe+0x44/0xa9 问题原因 在进程coredump发生前任务所在cgroup已经被挂起，进程coredump发生后所有线程进入了exiting状态，cgroup遍历会忽略此...
Linux实例负载高问题排查和异常处理
plist-sz：进程列表中进程（processes）和线程（threads）的数量。ldavg-1：最后1分钟的系统平均负载。ldavg-5：最后5分钟的系统平均负载。ldavg-15：最后15分钟的系统平均负载。查看磁盘使用情况 执行如下命令，查看磁盘读写负载情况。sar...
AliSQL内核小版本发布记录
AliSQL是RDS MySQL的内核，除了为用户提供MySQL社区版的所有功能外，还提供了企业级备份恢复、线程池、并行查询等类似于MySQL企业版的诸多功能，赋予了RDS MySQL安全、备份、恢复、监控、性能优化、只读实例等各项能力。本文介绍AliSQL的...
检测文件系统和块层的IO hang
proc/<pid>/wait_res 该接口能够获取进程正在等待的资源信息。proc/<pid>/task/<tid>/wait_res 该接口能够获取线程正在等待的资源信息。以上接口中变量说明如下。变量名 说明块存储设备名。进程ID。线程ID。示例一 您可以根据需求调用接口/...
检测文件系统和块层的IO hang
proc/<pid>/wait_res 该接口能够获取进程正在等待的资源信息。proc/<pid>/task/<tid>/wait_res 该接口能够获取线程正在等待的资源信息。以上接口中变量说明如下。变量名 说明块存储设备名。进程ID。线程ID。示例一 您可以根据需求调用接口/...
Spring Boot应用如何快速接入Prometheus监控
例如，线程池的队列情况、进程内Guava Cache缓存的命中情况。实现对业务强相关的自定义指标进行监测。例如，某个接口的UV等。实现对JVM GC及内存使用情况进行监测。实现对上述指标进行统一汇聚展示，以及配置关键指标的告警。步骤一：引入...
Spring Boot应用如何快速接入Prometheus监控
例如，线程池的队列情况、进程内Guava Cache缓存的命中情况。实现对业务强相关的自定义指标进行监测。例如，某个接口的UV等。实现对JVM GC及内存使用情况进行监测。实现对上述指标进行统一汇聚展示，以及配置关键指标的告警。步骤一：引入...
HSF应用注册或订阅服务数多导致启动较慢怎么办？
如果设置 spring.hsf.max-wait-address-time 参数并重启应用后，应用启动还是较慢，可以对正在启动的应用做线程堆栈 jstack<应用JVM进程号>>>threaddump.txt，并结合$USER_HOME/log/configclient/config-client.log 日志文件、$USER_HOME/...
BE参数配置
be_service_threads 默认值：64 类型：Int32 说明：BE进程上thrift server service的执行线程数，代表可以用于执行FE请求的线程数。brpc_max_body_size 此配置主要用来修改brpc的参数 max_body_size。有时查询失败，在BE日志中会出现body_...
查询分析程序日志
在多线程环境中，只需根据线程ID进行过滤即可。跨进程关联：跨进程的请求一般没有明确线索，一般通过RPC中传入的TracerId来进行关联。进程内关联 通过上下文查询查看关联日志。例如通过关键词查询定位到一个异常日志，然后单击 上下文浏览...
简单上传
waitUntilFinished会阻塞当前线程，但是不会阻塞上传任务进程。[putTask waitUntilFinished];[put cancel];上传到文件目录 OSS没有文件夹的概念，所有元素都是以文件来存储。OSS提供了创建模拟文件夹的方式。创建模拟文件夹本质上是创建了...
应用监控概述
JVM 指标 GC、线程 Java 应用启动后，默认会在/tmp/hsperfdata_${username} 目录下以该进程的 id 为文件名新建文件，并在该文件中存储 jvm 运行的相关信息，其中 userName 为当前的用户名，/tmp/hsperfdata_${username} 目录会存放该用户...
- 产品推荐
- 这些文档可能帮助您