监控与报警
磁盘写入数据量（作业维度）指定作业的磁盘写入数据量（MB）。网络接收数据量（作业维度）指定作业的网络接收数据量（MB）。网络发送数据量（作业维度）指定作业的网络发送数据量（MB）。GPU算力使用率（作业维度）指定作业的GPU算力使用率...
STARROCKS指标
starrocks_be_disk_bytes_written 无 BE的磁盘写入速度。starrocks_be_disks_avail_capacity 无 BE的磁盘可用的容量。starrocks_be_disks_data_used_capacity 无 BE的磁盘已使用的容量。starrocks_be_fd_num_used 无 FD的数量。starrocks_...
GetJobMetrics-获取任务的监控数据
DiskWriteRate：磁盘写入速率。GpuMemoryUsage Token string 否 用于鉴权的临时令牌。eyXXXX-XXXX.XXXXX 返回参数 名称 类型 描述 示例值 object 任务监控数据信息。JobId string 任务 ID。dlc-20210126170216-*PodMetrics array 任务监控...
GetInstanceMetrics-获取实例指标
DiskWriteRate：磁盘写入速率。GpuCoreUsage StartTime string 否 获取实例指标的起始时间。2020-11-08T15:00:00Z EndTime string 否 获取实例指标的结束时间。2020-11-08T15:00:00Z TimeStep string 否 指标获取的时间间隔。单位为分钟。...
资源配额监控与报警
磁盘写入数据量（Quota维度）指定Quota的磁盘写入数据量（MB）。GPU算力使用率（Quota维度）指定Quota的GPU算力使用率。GPU显存使用率（Quota维度）指定Quota的GPU显存使用率。GPU设备功耗（Quota维度）指定Quota的GPU设备功耗。GPU温度...
概览
(ECS)所有磁盘读取BPS(ECS)所有磁盘写入BPS(ECS)所有磁盘每秒读取次数(ECS)所有磁盘每秒写入次数 边界以外 连接数过高、连接数波动较大或连接数持续峰值 系统负载过高、TCP连接池不足、应用程序或者服务出现异常，某些应用程序或者服务在...
为什么文件系统容量和快照大小不一致
文件系统在初始化阶段被写入大量数据块（Block，指磁盘的逻辑块地址LBA被块存储划分为相同大小的块），写入数据操作会占用磁盘空间。文件系统为了降低性能消耗，删除文件时只在文件属性中创建弃用标记。磁盘无法感知删除指令，数据块仍然是...
查询执行模式
计算产生的中间结果数据，也会写入到磁盘中。当下游任务被调度执行时，会从磁盘读取中间结果数据并进行计算。适用场景：适用于执行时间长、计算数据量大的查询。例如：清洗类查询（Extract-Transform-Load）。默认执行模式 版本 产品系列 ...
云监控控制台查看监控
磁盘吞吐IOPS写 磁盘每秒进行写入操作的次数。磁盘吞吐读速率 磁盘的读取吞吐速率。单位：Byte/s。磁盘吞吐写速率 磁盘的写入吞吐速率。单位：Byte/s。磁盘inode使用率 磁盘inode的使用个数占最多可使用的总个数的比值。说明 inode是Linux...
RSS指标
DiskBuffer rss_worker_metrics_DiskBuffer_Value RSS Worker当前内存中暂存的需要写入到磁盘的shuffle数据量。单位：Byte。NettyMemory rss_worker_metrics_NettyMemory_Value RSS Worker节点总的netty使用的对外内存量。单位：Byte。...
如何将一棵LSM-Tree塞进NVM
鉴于DRAM是掉电易失的，其采用写前日志（WAL）的方式将要写入的数据提前写入到磁盘中持久化，在内存中的数据刷入（flush）或者合并到磁盘后再清除对应的WAL。在典型的设计中，内存中的数据通常采用跳表（skiplist）实现，在大小超过限制后...
云盘异步复制容灾常见问题
系统侵入性 是 否 复制实现 通过在被保护实例上安装Agent嵌入OS，实时复制磁盘上写入的数据并发送到网关。网关将数据传输中转站OSS进行存储，最终写入容灾站点磁盘。通过块存储的云盘异步复制、快照等机制实现数据复制。恢复实现 支持多...
ECS容灾常见问题
系统侵入性 是 否 复制实现 通过在被保护实例上安装Agent嵌入OS，实时复制磁盘上写入的数据并发送到网关。网关将数据传输中转站OSS进行存储，最终写入容灾站点磁盘。通过块存储的云盘异步复制、快照等机制实现数据复制。恢复实现 支持多...
ECS容灾常见问题
系统侵入性 是 否 复制实现 通过在被保护实例上安装Agent嵌入OS，实时复制磁盘上写入的数据并发送到网关。网关将数据传输中转站OSS进行存储，最终写入容灾站点磁盘。通过块存储的云盘异步复制、快照等机制实现数据复制。恢复实现 支持多...
X-Engine引擎使用须知
xengine_bytes_written 写入物理磁盘的字节数。xengine_memtable_hit Memtable命中次数。xengine_memtable_miss Memtable Miss次数。xengine_number_block_not_compressed 未压缩的Block数目。xengine_number_keys_read Key的读取次数。...
如何查看Linux系统I/O负载情况？
kjournald进程是ext3文件系统进行I/O数据操作的内核进程，它在向磁盘内写入和读取数据时占用CPU和内存资源。当循环的向ext3文件系统写数据时，会使Journal size不断增大，到达设置的Journal size时，就会出现该问题。解决方案 远程连接...
调优集群性能
写入量增大 写入量增大会占用较多的CPU资源、磁盘IO资源，触发更多的Build任务，最终会导致整体的查询响应时间增加。说明 更多影响查询响应时间原因的说明，请参见 影响查询性能的因素。您可以在控制台的监控信息页面，选择查询响应时间...
向量计算使用指南
min_flush_proxima_row_count：数据写入到磁盘时建索引的最少行数，建议值为1000。min_compaction_proxima_row_count：数据在磁盘做合并时建索引的最小行数，建议值为1000。max_total_size_to_merge_mb：数据在磁盘做合并时的最大文件大小...
Proxima向量计算
min_flush_proxima_row_count：数据写入到磁盘时建索引的最少行数，建议值为1000。min_compaction_proxima_row_count：数据在磁盘做合并时建索引的最小行数，建议值为10000。max_total_size_to_merge_mb：数据在磁盘做合并时的最大文件大小...
云消息队列 Kafka 版何时删除旧消息？
当往Kafka Topic中写入数据提示磁盘空间已满或 Queue full 时，为避免因磁盘容量不足而导致机器宕机，进而影响服务可用性，云消息队列 Kafka 版 会根据磁盘使用率的多少，执行不同的消息清理策略。清理策略 磁盘使用率每天凌晨4:00集中删除...
存储资源
日志异步写入：在磁盘满的情况下，如果服务应用日志同步写，会造成线程阻塞，从而造成服务无响应等问题。需要将应用日志改为异步写入，防止因磁盘满对在线服务造成影响。磁盘IO负载高 磁盘IO操作非常频繁或负载过大，导致磁盘IO性能下降或...
ECS集群应用日志清理机制是什么
本文介绍关于在EDAS中部署应用时，生成的日志清理机制的常见...因此建议您在应用中使用Java自带或者开源日志框架管控应用日志，并使用日志框架去轮询和控制应用日志文件保存的数量、大小、个数等，这样可以避免应用日志写入过多耗尽磁盘空间。
操作系统监控
最后调用RegQueryValueExA函数查询HKEY_PERFORMANCE_DATA注册表中磁盘相关属性（读取次数、写入次数、写入字节数、读取字节数、读取花费时间、写入花费时间和磁盘使用时间）。Linux 磁盘使用率与inode使用率可以参考 df 命令，磁盘读写可以...
SET TRANSACTION
设置当前事务的特性。语法 SET TRANSACTION transaction_mode 其中 transaction_mode 为下列项之一：ISOLATION LEVEL { SERIALIZABLE|READ COMMITTED } READ WRITE|READ ONLY 说明 ...这是只读的高级概念，它不会阻止对磁盘的所有写入操作。
X-Engine简介
但是一组事务提交的过程中，还是有大量等待过程的，例如写入日志到磁盘过程中，除了等待落盘无所事事。X-Engine为了进一步提升事务处理的吞吐，使用流水线技术，把提交阶段分为4个独立的更精细的阶段：拷贝日志到缓冲区（Log Buffer）日志...
查看云盘监控信息
Byte/s disk_readbytes userId、instanceId、device Maximum、Minimum、Average（Agent）disk.write.bps_device 磁盘每秒写入的字节数。Byte/s disk_writebytes userId、instanceId、device Maximum、Minimum、Average（Agent）disk.read....
Kafka数据接入
无 写入模式 指定写入模式，支持 put 和 update 两种写入模式，默认值为put。当 表格存储 选择宽表模型时显示该参数。取值范围如下：put：表示覆盖写。update：表示更新写。put 删除模式 当 云消息队列 Kafka 版 消息记录出现空值时，您...
CreateDisk-创建一块按量付费或包年包月数据盘
访问级别：是指每个操作的访问级别，取值为写入（Write）、读取（Read）或列出（List）。资源类型：是指操作中支持授权的资源类型。具体说明如下：对于必选的资源类型，用背景高亮的方式表示。对于不支持资源级授权的操作，用 全部资源 ...
重启变更报错：集群状态不健康或存在close索引，不能...
查看load_1m监控 load_1m>CPU核数 load_1m超过CPU核数，说明当前服务器负载大，需要关注集群总体读或写入QPS监控及磁盘吞吐（每秒读写大小）监控，及时降低流量或扩容。说明 关于监控指标的详细信息，请参见 指标含义与异常处理建议。关于...
常见问题
上传时，ossfs会将临时缓存文件写入/tmp 目录下，写入前需要先判断/tmp 目录所在的磁盘可用空间是否小于 multipart_size*parallel_count。如果磁盘可用空间大于 multipart_size*parallel_count，则正常写入文件。如果磁盘可用空间小于 ...
版本说明
修复写入速率监控和磁盘监控数据错误的问题。V2.2.7 2018年7月6日 新特性 发布新版本 SDK，支持多值的数据写入、查询和分析。V2.2.4 2018年5月24日 新特性 支持 string 和 boolean 类型数据的写入；提供 last 接口，支持获取时间线最新周期...
监控
弹性模式 说明 磁盘使用量是指单个读写节点的最大磁盘使用量，如果该值大于或等于8 TB，集群将无法写入数据。您需要重点关注磁盘使用量的值。在 监控信息 页面，单击 报警规则设置，系统自动跳转至 云监控控制台。在 报警规则列表 页面，...
Tair持久化与备份恢复
Tair 默认启用 AOF持久化，策略为 AOF_FSYNC_EVERYSEC 且不支持修改，即Redis每秒执行一次fsync，将AOF缓冲区中的写入类命令刷新到磁盘，这个过程又称为AOF落盘。AOF_FSYNC_EVERYSEC 策略对Redis服务性能的影响较小，同时也能极大地降低...
Redis持久化与备份恢复
云数据库 Redis 版 默认启用 AOF持久化，策略为 AOF_FSYNC_EVERYSEC 且不支持修改，即Redis每秒执行一次fsync，将AOF缓冲区中的写入类命令刷新到磁盘，这个过程又称为AOF落盘。AOF_FSYNC_EVERYSEC 策略对Redis服务性能的影响较小，同时也能...
实例扩容及变配
当您使用的TSDB 实例遇到时间线数量不足、磁盘存储空间不足或写入效率不满足业务要求时，可以通过升级实例规格配置或者扩容来解决。第一步：登录TSDB控制台，点击目标实例右侧的“变配”链接，进入到实例变配和扩容页面。第二步：在实例变...
常见Latency（时延）事件的处理建议
AofWriteActiveChild 写入AOF文件的耗时，写入过程中存在其他子进程也在向磁盘写数据等情况。写入AOF文件过程中，其他子进程也在向磁盘写数据。AofWritePendingFsync 写入AOF文件的耗时，写入过程中存在后台进程正在执行fsync。写入AOF文件...
测试模型
建议您在组织BatchWriteRow请求时，按数据的分区键进行聚合，可以减少每次BatchWriteRow的写磁盘数量，有效提高写入性能。随机读和随机范围读两个测试用例由于在测试时无写入压力，故其cache命中率会随测试时间逐渐升高。对于低压力的场景...
常见Latency（时延）事件的处理建议
AofWriteActiveChild 写入AOF文件的耗时，写入过程中存在其他子进程也在向磁盘写数据等情况。写入AOF文件过程中，其他子进程也在向磁盘写数据。AofWritePendingFsync 写入AOF文件的耗时，写入过程中存在后台进程正在执行fsync。写入AOF文件...
快照FAQ
文件系统在初始化阶段被写入大量数据块（Block，指磁盘的逻辑块地址LBA被块存储划分为相同大小的块），写入数据操作会占用磁盘空间。文件系统为了降低性能消耗，删除文件时只在文件属性中创建弃用标记。磁盘无法感知删除指令，数据块仍然是...
导入与导出
当客户端导入压力不足时，会导致集群CPU使用率、磁盘IO使用率及写入响应时间处于较低水位。数据库服务器端虽然能够及时消费客户端发送的数据，但由于总发送量较小，导致写入TPS不满足预期。您可以调大单次导入的 批量插入条数 及增加 任务...
- 产品推荐
- 这些文档可能帮助您