Linux时间和时区说明
时间相关操作 运行以下命令，可以查看当前Linux系统内的时间设置。timedatectl status 返回结果示例如下图所示，您可以查看Linux系统内的本地时间、全球标准时间、RTC时间以及时区等信息。通过 timedatectl 命令设置硬件时钟的时间标准。将...
Linux实例存在OOM问题的处理方法
信息点 获取途径 备注 OOM发生的时间和频率 Linux系统日志 您的业务应用日志 Linux系统日志路径如下：/var/log/message Linux实例的系统负载情况 云监控 负载查询工具 推荐使用云监控查询您的ECS实例负载信息。如果您没有使用云监控产品，...
日志消费与查询区别
根据接收日志的时间，设置批量读取Shard日志的起始位置（cursor）。日志查询（LogSearch）提供海量日志查询和分析功能，根据条件进行日志查询与统计。通过查询条件查找符合要求的数据。支持运算符AND、NOT、OR的多条件组合查询和结果SQL...
日志设置与日志容量管理
开通日志服务后，您可以根据业务防护及分析需要，设置日志字段和存储类型，开启或关闭防护对象日志采集功能，修改日志存储时长，更有效地利用日志容量。您也可以实时查看日志容量，及时升级容量，避免日志数据无法写入专属日志库。本文介绍...
Apache模式解析
当配置 日志格式 为 common 或 combined 时，此处会自动填充对应格式的配置字段，请确认是否和Apache配置文件中定义的格式一致。当配置 日志格式 为 自定义 时，请根据实际情况填写，例如 LogFormat"%h%l%u%t \"%r\"%>s%b \"%{Referer}i\"\...
应用场景
企业或组织将内部系统的日志或指标数据接入日志服务后，IT运维人员可通过告警功能对稳定性指标（例如响应时间、负载、错误率等）和其他潜在错误进行实时监控，及时识别异常并响应（24×7的值班）。告警功能还支持根据特定的维度对告警事件...
过滤VPC流日志公网流量
通过e_if、op_not、e_match函数删除srcaddr和dstaddr字段不符合IP地址格式的日志。更多信息，请参见 op_not 和 e_match。通过e_if、op_and、op_or和ip_cidrmatch函数删除内网日志。更多信息，请参见 op_and、op_or 和 ip_cidrmatch。单击 ...
Logstore相关问题
超过日志保存时间 当日志保存时间达到您所设置的时间后，日志将被删除，清理后日志无法恢复。日志服务将在1小时内删除所有已超过保存时间的数据。但日志服务控制台首页的 用量明细 将于次日更新。例如您原本的数据保存时间为5天，现修改为1...
内核热补丁FAQ
Alibaba Cloud Linux系统的CVE-2021-33909安全漏洞内核热补丁修复方案 Alibaba Cloud Linux 2系统的CVE-2021-22555安全漏洞内核热补丁修复方案 Alibaba Cloud Linux 2系统的ECS实例中Page Fault异常导致系统宕机 Alibaba Cloud Linux 2系统...
时间字段转换示例
在查询分析中，往往需要对日志中的时间字段进行处理，例如将时间戳转换成指定格式等，本文档介绍时间字段的常用转换示例。日志中可能有多个记录时间的字段，例如：_time_：用API/SDK写入日志数据时指定的日志时间，该字段可用于日志投递、...
如何删除日志？
日志服务不支持直接删除日志，您可以通过调整Logstore的数据保存时间，从而实现日志删除。当日志保存时间达到您所设置的保存时间后，日志将被删除。本文介绍如何调整Logstore的数据保存时间。操作步骤 登录 日志服务控制台。在Project列表...
导入Amazon S3文件
设置指定的日志时间字段以及正确的时间格式和时区。更多信息，请参见 创建数据导入配置。导入数据后，无法查询和分析数据。数据不在查询范围内。未配置索引。索引未生效。检查待查询数据的时间是否在查询时间范围内。如果不在查询范围内，...
导入OSS数据
设置指定的日志时间字段以及正确的时间格式和时区。更多信息，请参见 创建数据导入配置。导入数据后，无法查询和分析数据。数据不在查询范围内。未配置索引。索引未生效。检查待查询数据的时间是否在查询时间范围内。如果不在查询范围内，...
Alibaba Cloud Linux系统的Overlayfs文件系统缺乏读...
问题描述 在Alibaba Cloud Linux系统的Overlayfs文件系统中使用只写方式打开或者在对应目录下touch文件触发copy up时报错。此时建议您继续运行以下命令判断系统存在的问题：mkdir-p/root/test/lower/dir/root/test/upper/root/test/work/...
Linux实例无法输出系统日志且出现“rsyslogd was ...
rsyslogd was HUPed 问题原因 由于系统日志服务异常退出导致，可以从系统日志的历史信息中找到相关信息，如下所示。[origin osftware="rsyslogd"swVersion="5.8.10"x-pid="860"x-info="http://www.rsyslog.com"]exiting on signal 15 解决...
Linux系统日志/var/log配置绕接
问题现象 发现节点的/var目录占用空间较多，导致K8s不可用或者节点卡顿 修复方案 我们在Trident>1.12.0版本，会自动配置/var/log目录的日志绕接管理，此方案适用于小于1.12的Trident 先清理/var/log/目录下的系统日志文件，注意，这些文件...
Alibaba Cloud Linux 2系统中TCP拥塞控制算法BBR对...
TCP协议内部的封装方式依赖于Linux系统的高精度计时器（hrtimer），每个连接的高精度计时器会额外增加CPU消耗。在CPU使用率和网络PPS均高的情况下，BBR算法对网络性能的影响更加明显。在CPU空闲并且网络PPS低的情况下，影响不大。解决方案 ...
基础资源
本文介绍项目（Project）、日志库（Logstore）、机器组（MachineGroup）、日志组（LogGroup）、告警等资源的使用限制。说明 扩容操作本身不收取费用，但扩容后的资源将按照 标准价格 进行计费。限制项 说明 备注 项目（Project）您在1个...
如何查看日志服务的存储容量和消费记录
删除指定日志：目前日志服务仅支持 修改数据保存时间 来删除日志，无法手动删除指定内容的日志，当日志保存时间达到您所设置的保存时间后，日志将被删除。降低存储成本：查询日志服务的费用，请参见 账单查询。缩短Logstore的数据保存时间...
日志投递MaxCompute后，如何检查数据完整性
使用保留字段_partition_time_作为表分区列，如何判断分区数据是否已完整_partition_time_由日志的time字段计算得到，由日志的真实时间按照时间格式字符串向下取整得出。其中，日志真实时间既不是投递数据的时间，也不是日志写入服务端时间...
KV日志
本视频向您展示数据加工结构化数据Key-Value格式日志的解析。
事件配置
时间范围 设置目标快速查询的时间范围。可以设置为：预设：在原始日志页面中单击字段值，跳转到目标快速查询的查询页面后，保持日志服务的默认查询时间范围，即15分钟（相对）。继承当前时间：在原始日志页面单击字段值，跳转到目标快速...
Alibaba Cloud Linux 3系统关闭CPU漏洞修复的方法
Alibaba Cloud Linux 3系统默认开启漏洞修复，但是漏洞修复会对系统有性能方面的影响，您可以根据实际需要选择关闭漏洞修复。本文主要介绍Alibaba Cloud Linux 3系统中存在的CPU漏洞、漏洞状态文件、关闭漏洞修复的方法等。背景信息 2018年...
JSON日志
本视频向您展示数据加工结构化数据JSON格式日志的解析。简单JSON解析 复杂JSON解析
创建实时日志推送服务
本文介绍如何在视频点播控制台中创建实时日志推送服务，将指定域名的CDN原始访问日志推送到日志服务进行存储、查询和分析等操作。前提条件 已添加加速域名。具体操作，请参见 添加加速域名。操作步骤 登录 点播控制台。在左侧导航栏中，...
创建实时日志推送服务
本文介绍如何在视频直播控制台中创建实时日志推送服务，将指定域名的CDN原始访问日志推送到日志服务进行存储、查询和分析等操作。前提条件 已添加域名。具体操作，请参见 添加域名。说明 目前仅支持推送播流域名的实时日志，如需推送推流域...
管理MetricStore
删除MetricStore必须提前删除所有Logtail配置，通过减少数据保存时间，实现日志的自动删除。本文介绍如何在日志服务控制台上创建、修改、删除MetricStore与时序数据等操作。基本概念 时序库（MetricStore）是日志服务中时序数据的采集、...
Alibaba Cloud Linux 2系统的ECS实例中ext4文件系统的...
本文介绍Alibaba Cloud Linux 2系统的ECS实例中ext4文件系统的Buffer I/O写性能不符合预期问题的原因及解决方案。问题描述 在ext4文件系统中执行常规的缓存异步I/O（Buffer I/O）写操作时，可能会观察到性能表现不符合预期的情形。存在该...
提取字符串动态键值对
示例1 以 k1:q=asd&a=1&b=2&_1_=3 日志为例，如果要对该格式的日志作关键字和值提取，三种方案如下：e_kv函数 原始日志 k1:q=asd&a=1&b=2&_1_=3 加工规则#默认以特定字符集提取关键字 e_kv("k1")加工结果 k1:q=asd&a=1&b=2 q:asd a:1 b:2 ...
使用GetLogs接口查询日志
重要 在JAVA SDK中调用GetLogs接口的相关限制说明如下：当设置 query 仅为查询语句（例如 request_method:POST）时，可通过 line 参数控制返回日志的条数，最大值为100。如果您需要返回更多的日志，需使用SQL Limit语法。更多信息，请参见 ...
开启数据采集功能
CloudLens for PolarDB支持一键开启数据采集功能，用于采集PolarDB MySQL集群的审计日志、慢查询日志、错误日志和性能指标。本文介绍开启数据采集功能的操作步骤及相关操作。前提条件 已创建PolarDB MySQL集群。具体操作，请参见 购买按量...
Alibaba Cloud Linux 2系统的ECS实例内核日志存在...
本文为您介绍Alibaba Cloud Linux 2系统的ECS实例内核日志存在“integrity:Unable to open file”信息的原因及解决方案。问题描述 符合如下条件的Alibaba Cloud Linux 2实例的内核日志（执行 dmesg 命令查看日志）中存在类似如下的提示信息...
使用资源函数增量获取数据
使用增量拉取模式获取数据时，日志服务每次只拉取新增或更新的数据，效率高。本文介绍如何使用res_rds_mysql函数增量获取RDS MySQL数据库中的数据。前提条件 日志服务 已上传数据到日志服务源Logstore中。具体操作，请参见 数据采集。已...
使用Java SDK管理日志库Logstore
日志库（Logstore）是日志服务中数据的采集、存储和查询单元。每个Logstore隶属于一个Project，每个Project中可创建多个Logstore。本文通过代码示例介绍如何创建、修改、查询、删除Logstore等。前提条件 已创建RAM用户并完成授权。具体操作...
配置日志采集
重要 单击 确定 后，该应用将会被重启，请在业务较少的时间段进行。日志源的存放目录须包含日志的文件名，如/tmp0/cjsc.log。请勿在日志源的存放目录中存放其他重要文件，谨防目录内的文件被覆盖。后续步骤 将日志采集到日志服务后，您可以...
使用Cloud Shell下载日志数据
通过Cloud Shell可以快速下载较大数量的日志文件，并快速上传至OSS。本文介绍使用Cloud Shell下载日志数据。前提条件 如果您使用RAM用户下载日志，则需要先给RAM用户授予以下权限：只读访问日志服务的权限（AliyunLogReadOnlyAccess）。...
工作原理
背景信息 服务在运行过程中会生成大量的日志，包括系统日志和业务日志等。日志被广泛地应用在系统监控和故障定位中，传统的日志分析手段以分析日志风险等级和匹配关键字为主，例如监控Error级别日志的内容和数量、监控含有Failed、...
过滤处理
Logtail过滤处理插件支持根据日志字段值来进行日志过滤。功能入口 当您需要使用Logtail插件处理日志时，您可以在创建或修改Logtail配置时，添加插件。具体操作，请参见 概述。配置说明 参数名称 说明 原始字段 解析日志前，用于存放日志...
下载或删除网站日志
操作步骤 不同操作系统的云虚拟主机，下载或删除网站日志的方法也不同，具体操作如下所示：Linux操作系统云虚拟主机 本操作以Linux操作系统独享虚拟主机高级增强版为例，其他类型的主机与增强版主机有差异，请您以实际页面显示为准。...
创建索引
全文索引和字段索引配置参数 全文索引 参数 说明 日志聚类 打开 日志聚类 开关后，日志服务在采集文本日志时会自动聚合相似度高的日志，提取共同的日志模式，帮助您快速掌握日志整体情况。更多信息，请参见 日志聚类。大小写敏感 查询时...
- 产品推荐
- 这些文档可能帮助您