如何查看日志服务的存储容量和消费记录
删除指定日志：目前日志服务仅支持 修改数据保存时间 来删除日志，无法手动删除指定内容的日志，当日志保存时间达到您所设置的保存时间后，日志将被删除。降低存储成本：查询日志服务的费用，请参见 账单查询。缩短Logstore的数据保存时间...
使用前须知
云数据库RDS 开启云数据库RDS审计日志采集功能后，会自动开启符合条件（支持MySQL的非基础版本，PostgreSQL高可用版）的RDS实例的SQL洞察（SQL审计）功能，费用详情请参见 计费项。说明 如果您已为RDS实例开通SQL洞察试用版，则开启采集后...
采集Python日志
(pathname)s 日志文件路径。(filename)s 日志文件名。(module)s 日志所在的模块名。(funcName)s 日志输出函数的名称。(lineno)d 日志输出函数的语句所在的代码行。(created)f 日志创建时间，UNIX时间戳格式。(relativeCreated)d 日志创建...
Logtail配置
preserve boolean 否 true 如果一个日志文件在指定时间内没有任何更新，则认为该文件已超时。可选值如下：true（默认）：永不超时。false：如果日志文件在30分钟内没有更新，则认为已超时，并不再监控该文件。preserveDepth integer 否 1 ...
查询不到日志的排查思路
待采集的日志文件没有实时写入数据。您可以打开/usr/local/ilogtail/ilogtail.LOG 查看报错信息。常见错误如下：parse delimiter log fail：通过分隔符模式采集日志出错。parse regex log fail：通过完整正则模式采集日志出错。分词符设置...
查看数据报表
CloudLens for Redis提供丰富的可视化图表，用于展示云数据库Redis日志的分析结果。前提条件 已开启日志采集功能。具体操作，请参见 开启日志采集功能。功能入口 登录 日志服务控制台。在 日志应用 区域的 云产品Lens 页签中，单击 ...
CDN访问日志的分析方法
上传日志文件至本地Linux系统服务器。登录本地Linux系统服务器，执行如下命令，查询状态为200的所有记录并输出至指定的文件中。grep-w"200"[$Log_Txt]|awk '{if($9="206")print$0}'>200log.txt 说明：[$Log_Txt]为下载的日志文件。执行如下...
术语表
Logtail配置 Logtail配置是Logtail进行日志采集的策略集合，包括日志文件的位置、采集方式等。更多信息，请参见 Logtail配置。机器组 机器组是包含多台服务器的虚拟分组。日志服务通过机器组的方式管理所有需要通过Logtail采集日志的服务器...
应用场景
日志服务的典型应用场景包括：数据采集与消费、数据清洗与流计算（ETL/Stream Processing）、数据仓库对接（Data Warehouse）、日志实时查询与分析。数据采集与消费 通过日志服务LogHub功能，可以大规模低成本接入各种实时日志数据（包括...
Linux系统日志/var/log配置绕接
问题现象 发现节点的/var目录占用空间较多，导致K8s不可用或者节点卡顿 修复方案 我们在Trident>1.12.0版本，会自动配置/var/log目录的日志绕接管理，此方案适用于小于1.12的Trident 先清理/var/log/目录下的系统日志文件，注意，这些文件...
开启实时日志投递
您可以在全站加速控制台中开启实时日志投递功能，将DCDN加速域名所产生的日志投递到日志服务进行分析。前提条件 已添加加速域名。具体操作，请参见 添加服务域名。已开通日志服务。操作步骤 重要 如果您使用RAM用户开启实时日志投递功能，...
管理EventStore
删除EventStore会永久删除事件数据，删除日志可以通过设置更短的保存时间。本文介绍如何在日志服务控制台上创建、修改和删除EventStore与事件数据等操作。基本概念 事件库（EventStore）是日志服务中事件数据的采集、存储和查询单元。每个...
保留字段
Logtail采集的日志文件路径，Logtail为日志自动填加该字段。可用于日志查询、分析、自定义消费。对该字段进行SQL分析时，需要给该字段加上双引号。tag_:_hostname_字符串格式。索引设置：开启索引后，日志服务默认为_tag_:_hostname_创建...
使用访问日志
访问日志介绍 您可以选择为全球加速实例的一个或者多个终端节点组创建访问日志，采集到的访问日志将会投递到终端节点组所在地域SLS的日志库中。访问日志包括：客户端源IP、客户端源端口、目的IP、目的端口、加速地域等字段信息。单击此处，...
采集Windows事件日志
如果下发Logtail配置后，日志文件无更新，则Logtail不会采集该文件中的日志。更多信息，请参见 读取文件。原理 对于事件日志，Windows提供了 Windows Event Log 和 Event Logging 两套API，前者是后者的升级，仅在Windows Vista及以上的...
日志采集Agent对比
不支持 支持cpu/内存阈值保护 日志文件采集场景-性能对比 以Nginx的access log为样例，如下一条日志365字节，结构化成14个字段：在下面的测试中，将模拟不同的压力将该日志重复写入文件，每条日志的time字段取当前系统时间，其它13个字段...
管理日志投递任务
创建AnalyticDB MySQL投递任务后，您可以在日志服务控制台上管理数据投递任务，包括查看任务详情、修改投递配置以及启动、停止、删除任务等操作。查看任务详情 登录 日志服务控制台。在 Project列表 区域，单击目标Project。在 日志存储>...
如何实现文件中的日志被采集多份
解决方案 将日志数据存储到不同Logstore 不需要配置多个Logtail采集配置，可以使用日志服务数据加工功能对日志进行复制，避免对同主机的其他服务性能造成影响。具体操作，请参见 复制Logstore数据。创建多个Logtail采集配置 主机场景 创建...
管理Project
删除日志项目可能导致日志库的数据丢失，请确认Logstore，MetricStore、EventStore等数据无用或已做好数据备份。本文介绍如何在日志服务控制台上创建、删除日志项目Project等操作。基本概念 项目（Project）是日志服务中的资源管理单元，...
使用前须知
阿里云企业级分布式应用服务EDAS联合日志服务推出日志功能，支持将部署在容器服务Kubernetes集群中的应用的相关业务文件日志、容器标准输出日志投递到日志服务进行查询与分析。本文介绍EDAS日志功能相关的资产、费用等信息。资产详情 ...
API简介
日志库 Logstore 日志库（Logstore）是日志服务中日志数据的采集、存储和查询单元。每个Logstore隶属于一个Project，每个Project中可创建多个Logstore。分区 Shard 日志服务使用Shard控制Logstore或MetricStore的读写数据的能力，数据必定...
使用前须知
Project Logstore/Metricstore 说明 oss-log-阿里云账号ID-地域ID oss-log-store 开启访问明细日志采集时，日志服务自动创建该Logstore，用于区域化存储访问明细日志，即存储OSS Bucket访问日志、计量日志和批量删除日志。说明 oss-log-...
通过JDBC协议分析日志
日志服务支持您在数据库（例如MySQL）中使用JDBC协议连接日志服务，并通过标准的SQL92语法查询和分析日志。前提条件 已创建阿里云账号或RAM用户的AccessKey。具体操作，请参见 访问密钥。如果使用RAM用户的AccessKey，则RAM用户必须是当前...
常见问题及错误排查
而您没有按照 删除审计资源 步骤先停止全部云产品日志采集再删除日志审计相关Project，而是在云产品日志采集还开启的情况下直接删除审计服务相关的Project，导致系统无法判断新的采集配置。请提交 工单，联系日志服务团队。错误信息：当前...
文件存储 HDFS 版（Apsara File Storage for HDFS）...
ActionTrail中记录的 文件存储 HDFS 版（Apsara File Storage for HDFS）操作日志 文件存储 HDFS 版（Apsara File Storage for HDFS）的操作审计日志主要包含的是API事件，其中OpenAPI事件在ActionTrail中记录的eventType取值为 ApiCall。...
语法简介
加工逻辑：基本处理：数据加工会以流式方式读取源Logstore的数据，并将每一条日志以字典的数据结构传递给加工规则，然后根据加工规则中定义的日志函数顺序处理日志数据，并将最终的数据加工结果输出到目标Logstore。说明 在传递的过程中...
服务指标
自定义配置中可以使用自己设定的日志文件，要求日志文件中必须有：数据库、SQL、耗时、事务 ID。flowlimit 限流 次 框架配置日志。文件采集路径/home/admin/logs/{app}/guardian/guardian-limit-stat.log。msgpub 消息推送 次 框架配置日志...
开启日志采集功能
日志审计服务支持快速开启日志采集功能，本文介绍开启日志采集功能以及相关操作的步骤。前提条件 已注册阿里云账号。建议使用阿里云RAM用户，该RAM用户需具备RAM读权限（例如已被授权AliyunRAMReadOnlyAccess策略），且对日志服务有读写...
使用资源函数增量获取数据
资源信息与数据示例 日志服务资源 Project：client-project 源Logstore：client-log 数据样例如下所示：目标Logstore：client-information RDS资源 数据库：client-db 数据库表：client 数据样例如下所示：数据库用户名和密码：test/test...
告警属性参考
日志库 区域 否 对日志库和时序库进行查询统计时，取值为目标Project所在地域。说明 对资源数据进行查询统计时，无该参数。cn-hangzhou 项目 否 对日志库和时序库进行查询统计时，取值为源数据所在Project。说明 对资源数据进行查询统计时...
日志字段详情
本文介绍RDS相关日志的字段详情。审计日志 字段名称 说明_topic_日志主题，固定为rds_audit_log。instance_id RDS实例ID。check_rows 扫描的行数。db 数据库名。...db_version 数据库版本 content 日志内容 eventType 事件类型
欠费说明
本文介绍日志服务欠费原因、欠费停服说明和查看欠费等信息。...请注意，数据清理之前仍会继续计费，若您确认不再使用日志服务，请务必删除日志服务上的资源。查看欠费 登录 用户中心。在 首页 页面的 待办提醒 区域，查看欠费金额。
开启日志采集功能
CloudLens for Redis支持一键开启日志采集功能，用于采集云数据库Redis的慢日志、运行日志和审计日志。本文介绍开启日志采集功能的操作步骤及相关操作。前提条件 实例需满足下述条件：版本 为Redis社区版、Tair（Redis企业版）内存型、Tair...
使用前须知
阿里云关系型数据库RDS联合日志服务推出RDS SQL审计日志投递功能，将RDS SQL审计日志投递到日志服务中。日志服务提供实时查询、可视化分析、告警、投递、加工等功能。本文介绍RDS SQL审计日志相关的资产详情、费用说明、使用限制等信息。...
过滤VPC流日志公网流量
在专有网络VPC控制台上开通流日志功能后，流日志将被采集到日志服务中，您可以通过日志服务对流日志进行查询、分析和排查网络故障。本文介绍通过日志服务数据加工对流日志进行公网流量过滤的操作方法。前提条件 已开通VPC流日志功能。具体...
数据传输预检查
启动数据迁移项目时，为确保项目的顺利运行，OceanBase 数据传输功能会自动启动预检查环节，针对源端和目标端的数据库连通性、相关配置的正确性、增量日志参数等问题或设置进行检查。本文为您介绍数据迁移项目预检查环节的常见报错和解决...
导入MySQL数据
您可以将自建MySQL数据库或RDS MySQL数据库中的数据导入到日志服务，实现数据的查询分析、加工等操作。本文介绍导入MySQL数据的操作步骤。使用限制 目前仅支持：华东1（杭州）、华东2（上海）、华北1（青岛）、华北2（北京）、华北3...
使用前须知
阿里云日志服务和友盟联合推出实时日志订阅功能，将友盟数据开放平台U-DOP的各类明细数据一键实时同步至日志服务，实现日志实时查询、可视化分析、告警、投递、加工等操作。本文介绍友盟相关日志的资源说明、费用说明和使用限制。资源说明 ...
功能发布记录
主机控制台支持在归档日志页签下查看近180天内的访问日志 Linux操作系统增强版云虚拟主机支持在归档日志页签下查看近180天内的访问日志，您可以通过FTP客户端在站点的wwwlogs目录中下载相应的日志文件。下载或删除网站日志 如何在Linux操作...
创建流日志
本文介绍在VPC控制台上创建流日志的操作步骤及其相关的操作。前提条件 已创建资源实例。具体操作，请参见 创建弹性网卡、创建和管理专有网络 和 创建和管理交换机。已在资源实例所在地域创建日志服务Project和Logstore。具体操作，请参见 ...
- 产品推荐
- 这些文档可能帮助您