最佳实践
时序存储 使用Prometheus采集Kubernetes监控数据 查询与分析 查询和分析网站日志 查询和分析JSON日志 Data Explorer案例 关联Logstore与MySQL数据库进行查询分析 关联Logstore与OSS外表进行查询和分析 查询MNS日志 采集及分析Nginx监控日志...
分析网站日志
本文介绍如何在日志服务控制台上分析网站日志，并通过合适的统计图表可视化展示分析结果。前提条件 已采集网站日志。具体操作，请参见 数据采集。已创建索引。具体操作，请参见 创建索引。背景信息 网站日志是网站运维的重要信息，包含PV、...
查询和分析JSON日志
本文以查询和分析JSON类型的网站日志为例，为您介绍查询和分析JSON日志的步骤，并提供SQL语句示例。前提条件 已采集JSON日志。具体操作，请参见 使用极简模式采集日志。步骤一：创建索引 登录 日志服务控制台。在Project列表区域，单击目标...
日志字段详情
目前友盟实时日志订阅功能支持U-App（App日志）、U-MiniProgram（小程序日志）和U-Web（网站日志）三类数据，本文介绍这三类日志的字段详情。U-App日志 U-App日志记录用户启动App、使用App功能和App发生异常的相关数据。字段 说明 app_key ...
查询和分析日志
创建索引后，您可以在查询和分析页面对采集到的日志进行实时查询和分析。前提条件 已 创建索引。...相关文档 查询与分析常见问题 时间字段转换示例 查询和分析网站日志 查询和分析JSON日志 分析Nginx访问日志 分析负载均衡7层访问日志
快速设置日志告警
网站日志告警监控规则 检查频率 根据您配置的频率对查询和分析结果进行检查。固定间隔：按照固定间隔检查查询和分析结果。Cron：通过Cron表达式指定时间间隔，按照该指定的时间间隔检查查询和分析结果。Cron表达式的最小精度为分钟，24小时...
查询和分析网站日志
本文以查询和分析网站日志为例，帮助您快速上手查询和分析操作。前提条件 已采集到网站访问日志。具体操作，请参见 使用完整正则模式采集日志。步骤一：创建索引 登录 日志服务控制台。在Project列表区域，单击目标Project。在 日志存储>...
查询语法
日志服务提供一套查询语法，用于指定日志查询时的过滤规则，从而筛选日志中满足条件的记录，筛选结果可以用于分析语句，进行更复杂的分析处理。查询语法 重要 日志服务查询语句和分析语句（SELECT语句）以竖线（|）分割。基础语法：查询...
提取字符串动态键值对
r"\b(\w+)eat([^\|]+)",{r"\1":r"\2 by \1"})加工结果 处理后日志为：content:rats eat rice|chicks eat bugs|kittens eat fish|kittens:fish by kittens chicks:bugs by chicks rats:rice by rats 客户案例 例如某网站日志中有一个URL数据...
什么是Logtail
Logtail是日志服务提供的日志采集Agent，用于采集阿里云ECS、自建IDC、其他云厂商等服务器上的日志。本文介绍Logtail的功能、优势、使用限制及配置流程等信息。Logtail多年来一直承载着阿里巴巴集团重要服务的数据采集。每天采集数百万...
管理Project
如果您要采集ECS日志，建议选择与ECS相同的地域，实现通过阿里云内网采集日志，加快日志采集速度。存储冗余类型 Project的数据容灾类型，不支持修改。本地冗余存储 采用单可用区（AZ）内的数据冗余存储机制，将用户的数据冗余存储在同一个...
使用前须知
阿里云DDoS高防（新BGP）、DDoS高防（国际）联合日志服务推出全量日志分析功能，提供网站访问日志、CC攻击日志的实时采集、查询、分析、加工、消费等一站式服务，帮助您排查网站访问异常、追踪CC攻击者来源、分析网站运营情况等。...
使用前须知
Web应用防火墙（WAF）的日志服务功能帮助您采集并存储WAF防护对象（云产品实例、域名）的Web访问及攻击防护日志，并基于阿里云日志服务，提供查询分析、统计图表、报警服务、下游计算对接与投递等能力，帮助您专注于分析，远离琐碎的查询和...
使用数据实验室
日志服务数据实验室为您提供各种场景的模拟日志数据及各种公共数据集数据，便于您熟悉日志服务的查询分析、查看报表等各种操作。本文介绍如何使用阿里云数据实验室。前提条件 已开通日志服务。首次登录 日志服务控制台 时，根据页面提示...
常见问题
存储与分析：存储与分析基础设施日志、应用日志、网站访问日志、容器日志、云产品日志、时序数据和链路数据等。智能运维：提供智能聚类、异常检测和异常预测能力。告警监控：监控应用业务、用户体验等数据，具备可视化分析与告警能力。问题...
使用前须知
阿里云云防火墙联合 日志服务 推出日志分析功能，提供互联网流量日志的实时采集、查询、分析、加工、消费等一站式服务，满足等保合规要求。本文介绍云防火墙日志分析功能相关的资产详情、费用说明及使用限制等。资产详情 专属Project和...
Data Explorer案例
日志服务提供Data Explorer功能，帮助您简单、快速地构建查询和分析语句。本文介绍通过Data Explorer构建查询和分析语句的案例。查询示例 示例1 查询包含GET、PUT、POST中任意值的日志。Data Explorer配置 查询语句(GET or PUT or POST)...
快速使用全量日志分析
将网站接入DDoS高防后，您可以通过全量日志分析采集和存储网站的日志数据，并对采集到的日志数据进行查询与分析。本文介绍如何快速使用全量日志分析功能。使用前须知 使用前请您了解什么是全量日志分析、如何计算所需的日志存储容量、日志...
日志服务采集数据常见的错误类型
PROCESS_TOO_SLOW_ALARM Logtail日志解析速度过慢。单击错误查看详细报错，根据其中的日志数量、缓冲区大小、解析时间来确定是否正常。如果不正常，检查Logtail所在节点是否有其他进程占用了过多的CPU资源或是存在效率较低的正则表达式等不...
通过Data Explorer构建查询和分析语句
日志服务提供Data Explorer功能，帮助您简单、快速地构建查询和分析语句，无需编写SQL语句。前提条件 已创建索引。具体操作，请参见 创建索引。功能入口 登录 日志服务控制台。在Project列表区域，单击目标Project。在 日志存储>日志库 页...
日志（Log）
日志服务采用半结构化的数据模式定义一条日志，包含日志主题、日志时间、日志内容、日志来源和日志标签五个数据域。日志服务对各个数据域的格式要求不同，详细说明如下表所示。数据域 说明 格式 日志主题 日志服务保留字段（_topic_）用于...
快速使用WAF日志服务
Web应用防火墙（Web Application Firewall，简称WAF）日志服务通过阿里云日志服务实时地采集已接入WAF防护的网站业务的全量日志，并对采集到的日志数据进行查询与分析，以丰富的仪表盘形式展示查询结果，满足等保合规要求和网站业务的防护...
使用前须知
阿里云Web应用防火墙（WAF）联合日志服务推出WAF日志服务功能，提供网站域名访问日志、攻击防护日志的实时采集、查询、分析、加工、消费等一站式服务，满足等保合规要求和您的网站业务防护和运营需求。本文介绍WAF日志服务功能相关的资产...
管理日志存储空间
背景信息 如果您因网站业务调整，导致所需要的日志存储容量发生变化，您可以通过 升级 增加日志存储容量、通过 降配 减小日志存储容量。例如，如果您为新的网站开启了日志采集，则日志存储容量需求会增大；如果您减少了日志存储时长，则...
计费案例
按量付费方式 按使用功能计费模式案例 案例1（免费使用日志服务）假设您有1台服务器，每天产生10 MB日志，您希望通过日志服务（Shard数量为1个，保存时间为1天）分析每天的日志，并通过Java程序实时订阅。假设本案例中的上传压缩率为20%。...
日志管理概述
Web应用防火墙（WAF）日志服务帮助您采集并存储WAF防护对象（云产品实例、域名）的Web访问及攻击防护日志，并基于阿里云日志服务，输出查询分析、统计图表、报警服务、下游计算对接与投递等能力，帮助您专注于分析，远离琐碎的查询和整理...
简介
日志服务支持将日志投递到SIEM，以确保阿里云上的所有法规、审计与其他相关日志能够导入到您的安全运维中心（SOC）中。名词解释 SIEM：安全信息与事件管理系统（Security Information and Event Management），如Splunk，IBM QRadar等。...
按使用功能计费模式计费项
日志服务的所有计费项都是单独计费的，例如您存储日志会产生日志存储费用，您采集日志会产生写流量费用等。本文介绍日志服务按使用功能计费模式计费项的组成及付费方式。说明 日志服务按使用功能计费模式支持采集日志和时序数据，时序数据...
快速入门
本文以采集分析ECS的Nginx访问日志为例，介绍开通日志服务、创建日志项目与Logstore、Logtail采集日志、查询与分析日志等步骤，帮助您快速上手使用日志服务。前提条件 已有可用的ECS。更多信息，请参见 云服务器ECS快速入门。ECS服务器持续...
分析Apache日志
日志服务支持采集Apache日志，并进行多维度分析。本文通过PV、UV、访问地域分布、错误请求、客户端类型等维度分析Apache日志，以评估网站访问情况。前提条件 已采集Apache日志，详情请参见 使用Apache模式采集日志。在数据接入向导中，已...
分析IIS日志
日志服务支持采集IIS日志，并进行多维度分析。本文通过PV、UV、访问地域分布、错误请求、请求方法等维度分析IIS日志，以评估网站访问情况。前提条件 已采集IIS日志。具体操作，请参见 使用IIS配置模式采集日志。说明 在采集过程中，日志...
多目标Logstore数据分发
背景信息 日志服务数据加工功能支持将加工结果分发到多个目标Logstore中。您可以在保存数据加工结果时，设置不同账号的AccessKey信息，将加工结果分发到不同账号的Logstore中；您也可以使用e_output函数、e_coutput函数动态获取目标Project...
分析Nginx访问日志
日志服务支持采集Nginx日志，并进行多维度分析。本文介绍分析网站访问情况、诊断及调优网站和重要场景告警的分析案例。前提条件 已采集Nginx访问日志，详情请参见 使用Nginx配置模式采集日志。在日志采集配置向导中，已根据日志字段自动...
时序模式
time_字段是日志服务中每条日志默认自带的属性，表示写入日志到日志服务时，指定的日志时间。time_字段为Unix时间戳格式，单位为秒。您可以通过_time_字段构建时序模式的统计图表，避免复杂的时间函数操作。非时序模式和时序模式的主要区别...
采集-IoT/嵌入式日志
IoT（Internet of Things）正在高速增长，越来越多设备开始逐步走进日常生活，例如智能路由器、各种电视棒、天猫精灵、扫地机器人等，让我们体验到智能领域的便利。传统软件领域的嵌入式开发模式在IoT设备领域的应用遇到了很多挑战，IoT...
监控日志服务
日志服务提供服务日志功能，用于记录操作日志、消费组延迟日志、Logtail告警日志、Logtail采集日志和Logtail状态日志，帮助您实时掌握日志服务的使用状况，提高运维效率。前提条件 已开通服务日志。更多信息，请参见 开通服务日志。背景...
对象存储
本文介绍对象存储OSS相关日志的字段详情。访问日志 记录对应Bucket的所有访问日志，实时采集。日志字段 说明_topic_日志主题，固定为oss_access_log。owner_id 阿里云账号ID region Bucket所在地域 access_id 访问者的阿里云AccessKey ID ...
上下文查询
开发人员无需登录服务器，在大量日志中通过关键字检索日志，日志服务支持通过控制台查看指定日志在原始文件中的上下文信息。前提条件 已通过Logtail采集到日志。具体操作，请参见 通过Logtail采集日志。重要 如果您使用了Logtail插件处理...
分页显示查询分析结果
查询分析日志时，查询分析结果内容过多会影响显示速度和查询体验。日志服务提供分页功能，可控制每次返回的日志数量。本文介绍查询结果和分析结果的分页方法。分页方式 日志服务查询和分析功能支持在查询分析语句中同时实现关键字查询和...
日志字段详情
本文介绍OSS日志类型及相关的日志字段详情。OSS日志类型 日志类型 说明 访问日志 记录相关OSS Bucket的所有访问日志，实时采集。批量删除日志 记录批量删除日志时具体的删除信息，实时采集。说明 当您调用DeleteObjects接口时，访问日志中...
- 产品推荐
- 这些文档可能帮助您