函数实例生命周期回调方法
函数实例生命周期回调程序与正常调用请求计费规则一致，但其执行日志只能在 函数日志、实例日志 或 高级日志 中查询，调用请求列表 不会展示回调程序日志。具体操作，请参见 查询回调函数相关日志。Initializer回调 Initializer示例 初始化...
基础信息
本文介绍使用 函数计算 编写代码相关的基础概念信息，包括请求处理程序、函数实例生命周期回调方法、日志记录和错误处理等。请求处理程序 在创建函数时，您需要指定请求处理程序。函数计算 的运行时会加载并调用您的请求处理程序处理请求。...
流图（Pro版本）
简介 流图（Flow Chart）也称为主题河流图（ThemeRiver），是围绕中心轴线进行布局的一种堆叠面积图。不同颜色的线条代表了不同的分类信息。此外，原数据集中的时间属性，默认映射到X轴上，是一个三维关系的展示。通过图形类型可将流图切换...
Logtail限制说明
日志上传策略 Logtail会将同一文件的日志自动聚合上传，聚合条件为日志超过4000条、日志总大小超过512 KB或者日志采集时间超过3秒。任一条件满足则触发上传行为 错误处理 限制项 限制说明 网络错误处理 在出现网络异常时会主动重试并自动...
Logtail
日志上传策略 Logtail会将同一文件的日志自动聚合上传，聚合条件为日志超过4000条、日志总大小超过512 KB或者日志采集时间超过3秒。任一条件满足则触发上传行为 错误处理 限制项 限制说明 网络错误处理 在出现网络异常时会主动重试并自动...
使用Terraform配置日志审计服务
本文介绍如何使用Terraform调用接口配置日志审计服务。前提条件 已安装和配置Terraform。具体操作，请参见 在Cloud Shell中使用Terraform、在本地安装和配置Terraform。背景信息 Terraform是一种开源工具，用于安全高效地预览、配置和管理...
告警监控规则常见问题
本文介绍日志服务告警监控规则的常见问题。使用RAM用户操作告警时，如何为RAM用户授权？当您使用RAM用户操作告警时，需要先授予RAM用户告警操作权限。具体操作，请参见 授予RAM用户告警操作权限。创建告警监控规则时，遇到Alert count ...
查询分析程序日志
分布的服务器多：大部分应用为无状态模式，运行在不同框架中，例如云服务器、容器服务等，对应的实例数从几个到数千个，需要有一种跨服务器的日志采集方案。运行环境复杂：程序运行在不同的环境中，产生的日志也保存在不同的环境中，例如...
分析Nginx访问日志
日志服务支持采集Nginx日志，并进行多维度分析。本文介绍分析网站访问情况、诊断及调优网站和重要场景告警的分析案例。前提条件 已采集Nginx访问日志，详情请参见 使用Nginx配置模式采集日志。在日志采集配置向导中，已根据日志字段自动...
通用数据结构
取值包括：consumergroup_log：消费组延迟日志 logtail_alarm：Logtail告警日志 operation_log：操作日志（此项服务收费）logtail_profile：Logtail采集日志 metering：计量日志 logtail_status：Logtail状态日志 scheduledsqlalert：定时...
日志服务采集数据常见的错误类型
本文介绍日志服务采集数据常见的错误类型及对应的解决方法。如果您遇到其他问题，请提交 工单 处理。错误类型 错误说明 解决方法 LOG_GROUP_WAIT_TOO_LONG_ALARM 数据包从产生到发送的过程中等待的时间较长。检查发送是否正常，或者是否...
安装Logtail（Windows系统）
网络类型 适用场景 阿里云内网 云服务器ECS实例和日志服务Project属于同一地域。公网 云服务器ECS实例和日志服务Project属于不同地域。服务器为其他云厂商服务器或自建IDC。全球加速 服务器分布在海外各地的自建机房或者来自海外云厂商，...
概述
工作机制 日志服务基于Telegraf开发的监控模板，支持将Telegraf采集的监控数据（MySQL监控数据、Redis监控数据、Elasticsearch监控数据等）通过InfluxDB协议写入Logtail，Logtail再将监控数据上传到日志服务MetricStore中。针对常用插件，...
配置
使用SDK与日志服务的服务器端进行交互时需要指定一些基本配置，本文介绍SDK的基本配置信息。目前，所有语言的SDK都定义了一个Client类作为入口类，这些基本配置信息需在该入口类构造时指定。具体包括如下几项：服务入口（Endpoint）：确认...
Logtail基本问题
Logtail是日志服务提供的一种便于日志接入的日志采集客户端。在您的机器上安装Logtail后，通过Logtail来监听指定的日志文件，并自动将新写入到文件的日志上传到您所指定的Logstore。Logtail是否支持采集静态不变的日志文件？Logtail基于...
实时日志投递
使用限制 对于同一个域名，同一种日志类型：每个采集区域只能选择一个SLS投递区域。比如采集区域为中国内地，example.com的边缘程序日志不能同时投递到华东1（杭州）和华北2（北京），最多关联一个投递任务。说明 但可以把example.com的...
解析Syslog标准格式数据
Syslog是一种行业标准的协议，可用来记录设备的日志。常见的应用场景是网络管理工具、安全管理系统、日志审计系统。本文档介绍如何使用SLS DSL中的GROK函数高效快捷地解析不同格式的Syslog日志。概况 在Unix类操作系统上，Syslog广泛应用于...
通用参考
输入数据中存在冲突 在原始日志中包含大小写不敏感重复的字段时，如某一条日志同时存在 Status、status 两个字段，SPL会随机选取其中一个字段作为输入，舍弃另一列；举例如下：SPL语句*|extend status_cast=cast(status as bigint)输入数据...
使用前须知
阿里云日志服务与云数据库RDS联合推出CloudLens for RDS。您可以通过CloudLens for RDS实时查看RDS SQL审计日志、错误日志和慢日志的采集状态，集中管理采集配置，并可基于采集到的日志进行后续的审计、分析、告警等操作。产品试用 SLS ...
查询和分析JSON日志的常见问题
本文介绍查询和分析JSON日志的常见问题。日志样例 本文中介绍的各个案例是基于如下JSON格式的订单处理系统日志。request 字段为订单请求信息，JSON格式。一个请求中包含一个用户的多个订单，订单中包含购买的商品和支付总价。response 字段...
函数总览
e_search 提供一种简化，类似Lucene语法的日志搜索方式。e_match、e_match_all、e_match_any 判断当前日志字段的值是否满足正则表达式。操作符函数 op_if 根据判断条件返回不同表达式的值。op_ifnull 返回第一个值不为None的表达式的值。op...
通过Syslog投递日志到SIEM
Syslog是一个常见的日志通道，几乎所有的SIEM（例如IBM Qradar,HP Arcsight）都支持通过Syslog渠道接收日志。本文主要介绍如何通过Syslog将日志服务中的日志投递到SIEM。背景信息 Syslog主要是基于RFC5424和RFC3164定义相关格式规范，RFC...
使用Aliyun Log Java Producer写入日志数据
本文介绍日志服务Aliyun Log Java Producer类库的使用方法。前提条件 已创建RAM用户并完成授权。具体操作，请参见 创建RAM用户并完成授权。已配置环境变量 ALIBABA_CLOUD_ACCESS_KEY_ID 和 ALIBABA_CLOUD_ACCESS_KEY_SECRET。具体操作，请...
接入Kubernetes Go程序性能数据
Pprof是Go语言提供的性能分析工具之一，用于分析和优化Go程序的性能。您可通过 日志服务 全栈可观测中的Kubernetes Golang拉取功能，为Kubernetes中所有基于Go语言运行的服务提供灵活且一站式的性能指标采集方案。前提条件 已创建全栈可...
解析Nginx日志
Nginx访问日志记录了用户访问的详细信息，解析Nginx访问日志对业务运维具有重要意义。本文介绍如何使用正则表达式函数或GROK函数解析Nginx访问日志。解析方案简介 日志服务支持通过数据加工的正则表达式和GROK解析Nginx日志，两种方案对比...
加工历史数据
日志服务支持加工历史数据，本文介绍加工历史数据的操作步骤及相关问题。前提条件 已采集数据到日志服务。具体操作，请参见 数据采集。如果您使用的是RAM用户，则需要先授予RAM用户数据加工操作权限。具体操作，请参见 授予RAM用户数据加工...
Flume消费
日志服务支持通过aliyun-log-flume插件与Flume进行对接，实现日志数据的写入和消费。背景信息 aliyun-log-flume是一个实现日志服务与Flume对接的插件，与Flume对接后，日志服务可以通过Flume与其它数据系统如HDFS、Kafka等对接。aliyun-log...
查询和分析时序数据
本文介绍如何在日志服务MetricStore中查询和分析时序数据、设置时序图图例名称等相关操作。前提条件 已采集到时序数据。操作步骤 说明 在日志服务MetricStore查询和分析页面，只支持使用PromQL查询语法。如果您要使用标准SQL语法或SQL+...
采集客户端数据的高可用方案
本文介绍日志服务从客户端采集数据的两个高可用方案，包括双写方案和数据加工复制+写入切换方案。背景 在单集群环境下，日志服务存储采用三副本机制来保证数据的可靠性，即每份数据都有3个副本，副本按照一定的分布式存储算法保存在集群的...
算法说明
相似度聚类算法 日志相似度聚类算法使用基于文本相似度（例如编辑距离，Jaccard相似度，Cosine相似度等）的LogParser对文本日志进行解析，根据日志的文本内容与结构对日志进行聚类，将相似的日志归为一种类别。日志相似度聚类算法以日志...
开通日志功能
该规则将按照行首是否带有日期进行切分，例如您的日志行首是2023-10-10，则该日志将被认为是一块日志的首行，首行和接下来连续不带日期的日志将被作为一条日志写入到日志服务。禁用：不启用日志分割规则，默认使用 进行日志切分。请求级别...
上下文查询
开发人员无需登录服务器，在大量日志中通过关键字检索日志，日志服务支持通过控制台查看指定日志在原始文件中的上下文信息。前提条件 已通过Logtail采集到日志。具体操作，请参见 通过Logtail采集日志。重要 如果您使用了Logtail插件处理...
快速入门
本文以采集分析ECS的Nginx访问日志为例，介绍开通日志服务、创建日志项目与Logstore、Logtail采集日志、查询与分析日志等步骤，帮助您快速上手使用日志服务。前提条件 已有可用的ECS。更多信息，请参见 云服务器ECS快速入门。ECS服务器持续...
管理Logstore
删除Logstore必须提前删除所有Logtail配置，删除日志是通过设置更短的保存时间，本文介绍Logstore选型、创建及升级Logstore、删除Logstore与日志等操作。基本概念 日志库（Logstore）是日志服务中日志数据的采集、存储和查询单元。每个...
创建RAM用户及授权
其中，访问控制提供如下两种日志服务的系统策略。AliyunLogFullAccess：管理日志服务的权限。AliyunLogReadOnlyAccess：只读访问日志服务的权限。当系统策略无法满足您的需求，您可以通过创建自定义策略实现精细化权限管理。具体操作，请...
采集Docker事件
重要 如果您要查询和分析日志，那么全文索引和字段索引必须至少启用一种。同时启用时，以字段索引为准。单击 查询日志，系统将跳转至Logstore查询分析页面。您需要等待1分钟左右，待索引生效后，才能在 原始日志 页签中，查看已采集到的...
采集Beats和Logstash数据源
重要 如果您要查询和分析日志，那么全文索引和字段索引必须至少启用一种。同时启用时，以字段索引为准。单击 查询日志，系统将跳转至Logstore查询分析页面。您需要等待1分钟左右，待索引生效后，才能在 原始日志 页签中，查看已采集到的...
Logtail采集详情
本文介绍Logtail的采集过程，包括监听日志、读取日志、处理日志、过滤日志、聚合日志和发送日志。采集过程 Logtail采集数据的过程如下：监听日志 读取日志 处理日志 过滤日志 聚合日志 发送日志 说明 更多关于Logtail采集原理的介绍，请...
采集Syslog
重要 如果您要查询和分析日志，那么全文索引和字段索引必须至少启用一种。同时启用时，以字段索引为准。单击 查询日志，系统将跳转至Logstore查询分析页面。您需要等待1分钟左右，待索引生效后，才能在 原始日志 页签中，查看已采集到的...
简介
本文介绍RAM的基本概念和相关操作，包括身份管理、资源访问控制、授权RAM用户访问日志服务、授权服务角色读日志和授权用户角色操作日志服务。基本概念 RAM（Resource Access Management）是阿里云提供的用户身份管理与资源访问控制服务。您...
- 产品推荐
- 这些文档可能帮助您