采集Open-Falcon数据
Open-Falcon是一款企业级、高可用、可扩展的开源监控解决方案，用于监控服务器的状态，例如磁盘空间、端口存活、网络流量等。本文介绍如何通过Logtail和Transfer将Open-Falcon数据上传至日志服务。前提条件 已创建Project和MetricStore。...
接入Kafka监控数据
您可以在服务器上查看/etc/ilogtail/telegraf/telegraf.log 文件中记录的日志进行判断，还可以将该日志采集到日志服务中进行查询。后续步骤 查询分析 配置完成后，Telegraf将采集到的监控数据通过Logtail上传到日志服务MetricStore中。您...
接入Ping监控数据
重要 如果您的服务器是与日志服务属于不同账号的ECS、其他云厂商的服务器和自建IDC时，您需要手动安装Linux Logtail 1.1.0及以上版本。具体操作，请参见 安装Logtail（Linux系统）。手动安装Logtail后，您必须在该服务器上手动配置用户标识...
接入JVM监控数据（新版）
重要 如果您的服务器是与 日志服务 属于不同账号的ECS、其他云厂商的服务器和自建IDC时，您需要手动在目标服务器中安装Linux Logtail 1.2.1及以上版本。具体操作，请参见 安装Logtail（Linux系统）。安装完成后，您还需要在该服务器上手动...
接入SkyWalking Trace数据
重要 如果您的服务器是与日志服务属于不同账号的ECS、其他云厂商的服务器和自建IDC时，您需要手动安装Logtail且要求为Linux Logtail 1.0.33及以上版本或Windows Logtail 1.0.33.0及以上版本。具体操作，请参见 安装Logtail（Linux系统）或 ...
采集脚本执行日志
本文介绍如何通过日志服务控制台创建Logtail采集配置来采集脚本执行日志。前提条件 已在服务器上安装Linux Logtail 1.7.1及以上版本。具体操作，请参见 安装Logtail（Linux系统）。功能说明 Logtail通过配置的用户，调用配置的脚本命令，...
日志采集支持纳秒精度时间戳
本文主要说明在使用Logtail进行日志采集时，如何有效地提取和处理具有纳秒精度的时间戳信息，确保对原始日志中的高精度时间数据进行准确捕获。应用场景 某些业务场景下对时间精度要求较高（例如不同子模块日志保序要求），依赖毫秒甚至更高...
接入Java应用或Tomcat的监控数据
您可以在服务器上查看/etc/ilogtail/telegraf/telegraf.log 文件中记录的日志进行判断，还可以将该日志采集到日志服务中进行查询。后续步骤 查询分析 配置完成后，Telegraf将采集到的监控数据通过Logtail上传到日志服务MetricStore中。您...
采集Beats和Logstash数据源
本文介绍如何通过日志服务控制台创建Logtail采集配置来采集Beats和Logstash数据源。前提条件 已在服务器上安装Linux Logtail 0.16.9及以上版本或Windows Logtail 1.0.0.8及以上版本。具体操作，请参见 安装Logtail（Linux系统）或 安装...
采集Systemd Journal日志
Logtail支持从原始的二进制文件中采集Linux系统的Systemd Journal日志。本文介绍如何通过日志服务控制台创建Logtail采集配置采集Systemd Journal日志。前提条件 已在服务器上安装Linux Logtail 0.16.18及以上版本。具体操作，请参见 安装...
采集SQL Server查询结果
本文介绍如何通过日志服务控制台创建Logtail采集配置来采集SQL Server查询结果。前提条件 已在服务器上安装Linux Logtail 1.2.1及以上版本。更多信息，请参见 安装Logtail（Linux系统）。重要 请确保用于安装Logtail的服务器可连接目标数据...
接入主机监控数据
重要 如果您的服务器是与 日志服务 属于不同账号的ECS、其他云厂商的服务器和自建IDC时，您需要手动安装Linux Logtail 0.16.40及以上版本。具体操作，请参见 安装Logtail（Linux系统）。手动安装Logtail后，您必须在该服务器上手动配置用户...
采集及分析Nginx监控日志
您可以通过Logtail插件采集Nginx监控日志，并进行查询分析、告警等操作，全方位监控您的Nginx集群。前提条件 已在服务器上安装Logtail。具体操作，请参见 安装Logtail（Linux系统）或 安装Logtail（Windows系统）。说明 目前支持Linux ...
集成WAF日志到Syslog系统
本文介绍了如何使用Python Program将Web应用防火墙（WAF）的日志集成到Syslog日志系统中，以实现合规、审计等要求，也方便您在安全操作中心统一管理所有相关日志。背景信息 该方案的整体集成架构如下图所示：阿里云日志服务为日志数据提供...
采集PostgreSQL查询结果
本文介绍如何通过日志服务控制台创建Logtail采集配置来采集PostgreSQL查询结果。前提条件 已在服务器上安装Linux Logtail 1.2.1及以上版本。更多信息，请参见 安装Logtail（Linux系统）。重要 请确保用于安装Logtail的服务器可连接目标数据...
采集HTTP数据
Logtail会根据您的采集配置定期请求指定的URL，将请求返回的Body内容作为数据源上传到日志服务。本文介绍如何通过日志服务控制台创建Logtail采集配置采集HTTP数据。前提条件 已在服务器上安装Logtail。更多信息，请参见 安装Logtail（Linux...
如何使用Logtail自动诊断工具
当您使用Logtail采集日志发生异常时，可通过Logtail自助诊断工具查看Logtail客户端是否存在异常，并根据工具提示快速定位并解决问题。重要 Logtail自动诊断工具仅支持Linux系统的服务器。Logtail只采集增量日志。如果下发Logtail采集配置后...
Nginx模式解析
Nginx日志简介 Nginx服务器会根据log_format和access_log配置输出对应的Nginx访问日志，log_format和access_log的默认值如下所示。log_format main '$remote_addr-$remote_user[$time_local]"$request"' '$request_time$request_length ' '...
采集MySQL查询结果
本文介绍如何通过日志服务控制台创建Logtail采集配置来采集MySQL查询结果。前提条件 已在服务器上安装Linux Logtail 0.16.0及以上版本或Windows Logtail 1.0.0.8及以上版本。具体操作，请参见 安装Logtail（Linux系统）或 安装Logtail...
基本概念
日志接收时间 日志到达日志服务的服务器被接收时的时间，默认不保存在日志中，但是如果Logstore开启了记录外网IP地址，则该时间会保留在日志标签字段的_receive_time_中。数据加工中时间的完整字段名是_tag_:_receive_time_。数据类型为...
自定义函数开发指南
cursorTime 本次函数调用包括的数据中，最后一条日志到达日志服务的服务器端的unix_timestamp。source 该字段由日志服务生成，日志服务根据ETL Job定义的任务间隔定时触发函数执行，source字段是函数Event中的重要组成部分，定义了本次函数...
会话操作记录投递
您可以使用云助手的会话操作记录投递功能，将会话管理（Session Manager）操作记录投递到您的对象存储OSS或日志服务SLS中，进行持久化存储。本文介绍如何配置会话操作记录投递和查看已投递的会话操作记录。背景信息 如果您需要对会话管理...
GetLogs-查询日志库日志
日志服务按日志时间戳把日志分为如下两类：实时数据：日志中时间点为服务器当前时间点\(-180 秒，900 秒]。例如，日志时间为 UTC 2014-09-25 12:03:00，服务器收到时为 UTC 2014-09-25 12:05:00，则该日志被作为实时数据处理，一般出现在...
动作列表
MachineGroup log:CreateMachineGroup 创建机器组，用以指定需要收集日志的服务器。log:UpdateMachineGroup 更新机器组信息。log:DeleteMachineGroup 删除机器组。log:GetMachineGroup 查看具体的机器组信息。log:ListMachineGroup 查看...
采集主机监控数据
日志服务Logtail支持采集主机CPU、内存、负载、磁盘、网络等监控数据。本文介绍通过Logtail采集主机监控数据的操作步骤。前提条件 已创建Project和MetricStore。具体操作，请参见 创建项目Project 和 创建MetricStore。使用限制 不支持...
消费-计量计费日志
计量日志散落在很多服务器中怎么办？使用Logtail Agent实时采集。使用自定义用户标识定义一套动态机器组弹性伸缩。查询明细需求如何满足？对LogHub中的数据创建索引，支持实时查询与统计分析。Inflow>300000 and Method=Post*and Status in...
GetLogs
日志服务按日志时间戳把日志分为如下两类：实时数据：日志中时间点为服务器当前时间点(-180秒，900秒]。例如，日志时间为UTC 2014-09-25 12:03:00，服务器收到时为UTC 2014-09-25 12:05:00，则该日志被作为实时数据处理，一般出现在正常...
采集-通过WebTracking采集日志
本文档为您介绍如何通过WebTracking采集日志数据到日志服务中，并对采集到的日志数据进行查询和分析。背景信息 当发送重要邮件时为了确认对方已读，都会在邮件中设置 读取回执 标签，可以在对方已读时收到提醒信息。读取回执这种模式用途很...
通过Logtail跨阿里云账号采集容器日志
现公司业务调整，计划将两个应用的日志集中采集到阿里云账号A（12*456）下的日志服务中，即将两个应用的日志分别采集到同一个日志服务Project下的不同Logstore中。因此您需要新增一个Logtail采集配置、机器组和Logstore，用于采集和存储...
消费-通过消费组实现高可靠消费
如今计算机诞生使得日志产生与消费无处不在：服务器、路由器、传感器、GPS、订单、及各种设备通过不同角度描述着我们生活的世界。从船长日志中我们可以发现，日志除了带一个记录的时间戳外，可以包含几乎任意的内容，例如：一段记录文字、...
Kafka消费
阿里云日志服务SLS兼容Kafka消费组协议，您可以使用原生Kafka客户端对日志服务SLS进行读操作。
管理OSS投递任务（新版）
图表名称 说明 读成功条数 从源Logstore中读取成功的日志条数。读失败条数 从源Logstore中读取失败的日志条数。读公网流量（MB）目前不支持公网，因此数据为0。写成功条数 投递到目标OSS Bucket成功的日志条数。写失败条数 投递到目标OSS ...
管理MaxCompute投递任务（新版）
图表名称 说明 读成功条数 从源Logstore中读取成功的日志条数。读失败条数 从源Logstore中读取失败的日志条数。读公网流量（MB）通过公网读取数据的流量。写成功条数 投递到MaxCompute成功的日志条数。写失败条数 投递到MaxCompute失败的...
日志管理
如果用户希望收集阿里云ECS服务器的数据，日志服务提供的Logtail日志收集服务同样非常方便地收集到日志数据。删除日志库，日志数据是否丢失？删除日志库会导致日志数据丢失，请谨慎操作。日志服务日志保存多长时间？可否修改这个保存时限？...
数据投递仪表盘
仪表盘信息包括总览指标（读Logstore流量总计、投递成功行数总计和投递失败行数总计）、每秒投递行数、Shard消费延迟、Shard消费速率、读Logstore与写目标速率和日志详情。总览指标 总览指标信息如下所示：读Logstore流量总计：从源...
数据模型
例如：您有一个名为big-game的游戏应用，服务器上有三种日志：操作日志（operation_log）、应用程序日志（application_log）以及访问日志（access_log），您可以首先创建名为big-game的项目，然后在该项目下面为这三种日志创建三个日志库，...
CLB使用访问日志快速定位异常后端服务器
在使用CLB的七层负载均衡（HTTP/HTTPS监听）期间，如果您遇到业务故障或异常，怀疑是后端服务器问题，您可通过CLB访问日志功能快速定位异常后端服务器。CLB结合阿里云日志服务提供的访问日志功能，可帮助您大幅提升故障定位与处理的效率。...
数据采集概述
日志服务支持采集服务器与应用、开源软件、物联网、移动端、标准协议、阿里云产品等多种来源的数据。本文列举了日志服务所支持的数据来源。数据来源 日志服务支持的数据来源如下：类别 来源 接入方式 更多 应用 程序输出 Logtail 查询分析...
安装Logtail（Windows系统）
日志服务Project与服务器同地域不同账号 配置流程如下图：完成Logtail安装后，您需配置用户标识，配置用户自定义标识，创建机器组，并选择数据源配置Logtail采集日志。具体操作，请参见 配置用户标识、创建用户自定义标识机器组 及 采集...
访问ECS实例异常时的问题排查和指引
所有服务器访问目标服务器均存在异常 如果所有服务器访问目标服务器均存在异常，则推断是目标服务器归属安全组或服务器内部自身存在异常所致，需要做进一步排查分析查看服务器内部访问是否正常，即通过 使用管理终端连接Linux实例 登录...
- 产品推荐
- 这些文档可能帮助您