Logtail发布历史
本文介绍日志服务Logtail的发布历史。1.8.7 发布时间：2024.03.05 新功能 Logtail-ds组件在ACK场景下支持资源组配置。拓展插件新增 processor_rate_limit 插件。修复 修复Logtail使用历史数据采集之后进程无法优雅退出的问题。1.8.6 发布...
使用前须知
SREWorks数智应用提供一站式的智能运维场景服务，包括机器画像、日志诊断和智能QA生成器，帮助企业将日志服务中的海量运维数据转化成有价值的数据资产。目前主要开放机器画像场景服务，本文基于机器画像场景服务介绍产品背景、功能说明、...
修改全局默认日历
日志服务提供全局默认日历，用于解决不同时区、不同国家的工作日和节假日同步问题。支持修改默认时区、国家的工作日和节假日。本文介绍修改全局默认日历的操作。操作步骤 登录 日志服务控制台。进入全局默认日历管理页面。在Project列表...
告警全局性操作常见问题
日志服务以日志形式记录告警的整个生命周期，并存储到专属的Logstore（免费使用）中。您可以在该Logstore中，自定义分析告警相关的日志。具体操作，请参见 自定义分析告警日志。告警相关日志只保留30天，如何查看更长时间的日志？告警相关...
控制台首页
接入数据 日志服务支持接入的数据源类型如下：云产品 自定义代码 自建开源或商业软件 数据导入 监控数据 模拟接入 开放告警 更多信息，请参见 数据采集概述。Project列表 Project列表 区域展示已创建的Project。您可以查看、创建、删除和...
创建流日志
您可以在智能接入网关中创建流日志实例，将智能接入网关的传入和传出流量信息投递到日志服务中。本文介绍创建流日志实例的操作步骤及相关操作。前提条件 已购买智能接入网关SAG-1000设备且其软件版本为1.7.0及以上。具体操作，请参见 购买...
功能特性
本文介绍日志服务主要的功能。数据采集 日志服务提供50多种数据接入方案。具体说明如下：支持采集服务器与应用相关的日志、时序数据和链路数据。支持采集物联网设备日志。支持采集阿里云产品日志。支持采集移动端数据。支持采集Logstash、...
Cloud Shell概述
阿里云云命令行Cloud Shell已经集成日志服务CLI，您无需部署配置，可以直接通过Cloud Shell管理日志服务资源和下载日志服务数据。什么是Cloud Shell？Cloud Shell允许您通过命令行管理阿里云资源。通过浏览器启动Cloud Shell时，Cloud ...
通过Remote Write协议接入Prometheus监控数据
Prometheus是一款面向云原生的监控软件，支持众多软件、系统的数据采集与监控。本文介绍如何将Prometheus监控数据采集到日志服务，从而使用日志服务对数据进行分析与监控。前提条件 已创建MetricStore。具体操作，请参见 创建MetricStore。...
日志字段详情
本文介绍云安全中心支持的16种日志的字段详情。网络日志 DNS解析日志 字段名 说明_topic_日志主题，固定为sas-log-dns。additional additional字段，竖线（|）分隔。additional_num additional字段数量。answer DNS回答信息，竖线（|）分隔...
开通日志功能
本文介绍如何在移动研发平台EMAS控制台上开通日志功能，将日志推送到日志服务中。前提条件 已开通日志服务。已创建应用。操作步骤 重要 如果您使用RAM用户开通日志功能，则需先为RAM用户授权。具体操作，请参见 RAM用户授权。登录 移动研发...
对接JDBC
本文以实际案例演示如何使用JDBC连接日志服务、读取日志数据，及使用MySQL协议和SQL语法来计算日志。前提条件 已创建RAM用户并完成授权。具体操作，请参见 创建RAM用户并完成授权。已配置环境变量 ALIBABA_CLOUD_ACCESS_KEY_ID 和 ALIBABA_...
投递日志到MaxCompute（旧版）
您可以在日志服务控制台实时查询所采集到的日志，并将日志投递到MaxCompute，进行进一步的BI分析及数据挖掘。本文介绍通过日志服务投递日志到MaxCompute的操作步骤。前提条件 已开通MaxCompute，并创建表。更多信息，请参见 创建表。使用...
术语表
本文介绍日志服务所涉及的术语。基础资源 术语 说明 项目（Project）项目是日志服务的资源管理单元，是进行多用户隔离与访问控制的主要边界。更多信息，请参见 项目（Project）。日志库（Logstore）日志库是日志服务中日志数据的采集、存储...
导入OSS数据
您可以将OSS Bucket中的日志文件，通过数据导入方式导入到日志服务，实现日志的查询分析、加工等操作。目前日志服务只支持导入5 GB以内的OSS文件，压缩文件大小按照压缩后的大小计算。前提条件 已上传日志文件到OSS Bucket中。具体操作，请...
按写入数据量计费
按写入数据量计费，写入数据后享受30天免费存储权益，除写入数据费用外，仅在数据存储超过30天及外网读取时产生额外费用。特性 说明 计费说明 按量付费，即后付费，是指您购买的资源按照实际用量结算，在每个结算周期生成账单并从账户中...
费用优化
费用和两方面因素相关：数据量：用户的数据量是...Logtail 消耗资源是开源软件（Logstash，FluentD）的1/4，减少CPU消耗。API写入用户尽量使用64KB~1MB大包写入，减少请求次数。索引关键字段，例如UserID，Action等，对无用字段不配置索引。
安装PHP SDK
前提条件 已开通日志服务。更多信息，请参见 开通日志服务。已创建并获取AccessKey。更多信息，请参见 访问密钥。阿里云账号AccessKey拥有所有API的访问权限，风险很高。强烈建议您创建并使用RAM用户进行API访问或日常运维。RAM用户需具备...
预览调试概述
快速预览 快速预览支持免费、快速检验数据加工脚本语法正确性，验证加工语句的输出结果是否符合预期，并且支持自定义测试数据或者从Logstore中选取特定日志进行测试。具体操作，请参见 快速预览。快速预览时，日志服务不能真正连接到资源...
设置动态接收人
日志服务提供动态接收人功能，您可以通过Webhook服务设置告警通知的动态接收人。使用场景 一般情况下，您在日志服务告警中创建用户或用户组后，可以在行动策略中选择对应的用户或用户组作为告警通知的接收人，但是此方式并不能满足特殊场景...
可观测告警运维系统对比
日志服务新版告警是一站式的告警监控、降噪、事务管理、通知分派的智能运维平台。本文介绍日志服务新版告警与各个开源告警系统的对比信息。日志服务告警 日志服务新版告警支持监控日志、时序等各类数据，支持接收三方告警，支持对告警进行...
接入Trace数据概述
日志服务支持OpenTelemetry Trace数据的原生接入，还支持通过其他Trace系统接入Trace数据。本文介绍日志服务所支持的Trace数据接入方案。接入方案总览 日志服务支持如下接入方案。使用OpenTelemetry、Jaeger（目前仅支持https、grpc方式）...
查看全局数据
日志量整体趋势、产品日志量趋势 过去30天的日志量趋势 当天的统计有一小时延迟 OSS全局数据 仪表盘 描述 总日志量、小时日志量、天日志量 OSS日志全局统计 访问日志总日志量、小时日志量、天日志量 访问日志统计 计量日志总日志量、小时...
算法说明
文本分析中的算法采用LogParser和异常检测技术，提供日志分析报表帮助您了解日志的全局信息和可能存在的异常情况，包括：通过日志报表快速定位可能出现异常的日志类别（例如新出现的日志类别，异常分数Top5的日志类别等），缩小人工排查的...
过滤日志
您在使用Logtail采集日志时，您可以使用processor_filter_regex插件或processor_filter_key_regex插件过滤日志。本文介绍各个插件的参数说明和配置示例。重要 表单配置方式：采集文本日志和容器标准输出时可用。JSON配置方式：采集文本日志...
日志索引表
云产品分类 CloudLens应用 日志类型 存储 CloudLens for SLS 重要日志（消费组延迟日志、Logtail告警日志、Logtail采集日志、Logtail状态日志）详细日志 任务运行日志（定时SQL任务运行日志、数据导入、投递等任务的运行日志）错误日志 ...
日志设置与日志容量管理
开通日志服务后，您可以根据业务防护及分析需要，设置日志字段和存储类型，开启或关闭防护对象日志采集功能，修改日志存储时长，更有效地利用日志容量。您也可以实时查看日志容量，及时升级容量，避免日志数据无法写入专属日志库。本文介绍...
日志（Log）
日志服务采用半结构化的数据模式定义一条日志，包含日志主题、日志时间、日志内容、日志来源和日志标签五个数据域。日志服务对各个数据域的格式要求不同，详细说明如下表所示。数据域 说明 格式 日志主题 日志服务保留字段（_topic_）用于...
通过消费组读取文本日志进行模板匹配
日志模板匹配通过在线匹配日志和模板，监控日志模板的统计信息，例如数量变化。本文介绍通过读取日志文本进行模板匹配的操作步骤。前提条件 已采集日志到源Logstore或Metricstore。具体操作，请参见 数据采集、接入时序数据。重要 本文中所...
Logtail采集详情
本文介绍Logtail的采集过程，包括监听日志、读取日志、处理日志、过滤日志、聚合日志和发送日志。采集过程 Logtail采集数据的过程如下：监听日志 读取日志 处理日志 过滤日志 聚合日志 发送日志 说明 更多关于Logtail采集原理的介绍，请...
开通日志分析功能
云防火墙联合日志服务推出了日志分析功能，可以实现对防护资产流量日志的实时采集、查询、分析、加工和消费等一站式服务，帮助您有效监控和保护网络资产安全，满足等保合规要求。本文介绍如何在云防火墙控制台上开通日志分析功能，从而将...
使用前须知
日志服务和块存储EBS联合推出 CloudLens for EBS 功能，帮助您监控和管理块存储的云盘、快照和云盘异步复制等资源。重要 目前仅限白名单用户使用 CloudLens for EBS。如果您需要使用 CloudLens for EBS，请提交 工单 申请。产品试用 SLS ...
常见问题
如何采集K8s集群的容器日志 SLB访问日志采集不到 日志采集Agent对比 Windows系统的ECS安装Logtail服务日志提示异常信息 如何配置日志服务的时间转换格式 数据存储常见问题 日志服务如何存储、管理用户的日志？删除日志库，日志数据是否丢失...
自助分析阿里云账单
日志服务联合费用中心推出自助分析功能，一键开通后自动导入账单，并提供可视化的账单分析报表，帮助您提高账单分析的效率。前提条件 已开通日志服务。背景信息 阿里云资源具备随时可用、规模弹性、规格丰富的特征，保证您在任意时刻都有...
数据模型
例如：您有一个名为big-game的游戏应用，服务器上有三种日志：操作日志（operation_log）、应用程序日志（application_log）以及访问日志（access_log），您可以首先创建名为big-game的项目，然后在该项目下面为这三种日志创建三个日志库，...
日志审计合规
云安全中心日志审计配置检测 RDS日志审计配置检测 日志审计状态检测 PolarDB（DRDS）日志审计配置检测 K8s日志审计配置检测 ActionTrail日志审计配置检测 OSS（对象存储）日志审计配置检测 应用防火墙（WAF）日志审计配置检测 堡垒机日志...
日志管理
日志服务如何存储、管理用户的日志？日志库（Logstore）是日志服务中的日志存储和查询的基本单元，通常用于存储一类日志数据。目前，支持在控制台或者通过API完成对日志库的增删改查操作。日志库创建完成后，用户通过API或SDK向指定日志库...
创建流日志
本文介绍在VPC控制台上创建流日志的操作步骤及其相关的操作。前提条件 已创建资源实例。具体操作，请参见 创建弹性网卡、创建和管理专有网络 和 创建和管理交换机。已在资源实例所在地域创建日志服务Project和Logstore。具体操作，请参见 ...
开启日志投递
E-Mapreduce（简称EMR）的开源组件在运行过程中会产生大量日志。本文介绍如何在EMR控制台中开启日志投递功能，将EMR日志投递到日志服务中。前提条件 已创建EMR集群。具体操作，请参见 E-MapReduce快速入门。使用限制 本文操作仅适用于新版...
开通日志功能
本文介绍如何在函数计算控制台中开启日志功能，将函数调用日志投递到日志服务。前提条件 已创建服务。具体操作，请参见 创建服务。配置日志功能 使用函数计算控制台配置日志 前提条件 函数计算 创建服务 可选：日志服务SLS 创建日志项目和...
- 产品推荐
- 这些文档可能帮助您