文本日志-文本日志文档介绍内容-阿里云

采集主机文本日志

本文介绍如何使用Logtail采集主机文本日志。前提条件已创建Logtail机器组并添加相应服务器，创建机器组的步骤，请参见创建用户自定义标识机器组（推荐）或创建IP地址机器组。安装Logtail的主机需开放80（HTTP）端口和443（HTTPS）端口。...

通过DaemonSet方式采集容器文本日志

本文介绍DaemonSet方式采集容器文本日志的工作原理、使用限制、前提条件、操作步骤等信息。工作原理 DaemonSet模式在DaemonSet模式中，Kubernetes集群确保每个节点（Node）只运行一个Logtail容器，用于采集当前节点内所有容器（Containers...

通过消费组读取文本日志进行模板匹配

本文介绍通过读取日志文本进行模板匹配的操作步骤。前提条件已采集日志到源Logstore或Metricstore。具体操作，请参见数据采集、接入时序数据。重要本文中所涉及的Logstore为Standard Logstore。更多信息，请参见管理Logstore。已创建...

通过消费组读取文本日志进行模板发现

本文介绍通过消费组拉取文本日志进行文本发现的操作步骤。前提条件已采集日志到源Logstore或Metricstore。具体操作，请参见数据采集、接入时序数据。重要本文中所涉及的Logstore为Standard Logstore。更多信息，请参见管理Logstore。已...

通过DaemonSet-控制台方式采集容器文本日志

具体操作，请参见通过Sidecar-CRD方式采集容器文本日志、通过Sidecar-控制台方式采集容器文本日志。不支持采集软链接：目前Logtail无法访问业务容器的软链接，请按真实路径配置采集目录。如果业务容器的数据目录是通过数据卷（Volume）...

通过Sidecar-CRD方式采集容器文本日志

本文介绍如何安装Sidecar及使用CRD方式创建Logtail配置，完成容器文本日志的采集。前提条件目标容器持续产生日志。重要 Logtail只采集增量日志。如果下发Logtail配置后，日志文件无更新，则Logtail不会采集该文件中的日志。更多信息，请...

通过Sidecar-CRD方式采集容器文本日志

本文介绍如何安装Sidecar及使用CRD方式创建Logtail配置，完成容器文本日志的采集。前提条件目标容器持续产生日志。重要 Logtail只采集增量日志。如果下发Logtail配置后，日志文件无更新，则Logtail不会采集该文件中的日志。更多信息，请...

通过Sidecar-控制台方式采集容器文本日志

本文介绍通过Sidecar方式在容器上部署Logtail后，如何在日志服务控制台上创建Logtail配置采集容器文本日志。前提条件已创建Project和Logstore。具体操作，请参见创建Project、创建Logstore。目标容器持续产生日志。重要 Logtail只采集...

通过Sidecar-控制台方式采集容器文本日志

本文介绍如何安装Sidecar及使用控制台方式创建Logtail配置，完成容器文本日志的采集。前提条件已创建Project和Logstore。具体操作，请参见创建项目Project、创建Logstore。目标容器持续产生日志。重要 Logtail只采集增量日志。如果下发...

概述

本文介绍通过Logtail采集服务器文本日志的配置流程和采集模式。配置流程日志服务提供配置向导，帮助您快速完成采集配置。重要在创建Logtail配置前，建议先了解Logtail的使用限制。更多信息，请参见 Logtail限制说明。如果Logtail的默认...

概述

更多信息，请参见采集主机文本日志、通过DaemonSet-控制台方式采集容器文本日志、通过Sidecar-控制台方式采集容器文本日志、通过DaemonSet-CRD方式采集容器日志、通过Sidecar-CRD方式采集容器文本日志。容器标准输出输入插件支持采集容器...

如何实现文件中的日志被采集多份

容器场景采集容器日志的配置步骤，请参见通过DaemonSet方式采集容器文本日志 和通过Sidecar-控制台方式采集容器文本日志。控制台在Logtail采集配置的输入配置中，打开允许文件多次采集开关。CRD 定义多个CRD。

K8s容器日志采集概述

采集容器K8s日志可用于故障排查、性能优化、安全审计、资源利用率分析。日志服务支持通过DaemonSet方式和Sidecar方式采集K8s集群的容器日志，本文简要介绍两种方式的采集流程及优劣势。...通过Sidecar-控制台方式采集容器文本日志

通过DaemonSet-CRD方式采集容器日志

具体操作，请参见通过Sidecar-CRD方式采集容器文本日志、通过Sidecar-控制台方式采集容器文本日志。标准输出采集限制 Docker容器引擎限制：目前标准输出采集仅支持JSON类型的日志驱动。通用限制 Logtail支持Docker和Containerd两种容器...

管理Logtail采集配置

创建Logtail采集配置在日志服务控制台上创建Logtail采集配置，详情请参见采集文本日志。查看Logtail采集配置登录日志服务控制台。在Project列表区域，单击目标Project。在日志存储>日志库页签中，单击目标日志库前面的>，依次选择 ...

安装Logtail（ECS实例）

具体操作，请参见配置用户标识、创建IP地址机器组、创建用户自定义标识机器组及采集文本日志。重要若下载Logtail时选择网络为阿里云内网（经典网络、VPC）时，可通过修改ilogtail_config.json文件中的网络参数进行跨地域采集。相关文档...

采集标准Docker容器日志

本文介绍如何部署Logtail容器以及创建Logtail配置，用于采集标准Docker容器日志（文本日志和标准输出）。前提条件已创建Project和Logstore。更多信息，请参见创建Project 和创建Logstore。目标容器持续产生日志。重要 Logtail只采集增量...

丢弃字段

重要表单配置方式：采集文本日志和容器标准输出时可用。JSON配置方式：采集文本日志时不可用。功能入口当您需要使用Logtail插件处理日志时，您可以在创建或修改Logtail配置时，添加插件配置。具体操作，请参见概述。配置说明重要 ...

字段加密

重要表单配置方式：采集文本日志和容器标准输出时可用。JSON配置方式：采集文本日志时不可用。功能入口当您需要使用Logtail插件处理日志时，您可以在创建或修改Logtail配置时，添加插件配置。具体操作，请参见概述。配置说明表单配置...

如何在日志样例中设置不可见字符

操作步骤进入分隔符-文本日志 模式，具体步骤请参见采集主机文本日志。在 Logtail配置页面，在浏览器空白处按下鼠标右键，单击检查。在浏览器的右侧面板，单击控制台页签。输入如下内容，然后单击回车键。const input=document....

添加字段

重要表单配置方式：采集文本日志和容器标准输出时可用。JSON配置方式：采集文本日志时不可用。功能入口当您需要使用Logtail插件处理日志时，您可以在创建或修改Logtail配置时，添加插件配置。具体操作，请参见概述。配置说明重要 ...

算法说明

日志服务异常智能分析应用提供文本分析功能，用于对日志中的文本日志进行智能化、自动化的分析，提供全局的统计分析结果。文本分析功能通过日志模板发现和日志模板匹配两个子任务，实现对于日志数据的监控和统计。您可以根据待分析的...

使用极简模式采集日志

此处以采集多行文本日志为例，如果您要采集单行文本日志，请选择单行-文本日志。选择目标Project和Logstore，单击下一步。创建机器组。如果您已有可用的机器组，请单击使用现有机器组。如果您还没有可用的机器组，请执行以下操作（以ECS...

重命名字段

重要表单配置方式：采集文本日志和容器标准输出时可用。JSON配置方式：采集文本日志时不可用。功能入口当您需要使用Logtail插件处理日志时，您可以在创建或修改Logtail配置时，添加插件配置。具体操作，请参见概述。配置说明重要 ...

打包字段

重要表单配置方式：采集文本日志和容器标准输出时可用。JSON配置方式：采集文本日志时不可用。功能入口当您需要使用Logtail插件处理日志时，您可以在创建或修改Logtail配置时，添加插件配置。具体操作，请参见概述。配置说明重要 ...

字段值映射处理

重要表单配置方式：采集文本日志和容器标准输出时可用。JSON配置方式：采集文本日志时不可用。功能入口当您需要使用Logtail插件处理日志时，您可以在创建或修改Logtail配置时，添加插件配置。具体操作，请参见概述。配置说明表单配置...

Logtail基本问题

如何配置Logtail采集日志日志服务支持通过Logtail采集文本日志和容器日志，还支持通过Logtail插件采集日志。具体操作，请参见如下文档。采集文本日志 采集容器日志使用Logtail插件采集日志 Logtail是如何工作的？Logtail采集原理包括监听...

数据编码与解码

重要表单配置方式：采集文本日志和容器标准输出时可用。JSON配置方式：采集文本日志时不可用。功能入口当您需要使用Logtail插件处理日志时，您可以在创建或修改Logtail配置时，添加插件配置。具体操作，请参见概述。BASE64编码您可以...

概述

日志采集限制扩展插件对文本日志的处理采用行模式，即文件级别的元数据（例如_tag_:_path_、_topic_等）会被存放到每条日志中，添加扩展插件后会影响和Tag相关的功能，包括：默认情况下，上下文查询和LiveTail功能不可用。如果您要使用...

WARNING类型的多行日志 INFO类型的简单文本日志 DEBUG类型的键值日志[2018-10-01T10:30:31,000][WARNING]java.lang.Exception:another exception happened at TestPrintStackTrace.f(TestPrintStackTrace.java:3)at TestPrintStackTrace.g...

数据脱敏

重要表单配置方式：采集文本日志和容器标准输出时可用。JSON配置方式：采集文本日志时不可用。功能入口当您需要使用Logtail插件处理日志时，您可以在创建或修改Logtail配置时，添加插件配置。具体操作，请参见功能入口。配置说明重要 ...

导入Amazon S3文件

跨行文本日志特有参数参数说明正则匹配位置设置正则表达式匹配的位置，具体说明如下：首行正则：使用正则表达式匹配一条日志的行首，未匹配部分为该条日志的一部分，直到达到最大行数。尾行正则：使用正则表达式匹配一条日志的行尾，未...

LiveTail

重要如果您使用了Logtail插件处理文本日志或采集容器标准输出，则必须在Logtail插件配置中添加aggregators配置。更多信息，请参见概述。背景信息在线上运维的场景中，往往需要对日志队列中的日志进行实时监控，从最新的日志中提取出关键...

转换IP地址

重要表单配置方式：采集文本日志和容器标准输出时可用。JSON配置方式：采集文本日志时不可用。功能入口当您需要使用Logtail插件处理日志时，您可以在创建或修改Logtail配置时，添加插件配置。具体操作，请参见概述。配置说明说明 ...

导入OSS数据

提取时间正则当选择数据格式为单行文本日志 或跨行文本日志，您需要使用正则表达式提取日志中的时间。例如日志样例为 127.0.0.1-[10/Sep/2018:12:36:49 0800]"GET/index.html HTTP/1.1" 时，则您可以设置提取时间正则为[0-9]{0,2}\/...

什么是Logtail

具体操作，请参见采集文本日志 和采集容器日志。完成上述操作后，Logtail开始采集您服务器上的日志，并发送到对应的Logstore中。您可以通过日志服务控制台、API、SDK或CLI查询日志。功能优势基于日志文件，无侵入式采集日志。您无需修改...

上下文查询

重要如果您使用了Logtail插件处理文本日志或采集容器标准输出，则必须在Logtail插件配置中添加aggregators配置。更多信息，请参见概述。已创建索引。具体操作，请参见创建索引。背景信息日志上下文查询是指定日志来源（机器+文件）和...

如何调试正则表达式

在配置Logtail采集文本日志时，如果选择完整正则模式解析和采集日志，需要根据您的日志样例配置正则表达式。本文主要介绍在配置正则表达式过程中如何进行调试。重要本文档可能包含第三方产品信息，该信息仅供参考。阿里云对第三方产品的...

文本日志

新品推荐