查看文件日志
您可以通过给日志文件名称添加通配符的方式滚动日志。文件名称通配符支持星号（*）和问号?查看文件日志时，在 SLS控制台 无数据展示，如何处理？通常SLS默认查询最近15分钟内的查询结果。如果SLS无数据显示，建议使用Webshell查看您的应用...
导入OSS数据
归档文件的读取 如果待导入的文件是归档类型，则需要解冻后才能被读取。一般情况下，解冻一个文件大约需要1分钟。文件大小 相同数据总量的情况下，平均文件大小越大，读取吞吐越高。反之，小文件越多，读取吞吐越低。网络 如果OSS Bucket和...
消费-通过消费组实现高可靠消费
现实中的日志处理 上述过程可以抽象成日志处理的经典场景，如果要解决银行的业务需求，我们要提供弹性伸缩、并且灵活适配的日志基础框架，包括：对Shard进行弹性伸缩。消费者上线与下线能够对Shard自动适配，过程中数据不丢失。过程中支持...
数据加密
Logtail加密传输 Logtail是日志服务提供的日志采集Agent。为保证您的数据在发送过程中不会被篡改，Logtail会通过HTTPS通道从服务端获取私密Token，并对所有发送日志的数据包进行数据签名，以保障相关安全性。SDK加密传输 为了能让您更高效...
可视化概述
日志服务支持可视化展示您的查询与分析结果。您可以根据分析需求选用合适的统计图表类型展示查询和分析结果，并将结果保存到实时刷新的仪表盘中。此外，您还可以将日志服务与第三方可视化工具对接。可视化方式 日志服务支持的可视化方式...
NAS数据安全
文件存储操作错误检测 文件存储大批量删除文件告警 文件存储操作错误检测 告警ID sls_app_audit_storage_at_nas_err_op 告警名称 文件存储操作错误检测 版本号 1 类别 云平台、阿里云、数据安全、NAS数据安全 作用 监控NAS Volume的错误...
文件存储 HDFS 版（Apsara File Storage for HDFS）...
ActionTrail中记录的 文件存储 HDFS 版（Apsara File Storage for HDFS）操作日志 文件存储 HDFS 版（Apsara File Storage for HDFS）的操作审计日志主要包含的是API事件，其中OpenAPI事件在ActionTrail中记录的eventType取值为 ApiCall。...
快速使用全量日志分析
将网站接入DDoS高防后，您可以通过全量日志分析采集和存储网站的日志数据，并对采集到的日志数据进行查询与分析。本文介绍如何快速使用全量日志分析功能。使用前须知 使用前请您了解什么是全量日志分析、如何计算所需的日志存储容量、日志...
应用监控指标
服务总览 指标名称 说明 单位 数据源 ERROR 应用错误 次 应用日志（自定义日志文件）配置于 Error 应用错误。PV 页面访问量 次 应用日志（自定义日志文件）配置于 PV 页面访问量。Service 应用服务被调用 次 应用日志（自定义日志文件）...
接入Nvidia GPU监控数据
步骤一：安装NVIDIA GPU驱动 日志服务 使用 nvidia-smi 命令采集GPU信息，该命令包含在GPU驱动程序中，因此需要先安装驱动程序。具体操作，请参见 在GPU计算型实例中安装GPU驱动（Linux）。如果您使用阿里云ECS的GPU实例，则GPU实例中已...
Alibaba CloudLens Copilot for OSS使用指南
Alibaba CloudLens Copilot for OSS是基于日志服务的CloudLens for OSS功能为您提供的智能可观测数据分析服务，利用通义千问的大语言模型的能力，为您提供的云产品可观测数据分析智能助手。通过您的输入进行意图识别，结合日志服务在Cloud ...
接入Redis监控数据
操作步骤 登录 日志服务控制台。在 日志应用 区域的 智能运维 页签下，单击 全栈可观测。在 SLS全栈可观测 页面，单击目标实例。在左侧导航栏中，单击 全栈监控。首次在该实例中使用性能监控时，还需单击 立即开启。在左侧导航栏中，单击 ...
采集Docker事件
您也可以根据采集到的日志，手动创建字段索引，或者单击 自动生成索引，日志服务将自动生成字段索引。更多信息，请参见 创建索引。重要 如果您要查询和分析日志，那么全文索引和字段索引必须至少启用一种。同时启用时，以字段索引为准。...
从OSS获取数据出错
unicode"} 排查方法 检查报错的日志事件，如果报错信息是 unknown encoding:unicode，检查文件解码参数 encoding 是否写错。解决方案 将 res_oss_file 函数加工编排中的 encoding 参数改成正确的解码格式即可。假如正确的解码格式是utf8 e_...
常见问题
用于监控日志服务中的日志和时序数据，及时发现异常并触发告警。支持告警降噪、告警事务管理、告警通知等；支持40多个功能场景，充分满足研发、运维、安全以及运营人员的告警监控运维需求。更多信息，请参见 功能概览。日志服务告警适用于...
通过DaemonSet方式采集Kubernetes容器文本日志
对于通过hostPath方式挂载数据卷的容器，如果您希望直接采集其在宿主机上映射的日志文件，请选择宿主机路径，其余情况请选择容器内路径。文件路径 如果目标容器节点是Linux系统，则日志路径必须以正斜线（/）开头，例如/apsara/nuwa/*/app....
采集Beats和Logstash数据源
您也可以根据采集到的日志，手动创建字段索引，或者单击 自动生成索引，日志服务将自动生成字段索引。更多信息，请参见 创建索引。重要 如果您要查询和分析日志，那么全文索引和字段索引必须至少启用一种。同时启用时，以字段索引为准。...
采集HTTP数据
您也可以根据采集到的日志，手动创建字段索引，或者单击 自动生成索引，日志服务将自动生成字段索引。更多信息，请参见 创建索引。重要 如果您要查询和分析日志，那么全文索引和字段索引必须至少启用一种。同时启用时，以字段索引为准。...
使用GetLogs接口查询日志
完成日志采集后，您可以调用GetLogs接口查询采集到的日志。本文介绍GetLogs接口的典型使用示例。前提条件 已创建RAM用户并完成授权。具体操作，请参见 创建RAM用户并完成授权。已配置环境变量 ALIBABA_CLOUD_ACCESS_KEY_ID 和 ALIBABA_...
UpdateLogtailPipelineConfig-更新Logtail流水线配置
FilePaths[string]是/["/var/log/*.log"]待采集的日志文件路径列表（目前仅限 1 个路径）。路径中支持使用*和*通配符，其中*通配符仅能出现一次且仅限用于文件名前。MaxDirSearchDepth uint 否 0 0 文件路径中*通配符匹配的最大目录深度。...
使用Loggie上传日志
本示例是采集/tmp/log 目录下所有文件名以.log 结尾的文件中的日志。sink：通过 sink 指定日志服务相关信息。各个参数说明，请参见 配置参数说明。通过Loggie采集ECS日志到日志服务后，您可以在目标Logstore中查看日志，日志样例如下图所示...
常见问题
日志服务是阿里巴巴内部自用的日志及监控平台，经历多次双十一的考验。阿里云内部的开发人员也在很多项目中使用日志服务。如果数据量突然激增，日志服务如何保证服务不受影响？日志服务提供弹性伸缩、灵活适配的数据基础框架，具备每天PB...
get_project_logs
调用CLI命令查询目标Project下的日志，该命令是Project级别的SQL查询命令。注意事项 在使用CLI命令之前，您需要注意以下事项：已安装日志服务CLI，并完成配置。具体操作，请参见 安装CLI 和 配置CLI。已创建日志服务Project、Logstore并...
采集Windows事件日志
如果下发Logtail配置后，日志文件无更新，则Logtail不会采集该文件中的日志。更多信息，请参见 读取文件。原理 对于事件日志，Windows提供了 Windows Event Log 和 Event Logging 两套API，前者是后者的升级，仅在Windows Vista及以上的...
日志字段详情
Redis日志包括审计日志、慢日志和运行日志，本文介绍各类日志的字段详情。审计日志 审计日志存储在名为redis_audit_log的Logstore中，具体字段说明如下表所示。字段 说明_topic_日志主题 redis_audit_log：DB节点的审计日志 redis_proxy_...
日志管理
任务编辑完成后，SAE 会依据所配的日志收集规则，收集日志并存放到指定的文件内。在 任务模板详情 页面的左侧导航栏，选择 日志管理>持久化日志，在 持久化日志 页面，查看所收集的日志信息。如果存在日志数据，表示日志收集配置成功，可以...
过滤日志
配置示例 只采集 ip 以 10 开头、method 为 POST 且 browser 不为 aliyun.*的日志，配置示例如下：原始日志 日志1"ip":"10.*.*.*""method":"POST""browser":"aliyun-sdk-java"日志2"ip":"10.*.*.*""method":"POST""browser":"chrome"日志3...
如何设置初始化时间窗口数量？
合适的初始化时间，可以使算法模式在初始化阶段分析到大多数的日志类别，有利于更好的异常检测。一般日志是周期性生成的，所以初始化时间需与日志生成的周期长度相当，或者是周期长度的1/2或1/4，保证算法模型可以在初始化阶段遇见到大部分...
短语查询
概述 日志服务查询采用的是分词法，例如查询语句为 abc def，将匹配所有包含 abc 和 def 的日志，不区分先后顺序，无法精准匹配目标短语。现在日志服务推出短语查询，用于精准匹配一段短语。日志服务接收到短语查询请求后，执行流程主要...
分析网站日志
日志服务提供多样化的日志采集方式及一站式分析功能，您可通过 查询+SQL92 语法对日志进行实时分析，并以图表形式直观展示分析结果。日志服务还支持通过自带的仪表盘、DataV、Grafana、Tableau（通过JDBC链接）、Quick BI等可视化方式创建...
设置日志收集至SLS
您可以通过给日志文件名称添加通配符的方式滚动日志。文件名称通配符支持星号（*）和问号?查看文件日志时，在 SLS控制台 无数据展示，如何处理？通常SLS默认查询最近15分钟内的查询结果。如果SLS无数据显示，建议使用Webshell查看您的应用...
查询不到日志的排查思路
待采集的日志文件没有实时写入数据。您可以打开/usr/local/ilogtail/ilogtail.LOG 查看报错信息。常见错误如下：parse delimiter log fail：通过分隔符模式采集日志出错。parse regex log fail：通过完整正则模式采集日志出错。分词符设置...
通过消费组读取文本日志进行模板匹配
如果后面再次出现相同的日志类别的日志，文本分析作业会定义一个新的日志类别。例如系统异常时输出Error日志，系统恢复后不再出现该日志，等下次系统异常（超过最大静默时间），再次输出Error日志时，作业会提示出现新的日志类别。默认值为...
什么是Logtail
Logtail是日志服务提供的日志采集Agent，用于采集阿里云ECS、自建IDC、其他云厂商等服务器上的日志。本文介绍Logtail的功能、优势、使用限制及配置流程等信息。Logtail多年来一直承载着阿里巴巴集团重要服务的数据采集。每天采集数百万...
关联OSS数据源
说明 采集的日志中需要包含参数userid。select*from<logstore>l join<External storage>u on l.userid=u.userid 配置项 说明 示例 Logstore 需要查询的Logstore的名称。test_logstore External storage 步骤4 中定义的外部存储名称。user_...
通过消费组读取文本日志进行模板发现
查询语句 调用 日志聚类 的日志过滤条件，对满足过滤条件的日志进行模板发现。模板发现算法 参数 说明 日志实体字段 根据日志实体字段的值对日志数据分组，每一个分组内的日志数据单独进行模板发现。最多选择或输入2个字段。日志等级字段 ...
API概览
GetProjectLogs 获取目标Project下的日志 查询目标Project下的日志，该接口是Project级别的SQL查询接口。GetLogging 获取服务日志信息 查询目标Project的服务日志配置。ListDomains 查询自定义域名 列出Project绑定的自定义域名。日志库 ...
使用前须知
阿里云日志服务联合阿里云内容分发网络CDN推出实时日志推送功能，将借助于CDN访问图片、文字或视频资源时产生的日志实时推送到日志服务中。资产说明 自定义日志服务Project、Logstore 重要 请勿删除CDN实时日志相关的日志服务Project和...
小程序JavaScript SDK
日志服务支持通过Web Tracking自动采集终端用户小程序的日志。本文介绍如何使用Web Tracking JavaScript SDK自动采集小程序的用户日志。背景信息 您可以通过Web Tracking采集各种浏览器、小程序、iOS App或Android App的用户信息，例如：...
文件存储
本文介绍文件存储NAS访问日志的字段详情。日志字段 说明 owner_id 阿里云账号ID ArgIno 文件系统inode号 AuthRc 授权返回码 NFSProtocolRc NFS协议返回码 OpList NFSv4 Procedures编号 Proc NFSv3 Procedures编号 RWSize 读写大小，单位：...
- 产品推荐
- 这些文档可能帮助您