Flume消费
日志服务支持通过aliyun-log-flume插件与Flume进行对接，实现日志数据的写入和消费。背景信息 aliyun-log-flume是一个实现日志服务与Flume对接的插件，与Flume对接后，日志服务可以通过Flume与其它数据系统如HDFS、Kafka等对接。aliyun-log...
缓存相关常见问题
本文为您介绍CDN缓存相关的常见问题。CDN缓存清理机制是什么？CDN默认的缓存规则是什么？如何判断CDN缓存是否成功？如何解决URL的传递参数为变量导致CDN缓存命中率低的问题？如何设置文件不缓存直接回源？在CDN控制台缓存过期时间设置为0，...
JindoFS介绍和使用
JindoFS缓存模式（Cache）JindoFS缓存模式（Cache）兼容JindoFS纯客户端模式（SDK），同时利用Jindo分布式缓存能力在计算侧为OSS提供缓存加速，以满足大规模的分析和训练吞吐需求。在纯客户端模式（SDK）基础上，Cache模式支持可选的元数据...
配置静态文件类型
第二优先级：若开启了 自适应缓存，但未在控制台配置 静态文件类型 和 缓存过期时间，则遵循自适应缓存逻辑，自适应缓存遵循源站缓存规则，系统会尽力缓存。若缓存文件较多，建议配置 静态文件类型 和 缓存过期时间，效果更佳。若未开启 自...
配置缓存过期时间
缓存过期时间指源站资源在 DCDN 节点缓存的时长，达到预设时间，资源将会被 DCDN 节点标记为失效资源。如果客户端向 DCDN 节点请求的资源已经失效，DCDN 会回源站获取最新资源并缓存到 DCDN 节点。您可以根据业务需求，按目录或文件后缀名...
配置缓存过期时间
缓存过期时间指源站资源在 CDN 节点缓存的时长，达到预设时间，资源将会被 CDN 节点标记为失效资源。如果客户端向 CDN 节点请求的资源已经失效，CDN 会回源站获取最新资源并缓存到 CDN 节点。您可以根据业务需求，按目录或文件后缀名配置...
内网DNS解析升级说明
按 0.1元/万条 进行收费(1)解析日志总条数计算规则：解析日志总条数=全局流量解析请求数+权威流量解析请求数+缓存流量解析请求数+转发流量解析请求数+递归流量解析请求数(2)开启了流量分析功能之后，默认开启解析日志采集功能，不再单独...
目标Logstore输出错误
LOG DSL引擎每次读取一个批次的源日志（从1条到近万条不等），数据加工后，并不是加工一条日志就输出一条，而是会先将加工好的数据存放在一个缓存池中，等源数据批次处理完，再一起输出。该环节产生错误主要是由于对目标Logstore的访问异常...
查询加速
本文介绍时序存储查询加速功能的全局缓存与并发计算原理，以及各项配置参数的含义。原理介绍 全局缓存与并发计算原理说明如下所示：全局缓存 Prometheus Query计算引擎默认不对执行结果进行缓存，每次查询都需重新计算所有数据，在数据量大...
迁移Elasticsearch查询方案到日志服务
日志服务提供Elasticsearch兼容接口，支持您将日志采集到日志服务后，仍可以沿用Elasticsearch的查询方案。重要 本文档为阿里云原创文档，知识产权归阿里云所有，由于本文档旨在介绍阿里云与第三方产品交互的服务能力，因此可能会提及第三...
SDK参考概述
日志服务Java SDK：使用GetLogs接口查询日志 使用Java SDK管理日志库Logstore 通过消费组消费数据 使用Aliyun Log Java Producer写入日志数据 日志服务Python SDK：使用GetLogs接口查询日志 使用Python SDK管理日志库Logstore 使用...
SDK采集
开发人员可以使用.NET、.NET Core、Java、Python、PHP、Node.js、C、GO、IOS、Android、C++等语言的SDK采集、查询和分析日志等。使用前须知 不同语言的日志服务SDK具体实现细节会有所不同，但是它们都是日志服务API在不同语言上的封装，...
查看全局数据
日志量整体趋势、产品日志量趋势 过去30天的日志量趋势 当天的统计有一小时延迟 OSS全局数据 仪表盘 描述 总日志量、小时日志量、天日志量 OSS日志全局统计 访问日志总日志量、小时日志量、天日志量 访问日志统计 计量日志总日志量、小时...
算法说明
文本分析中的算法采用LogParser和异常检测技术，提供日志分析报表帮助您了解日志的全局信息和可能存在的异常情况，包括：通过日志报表快速定位可能出现异常的日志类别（例如新出现的日志类别，异常分数Top5的日志类别等），缩小人工排查的...
管理日志存储空间
开通DDoS高防全量日志服务后，您可以根据需要修改日志存储容量的规格，或清空已存储的全部日志。背景信息 如果您因网站业务调整，导致所需要的日志存储容量发生变化，您可以通过 升级 增加日志存储容量、通过 降配 减小日志存储容量。例如...
快速使用WAF日志服务
Web应用防火墙（Web Application Firewall，简称WAF）日志服务通过阿里云日志服务实时地采集已接入WAF防护的网站业务的全量日志，并对采集到的日志数据进行查询与分析，以丰富的仪表盘形式展示查询结果，满足等保合规要求和网站业务的防护...
开启或关闭日志服务
Web应用防火墙（Web Application Firewall，简称WAF）默认关闭日志服务功能。如果您需要存储防护对象的日志数据，并对日志数据进行查询与分析，您需要先开启WAF日志服务。如果您不再需要使用日志服务，您可以降配日志存储容量（包年包月...
过滤日志
您在使用Logtail采集日志时，您可以使用processor_filter_regex插件或processor_filter_key_regex插件过滤日志。本文介绍各个插件的参数说明和配置示例。重要 表单配置方式：采集文本日志和容器标准输出时可用。JSON配置方式：采集文本日志...
日志索引表
云产品分类 CloudLens应用 日志类型 存储 CloudLens for SLS 重要日志（消费组延迟日志、Logtail告警日志、Logtail采集日志、Logtail状态日志）详细日志 任务运行日志（定时SQL任务运行日志、数据导入、投递等任务的运行日志）错误日志 ...
日志设置与日志容量管理
开通日志服务后，您可以根据业务防护及分析需要，设置日志字段和存储类型，开启或关闭防护对象日志采集功能，修改日志存储时长，更有效地利用日志容量。您也可以实时查看日志容量，及时升级容量，避免日志数据无法写入专属日志库。本文介绍...
日志（Log）
日志服务采用半结构化的数据模式定义一条日志，包含日志主题、日志时间、日志内容、日志来源和日志标签五个数据域。日志服务对各个数据域的格式要求不同，详细说明如下表所示。数据域 说明 格式 日志主题 日志服务保留字段（_topic_）用于...
管理服务日志
背景信息 开启服务日志功能时，您可以选择服务日志的类型，包括 详细日志、重要日志、任务运行日志，日志类型的说明请参见 日志类型。详细日志：详细日志会在您选择的Project创建名称为 internal-operation_log 的LogStore，在当前Project...
通过消费组读取文本日志进行模板匹配
日志模板匹配通过在线匹配日志和模板，监控日志模板的统计信息，例如数量变化。本文介绍通过读取日志文本进行模板匹配的操作步骤。前提条件 已采集日志到源Logstore或Metricstore。具体操作，请参见 数据采集、接入时序数据。重要 本文中所...
开通日志分析功能
云防火墙联合日志服务推出了日志分析功能，可以实现对防护资产流量日志的实时采集、查询、分析、加工和消费等一站式服务，帮助您有效监控和保护网络资产安全，满足等保合规要求。本文介绍如何在云防火墙控制台上开通日志分析功能，从而将...
常见问题
如何采集K8s集群的容器日志 SLB访问日志采集不到 日志采集Agent对比 Windows系统的ECS安装Logtail服务日志提示异常信息 如何配置日志服务的时间转换格式 数据存储常见问题 日志服务如何存储、管理用户的日志？删除日志库，日志数据是否丢失...
数据模型
例如：您有一个名为big-game的游戏应用，服务器上有三种日志：操作日志（operation_log）、应用程序日志（application_log）以及访问日志（access_log），您可以首先创建名为big-game的项目，然后在该项目下面为这三种日志创建三个日志库，...
日志审计合规
云安全中心日志审计配置检测 RDS日志审计配置检测 日志审计状态检测 PolarDB（DRDS）日志审计配置检测 K8s日志审计配置检测 ActionTrail日志审计配置检测 OSS（对象存储）日志审计配置检测 应用防火墙（WAF）日志审计配置检测 堡垒机日志...
日志管理
日志服务如何存储、管理用户的日志？日志库（Logstore）是日志服务中的日志存储和查询的基本单元，通常用于存储一类日志数据。目前，支持在控制台或者通过API完成对日志库的增删改查操作。日志库创建完成后，用户通过API或SDK向指定日志库...
创建流日志
本文介绍在VPC控制台上创建流日志的操作步骤及其相关的操作。前提条件 已创建资源实例。具体操作，请参见 创建弹性网卡、创建和管理专有网络 和 创建和管理交换机。已在资源实例所在地域创建日志服务Project和Logstore。具体操作，请参见 ...
开通日志功能
本文介绍如何在函数计算控制台中开启日志功能，将函数调用日志投递到日志服务。前提条件 已创建服务。具体操作，请参见 创建服务。配置日志功能 使用函数计算控制台配置日志 前提条件 函数计算 创建服务 可选：日志服务SLS 创建日志项目和...
开启日志投递
E-Mapreduce（简称EMR）的开源组件在运行过程中会产生大量日志。本文介绍如何在EMR控制台中开启日志投递功能，将EMR日志投递到日志服务中。前提条件 已创建EMR集群。具体操作，请参见 E-MapReduce快速入门。使用限制 本文操作仅适用于新版...
创建流日志
您可以在智能接入网关中创建流日志实例，将智能接入网关的传入和传出流量信息投递到日志服务中。本文介绍创建流日志实例的操作步骤及相关操作。前提条件 已购买智能接入网关SAG-1000设备且其软件版本为1.7.0及以上。具体操作，请参见 购买...
云产品侧额外费用须知
本文介绍在日志审计服务中开启云产品日志采集后，部分云产品侧额外的费用说明。VPC 费用说明 自2022年09月01日起，阿里云流日志功能结束公测，正式商业化并开始收费。更多信息，请参见【变更】流日志商业化公告。流日志的总费用=流日志生成...
云产品日志概述
云安全中心 安全日志 漏洞日志 基线日志 安全告警日志 云平台配置检查日志 网络日志 DNS解析日志 本地DNS日志 网络会话日志 Web访问日志 主机日志 进程启动日志 网络连接日志 登录流水日志 暴力破解日志 进程快照日志 账号快照日志 端口...
使用前须知
本文介绍日志审计服务的使用限制、费用说明等信息。使用限制 存储方式与地域限制 重要 使用日志审计服务进行日志区域化存储或中心化存储前，请合理评估存储地域是否满足相关法律法规和安全监管的要求。中心化存储 从各个阿里云账号、各个...
DNS
本文介绍内网DNS日志字段，包括全局日志和模块日志，模块日志比全局日志更为详细地记录DNS解析的过程。内网DNS日志 日志字段 说明 user_id 阿里云账号ID region_id 地域 vpc_id VPC实例ID src_addr 源IP地址 dst_addr 目的IP地址 src_port ...
开启网关日志投递
您可以在微服务引擎MSE控制台中，为云原生网关开启日志投递功能，将日志投递到日志服务中。通过分析云原生网关的访问日志了解客户端用户行为、客户端用户的地域分布，方便排查问题。前提条件 已创建云原生网关实例。具体操作，请参见 新建...
常见问题
本文介绍使用日志服务前的常见问题。什么是日志服务？日志服务可以做什么？日志服务能为用户带来哪些价值？日志服务支持采集哪些数据？日志服务支持哪些数据接入方式？阿里云会使用我在日志服务上存储的数据吗？阿里云是否会将自己的数据...
开通日志转储功能
本文介绍如何在物联网平台控制台上开启日志转储功能，将云端运行日志推送到日志服务。前提条件 已开通日志服务。已创建产品并接入设备。具体操作，请参见 设备接入。开通云端运行日志转储 您需为每个待开通日志转储功能的产品，逐一执行...
日志管理概述
Web应用防火墙（WAF）日志服务帮助您采集并存储WAF防护对象（云产品实例、域名）的Web访问及攻击防护日志，并基于阿里云日志服务，输出查询分析、统计图表、报警服务、下游计算对接与投递等能力，帮助您专注于分析，远离琐碎的查询和整理...
- 产品推荐
- 这些文档可能帮助您