日志查询
概述 云解析DNS提供两个维度的日志查询，分别是操作日志、解析日志。操作日志：指云解析DNS域名列表中的域名管理操作日志，可以查看操作时间、操作域名、操作行为。操作行为包括添加域名、删除域名、找回域名等操作。解析日志：指在解析...
DNS解析异常问题排查
常见请求日志 CoreDNS接收到请求并回复客户端后会打印一行日志，示例如下：#其中包含状态码RCODE NOERROR，代表解析结果正常返回。[INFO]172.20.2.25:44525-36259"A IN redis-master.default.svc.cluster.local.udp 56 false 512"NOERROR ...
DNS解析异常问题排查
常见请求日志 CoreDNS接收到请求并回复客户端后会打印一行日志，示例如下：#其中包含状态码RCODE NOERROR，代表解析结果正常返回。[INFO]172.20.2.25:44525-36259"A IN redis-master.default.svc.cluster.local.udp 56 false 512"NOERROR ...
DNS流量分析简介
同时服务提供90天的原始解析日志存档服务，满足您的日志审计、合规需求。DNS流量分析主要包括如下具体功能：域名解析请求量统计（解析请求量变化趋势、域名解析请求量排名）。域名解析请求来源分析。域名解析线路命中分析。域名解析应答...
SDK参考概述
日志服务Java SDK：使用GetLogs接口查询日志 使用Java SDK管理日志库Logstore 通过消费组消费数据 使用Aliyun Log Java Producer写入日志数据 日志服务Python SDK：使用GetLogs接口查询日志 使用Python SDK管理日志库Logstore 使用...
域名的解析日志查询
解析日志的应用场景：如果对域名解析进行了误操作，怎么查看之前解析是怎么做的？解析记录怎么变了？什么时候变更的，谁操作的？查询解析日志的流程如下：登录阿里云/万网【管理控制台】-【域名】-【管理】点击【域名解析】-【解析日志】，...
提取日志时间
解析日志中的时间字段，并支持将解析结果设置为日志时间。重要 Logtail 0.16.28及以上版本支持processor_strptime插件。表单配置方式 参数说明 配置 处理器类型 为 提取日志时间（strptime时间格式），相关参数说明如下表所示。参数 说明 ...
查看域名解析日志
如果域名解析被异常修改或删除，您可以查看域名解析日志，通过日志判断是否是账号信息被盗导致域名解析被修改或删除。如果账号被盗，建议您及时修改阿里云账号的登录密码及域名密码。查看域名解析日志的详细步骤，请参见 日志查询。
展开JSON字段
解析失败保留原始日志 选中该选项后，如果解析日志失败，系统将保留原始日志。配置示例 对 s_key 字段进行JSON展开，并使用 j 和原始字段名 s_key 作为JSON展开后字段名的前缀。配置示例如下：原始日志"s_key":"{\"k1\":{\"k2\":{\"k3\":{\...
域名开启/关闭流量分析
概述 如果您需要使用DNS流量分析功能，首先您需要开通DNS流量分析服务，具体请参考 DNS流量分析服务开通。...警告 关闭流量分析后，系统不会采集、保留域名解析日志进行分析，以后也无法通过日志排查解析不准确、解析错误等疑似问题。
如何通过完整正则模式采集多种格式日志
WARNING类型的多行日志 INFO类型的简单文本日志 DEBUG类型的键值日志[2018-10-01T10:30:31,000][WARNING]java.lang.Exception:another exception happened at TestPrintStackTrace.f(TestPrintStackTrace.java:3)at TestPrintStackTrace.g...
解析Java报错日志
为实现以上需求，您需要解析日志中的时间、错误码、状态码、产品信息、错误码信息、请求方法和出错行号，存储到各产品的Logstore中，用于错误日志分析。原始日志样例如下：_source_:192.0.2.10_tag_:_client_ip_:203.0.113.10_tag_:_...
提取字段
解析失败保留原始字段 选中该选项后，如果解析日志失败，解析后的日志中将保留原始字段。正则完全匹配 选中该选项后，您在 结果字段 中设置的所有字段通过指定的正则表达式都能与原始字段的值匹配，字段值才会被提取。配置示例 使用正则...
LiveTail
在线上运维的场景中，经常需要实时监控日志并提取关键信息、分析异常原因。您可以通过LiveTail功能，实时监控、过滤日志，无需直接操作服务器。前提条件 已通过Logtail采集到日志。具体操作，请参见 通过Logtail采集日志。重要 如果您使用...
导入Amazon S3文件
跨行文本日志：多行模式，支持指定首行或者尾行的正则表达式解析日志。压缩格式 待导入的S3文件的压缩格式，日志服务根据对应格式进行解压并读取数据。编码格式 待导入的S3文件的编码格式。目前仅支持UTF-8和GBK。检查新文件周期 如果目标S...
导入OSS数据
跨行文本日志：多行模式，支持指定首行或者尾行的正则表达式解析日志。ORC：ORC文件格式，无需任何配置，自动解析成日志格式。Parquet：Parquet格式，无需任何配置，自动解析成日志格式。阿里云OSS访问日志：阿里云OSS访问日志格式。更多...
产品计费
计费方式 内置权威采用按量付费的计费方式，主要为用户域名、缓存管理、转发管理、服务地址、解析日志进行收费。用户域名收费内容为：用户域名数量+用户域名解析请求量，按天计费，按天结算。缓存管理收费内容为：缓存保持域名数量（按天...
用户域名与云产品域名的区别
并且在开启日志转存的情况下，用户可以查看对应的全局流量解析日志及缓存模块、递归模块解析日志。说明 目前支持云产品域名的产品：机器学习PAI、E-MapReduce、CDP、VMware服务、Flink全托管、密钥管理服务、私网连接、消息队列RocketMQ、...
Logtail最佳实践
本文介绍Logtail采集相关的最佳实践。分类 文档链接 安装部署 使用OOS批量安装或升级Logtail 采集 通过Logtail跨阿里云账号采集日志 通过Logtail跨阿里云账号采集容器日志...插件使用 日志采集支持纳秒精度时间戳 Logtail使用Grok语法解析日志
Logtail发布历史
问题修复 修复时区相关问题，使用系统时间和解析日志时间失败时忽略时区调整选项的问题。修复因inode复用导致的日志重复采集问题。修复Grok插件在解析中文时可能会不工作的问题。修复1.2.1版本中引入的容器发现所占用的内存过高的问题。1.3...
分页显示查询分析结果
例如，通过*|select count(1),url group by url 语句进行查询分析，指定返回2000行日志。您可以通过分页指定每次读取500行，共4次读取完成，示例如下：*|select count(1),url group by url limit 0,500*|select count(1),url group by url ...
投递日志到MaxCompute（旧版）
您可以在日志服务控制台实时查询所采集到的日志，并将日志投递到MaxCompute，进行进一步的BI分析及数据挖掘。本文介绍通过日志服务投递日志到MaxCompute的操作步骤。前提条件 已开通MaxCompute，并创建表。更多信息，请参见 创建表。使用...
新旧版本差异说明
本文介绍云解析新、旧版本差异。概述 2019年1月16日云解析DNS售卖套餐全新改版，改版后不再提供用户自定义参数的购买方式，下文主要对新旧版本差异进行说明。新旧版本差异对比 模块 原计费项 原计费参数 变更说明 基础配置 TTL值 自定义...
DescribeInternetDnsLogs-查询公网解析日志
536E9CAD-DB30-4647-AC87-AA5CC38C5382 Complete boolean 解析日志查询是否精确。true Logs object[]日志列表。DnsMsgId string 解析日志 ID（会重复）。3583 LogTime long 解析时间戳。1709196249000 QueryName string 域名名称。example....
使用云监控监测日志服务的使用情况
客户端解析失败行数 Logtail采集日志过程中，出现采集错误的行数，如果该视图有数据，则表示发生了错误。客户端错误次数 Logtail采集日志过程中，出现采集错误的次数。客户端错误机器数 Logtail采集日志过程中，出现采集错误的告警机器数。...
实例升级/解绑/更换/降级
场景二：若从付费版DNS升级至更高版本，如果云解析DNS分配的DNS服务器名称和升级前的DNS服务器不一致，这不影响域名解析，因为云解析DNS付费版集群是相同的，均为 vip(1-8).alidns.com 。您也可以在域名注册商处将DNS服务器修改为云解析...
过滤处理
配置说明 参数名称 说明 原始字段 解析日志前，用于存放日志内容的原始字段。白名单 只采集符合白名单条件的日志，您需要设置目标字段名称和用于过滤的正则表达式。此处的正则表达式仅支持全文匹配，不支持关键词部分匹配。如何配置正则...
日志采集Agent对比
Logstash logstash-2.0.0版本，通过grok解析日志并写出到kafka（内置插件，开启gzip压缩）。日志解析配置：grok { patterns_dir=>"/home/admin/workspace/survey/logstash/patterns"match=>{"message"=>"%{IPORHOST:ip}%{USERNAME:rt}-\[%{...
Apache模式解析
原始字段 解析日志前，用于存放日志内容的原始字段，默认值为content。正则表达式 用于提取Apache日志的正则表达式。日志服务 会根据 APACHE配置字段 中的内容自动生成该正则表达式。日志提取字段 根据 APACHE配置字段 中的内容自动生成...
脱敏处理
配置说明 参数名称 说明 原始字段 解析日志前，用于存放日志内容的原始字段。脱敏方式 脱敏方式，包括：const：将敏感内容替换成您所修改的字符串。md5：将敏感内容替换为其对应的MD5值。替换字符串 选择 脱敏方式 为 const，需输入字符串...
Logtail采集详情
设置日志时间字段 如果未配置时间字段，则日志时间为当前解析日志的时间。如果配置了时间字段：日志中记录的时间距离当前时间12小时以内，则从解析的日志字段中提取时间。日志中记录的时间距离当前时间12小时以上，则丢弃该日志并上传错误...
IIS模式解析
原始字段 解析日志前，用于存放日志内容的原始字段，默认值为content。正则表达式 用于提取IIS日志的正则表达式。日志服务 会根据 IIS配置字段 中的内容自动生成该正则表达式。日志提取字段 根据 IIS配置字段 中的内容自动生成日志字段...
日志采集支持纳秒精度时间戳
本文主要说明在使用Logtail进行日志采集时，如何有效地提取和处理具有纳秒精度的时间戳信息，确保对原始日志中的高精度时间数据进行准确捕获。应用场景 某些业务场景下对时间精度要求较高（例如不同子模块日志保序要求），依赖毫秒甚至更高...
添加缓存保持域名
在解析记录TTL到期后，如果再次出现域名解析请求，用老的缓存解析记录应答后主动去更新解析记录，如果查询请求没有获取到解析记录，则继续用老的解析记录应答。推荐您对热点访问、重点保护域名开启缓存保持，在缓存中永久保存解析结果，...
通过DaemonSet-控制台方式采集Kubernetes容器标准输出
多行日志限制：为保证多行组成的一条日志不因为输出延迟而被分割成多条，多行日志情况下，采集的最后一条日志默认都会缓存一段时间。默认缓存时间为3秒，可通过 BeginLineTimeoutMs 参数修改，但此值不能低于1000（毫秒），否则容易出现...
使用前须知
阿里云Web应用防火墙（WAF）联合日志服务推出WAF日志服务功能，提供网站域名访问日志、攻击防护日志的实时采集、查询、分析、加工、消费等一站式服务，满足等保合规要求和您的网站业务防护和运营需求。本文介绍WAF日志服务功能相关的资产...
分隔符模式解析
配置说明 参数 描述 原始字段 解析日志前，用于存放日志内容的原始字段，默认值为content。分隔符 请根据您的日志内容选择正确的分隔符，例如竖线（|）。说明 指定分隔符为 不可见字符 时，您需要查找不可见字符在ASCII码中对应的十六进制...
使用前须知
资产详情 警告 请勿删除WAF日志相关的日志服务Project和Logstore，否则将导致已存储的日志被清除，且新日志无法被投递到日志服务。WAF包年包月实例 如果您购买的是中国内地实例，则开通WAF日志服务功能后，系统默认创建一个名为 wafng-...
使用前须知
重要 在停用日志功能前，请勿删除EMR日志相关的日志服务Project和Logstore，否则将导致已存储的日志被清除，且新日志无法被投递到日志服务。若您曾开通过按写入数据量计费模式，则系统默认创建计费模式为按写入数据量计费的专属Logstore。...
使用前须知
数据延迟采集，延迟时间一般为：1~12小时 DNS解析日志 sas-log-dns 记录DNS解析过程详细信息的日志，包括请求域名、查询类型、客户端IP地址、响应值等信息。通过分析DNS解析日志，您可以了解DNS解析的请求和响应过程，检测异常的解析行为、...
- 产品推荐
- 这些文档可能帮助您