使用e_table_map函数对HTTP请求返回码进行富化

Nginx日志是运维网站的重要信息,日志服务通过e_table_map函数快速对HTTP请求的返回码进行富化,便于您分析日志数据。本文介绍通过e_table_map函数富化HTTP返回码的操作方法。前提条件 已采集到Nginx日志数据。更多信息,请参见 数据采集。...

分析网站日志

本文介绍如何在日志服务控制台上分析网站日志,并通过合适的统计图表可视化展示分析结果。前提条件 已采集网站日志。具体操作,请参见 数据采集。已创建索引。具体操作,请参见 创建索引。背景信息 网站日志是网站运维的重要信息,包含PV、...

通过日志监控实现网站访问日志的统计与报警

status 200 访问网站时,HTTP的返回码。body 168 访问网站时,返回客户端的HTTP的body大小,不包含header。统计网站总QPS或单个网站QPS 登录 云监控控制台。在左侧导航栏,选择 接入中心>日志监控。在 日志监控 页面,单击左上角的 新建...

查询和分析JSON日志

本文以查询和分析JSON类型的网站日志为例,为您介绍查询和分析JSON日志的步骤,并提供SQL语句示例。前提条件 已采集JSON日志。具体操作,请参见 使用极简模式采集日志。步骤一:创建索引 登录 日志服务控制台。在Project列表区域,单击目标...

语法简介

两类函数功能对比:函数类型 全局步骤 接收 返回 修改日志 组合调用 全局操作函数 支持 自动接收日志 0到多条日志 支持大部分情况 支持 表达式函数 不支持 除个别函数支持,大部分不直接处理日志。特定数据结构 不支持 支持 全局操作函数 ...

get_log

reverse Boolean 否 true 用于指定返回结果是否按日志时间戳降序返回日志,精确到分钟级别。true:按照日志时间戳降序返回日志。false(默认值):按照日志时间戳升序返回日志。重要 当query参数为查询语句时,reverse参数有效,用于指定...

最佳实践

时序存储 使用Prometheus采集Kubernetes监控数据 查询与分析 查询和分析网站日志 查询和分析JSON日志 Data Explorer案例 关联Logstore与MySQL数据库进行查询分析 关联Logstore与OSS外表进行查询和分析 查询MNS日志 采集及分析Nginx监控日志...

get_log_all

则优先返回最新的日志 false(默认值):按照顺序返回日志。offset Integer 否 0 指定从某一行开始读取查询结果。默认值为0。关于该命令的全局参数,请参见 全局参数。示例 请求示例 使用默认账号查询Information级别的事件数量。命令示例...

开通日志分析功能

返回 日志分析 页面,单击 开始使用。相关操作 操作 说明 关闭投递 在 日志分析 页面,您可以选择目标日志,关闭投递;也可以单击 全部启用 对应的状态开关,关闭所有日志的投递。扩容 当前日志存储容量过小时,您可以在 日志分析 页面,...

日志服务与Elasticsearch的兼容性

日志服务所提供的Elasticsearch兼容接口,其兼容机制是将Elasticsearch DSL查询翻译为日志服务的索引查询和SQL分析查询,并且按照Elasticsearch的API格式规范返回查询分析结果,从而实现Elasticsearch查询协议的兼容。说明 日志服务的...

字段操作函数

当同时传入多个字段名时,返回日志中第一个存在的字段的值。支持和其他函数组合使用。相关示例,请参见 调用函数清洗数据。e_set 添加新字段或为现有字段设置新的字段值。支持和其他函数组合使用。相关示例,请参见 调用函数清洗数据。e_...

事件操作函数

返回结果 满足条件则丢弃日志返回None,否则返回日志。函数示例 示例1:当_programe_字段的值为 access 时丢弃日志,否则保留该日志。原始日志_programe_:access age:18 content:123 name:maki_programe_:error age:18 content:123 ...

日志聚类

本文介绍日志聚类功能及其操作,包括开启日志聚类、查看聚类结果和原始日志、对比不同时间段的聚类日志数量等。前提条件 已创建Standard Logstore。具体操作,请参见 创建Logstore。已采集日志。具体操作,请参见 数据采集。已配置索引。...

提取字符串动态键值对

r"\b(\w+)eat([^\|]+)",{r"\1":r"\2 by \1"})加工结果 处理后日志为:content:rats eat rice|chicks eat bugs|kittens eat fish|kittens:fish by kittens chicks:bugs by chicks rats:rice by rats 客户案例 例如某网站日志中有一个URL数据...

pull_log_dump

调用CLI命令并发下载大量日志数据到本地文件。请求语法 aliyunlog log pull_log_dump-project_name=<value>-logstore_name=<value>-from_time=<value>-to_time=<value>-file_path=[-batch_size=][-compress=][-encodings=][-shard_list=][-...

Logtail常见问题

本文介绍Logtail相关的常见问题。分类 文档链接 基本概念说明 ...使用CloudLens排查日志时间解析错误问题 如何在日志样例中设置不可见字符 错误 日志服务采集数据常见的错误类型 服务端资源监控 使用CloudLens for SLS监控Project资源配额

电话号码函数

示例 电商公司A通过访问日志中的 mobile 字段和 client_ip 字段,分析哪些客户的电话号码所在地和其访问公司网站的IP地址所在地不同。字段样例 mobile:1881111*client_ip:192.168.2.0 查询和分析语句*|SELECT mobile,client_ip,count(*)as ...

查询和分析网站日志

本文以查询和分析网站日志为例,帮助您快速上手查询和分析操作。前提条件 已采集到网站访问日志。具体操作,请参见 使用完整正则模式采集日志。步骤一:创建索引 登录 日志服务控制台。在Project列表区域,单击目标Project。在 日志存储>...

创建索引

倒排索引是一种数据存储结构,由关键词...查询和分析的示例,请参见 查询和分析网站日志、查询和分析JSON日志、采集及分析Nginx监控日志、分析负载均衡7层访问日志。设置字段的最大长度 分析时,日志服务默认支持的字段值最大长度为2048字节,...

比较运算符

返回值类型 boolean类型。示例 SQL 示例1:查询 request_uri 字段值是以file-8或file-6结尾的日志。字段样例 request_uri:/request/path-2/file-6 查询和分析语句*|SELECT*WHERE request_uri LIKE '%file-8' OR request_uri LIKE '%file-6'...

查询语法

日志服务提供一套查询语法,用于指定日志查询时的过滤规则,从而筛选日志中满足条件的记录,筛选结果可以用于分析语句,进行更复杂的分析处理。查询语法 重要 日志服务查询语句和分析语句(SELECT语句)以竖线(|)分割。基础语法:查询...

快速使用全量日志分析

网站接入DDoS高防后,您可以通过全量日志分析采集和存储网站日志数据,并对采集到的日志数据进行查询与分析。本文介绍如何快速使用全量日志分析功能。使用前须知 使用前请您了解什么是全量日志分析、如何计算所需的日志存储容量、日志...

HarmonyOS SDK快速入门

其他情况下返回状态的更多操作,请参见 状态说明。配置AccessKey 日志服务HarmonyOS SDK支持对AccessKey的动态更新,您可以参考如下代码进行AccessKey的更新配置:aliyunLog.setAccessKey("<your accesskey id>",/填入正确的AccessKey Id...

日志字段详情

本文介绍OSS日志类型及相关的日志字段详情。OSS日志类型 日志类型 说明 访问日志 记录相关OSS Bucket的所有访问日志,实时采集。批量删除日志 记录批量删除日志时具体的删除信息,实时采集。说明 当您调用DeleteObjects接口时,访问日志中...

对象存储

本文介绍对象存储OSS相关日志的字段详情。访问日志 记录对应Bucket的所有访问日志,实时采集。日志字段 说明_topic_日志主题,固定为oss_access_log。owner_id 阿里云账号ID region Bucket所在地域 access_id 访问者的阿里云AccessKey ID ...

分析IIS日志

本文通过PV、UV、访问地域分布、错误请求、请求方法等维度分析IIS日志,以评估网站访问情况。前提条件 已采集IIS日志。具体操作,请参见 使用IIS配置模式采集日志。说明 在采集过程中,日志服务已根据日志内容自动生成索引。如果您要修改...

Flutter SDK快速入门

其他情况下返回错误,请参见 错误说明。混淆规则 如果您的flutter项目开启了混淆规则(Flutter 1.16.2及以版本默认开启混淆规则),您还需要在您项目的混淆配置文件中加入以下规则,否则 Android 项目可能无法正常运行。iOS项目不受此...

通过Java SDK使用SQL独享版

日志服务 默认返回100行结果,您也可以使用LIMIT子句指定返回结果的行数。更多信息,请参见 LIMIT子句。powerSql Boolean 否 true 是否使用SQL独享版。更多信息,请参见 开启SQL独享版。true:使用SQL独享版。false(默认值):使用SQL普通...

日志字段详情

OSS日志类型 日志类型 说明 访问明细日志 需要手动开通,开通步骤请参见 开启日志采集功能。实时采集相关OSS Bucket的所有访问日志、批量删除日志时的删除信息。说明 当您调用DeleteObjects接口时,访问日志中会有一条请求记录。oss-log-...

分析负载均衡7层访问日志

本文基于日志服务的可视化和实时查询分析能力,为您介绍负载均衡(SLB)7层访问日志查询分析的典型案例。前提条件 已采集到SLB 7层负载均衡日志。具体操作,请参见 开通访问日志功能。背景信息 对于大部分云上架构而言,负载均衡是基础设施...

文件存储

日志字段 说明 owner_id 阿里云账号ID ArgIno 文件系统inode号 AuthRc 授权返回码 NFSProtocolRc NFS协议返回码 OpList NFSv4 Procedures编号 Proc NFSv3 Procedures编号 RWSize 读写大小,单位:Byte。RequestId 请求ID ResIno lookup的...

函数总览

依次调用操作,将日志传递转换并返回最后的日志。对于某一条日志,如果其中某一操作删除了日志,则不会再执行后续操作。事件操作函数 e_drop 根据条件判断是否丢弃日志。e_keep 根据条件判断是否保留日志。e_split 基于日志字段的值分裂出...

浏览器JavaScript SDK

日志服务支持通过Web Tracking自动采集终端用户浏览器的日志。本文介绍如何使用Web Tracking JavaScript SDK自动采集浏览器的用户日志。背景信息 您可以通过Web Tracking采集各种浏览器、小程序、iOS App或Android App的用户信息,例如:...

日志类别及字段说明

Web访问日志通常用于分析Web流量和用户行为、识别访问模式和异常情况、优化网站性能等。数据延迟采集,延迟时间一般为:1~12小时 DNS解析日志 sas-log-dns 记录DNS解析过程详细信息的日志,包括请求域名、查询类型、客户端IP地址、响应值等...

字符串函数

函数示例 示例1 原始日志 test:asewds 加工规则 e_set("f1",str_decode(str_encode("你好","utf8"),"utf8"))加工结果 test:asewds f1:你好 示例2 原始日志 f2:test 测试数据 加工规则 e_set("f1",str_encode(v("f2"),"ascii",errors=...

日志字段详情

AuthRc 授权返回码。NFSProtocolRc NFS协议返回码。OpList NFSv4 Procedures编号。Proc NFSv3 Procedures编号。RWSize 读写大小,单位:字节。RequestId 请求ID。ResIno lookup的资源inode号。SourceIp 客户端IP地址。owner_id 阿里云账号...

Android SDK快速入门

由于SDK只在接口返回200状态时才认为发送成功,因此日志会存在一定的重复率。建议您通过SQL查询分析语句对日志进行去重。如果日志重复率较高,您需要先排查下SDK初始化是否存在问题。主要原因和解决方案如下:断点续传配置错误 针对断点...

通知渠道说明

说明 Webhook调用成功时返回的状态需为200,否则会被日志服务认为请求失败,导致重复调用。参数 说明 渠道 选择 Webhook-自定义。请求地址 Webhook地址,必须为公网地址(例如外网域名、IP:Port格式的URL)。内容模板 告警通知的内容。...

iOS SDK快速入门

由于SDK只在接口返回200状态时才认为发送成功,因此日志会存在一定的重复率。建议您通过SQL查询分析语句对数据进行去重。如果日志重复率较高,您需要先排查下SDK初始化是否存在问题。主要原因和解决方案如下:断点续传配置错误 针对断点...

控制台提示“查询结果不精确”,如何解决?

问题描述 在您查询和分析日志时,如果日志服务控制台提示 查询结果不精确,表示日志服务未能扫描全部日志返回的查询和分析结果不是基于全部日志的精确结果。可能原因 查询结果不精确一般由以下原因造成。查询时间范围太大 例如查询时间...
共有200条 < 1 2 3 4 ... 200 >
跳转至: GO
产品推荐
云服务器 安全管家服务 安全中心
这些文档可能帮助您
日志服务 短信服务 域名 商标服务 弹性公网IP 人工智能平台 PAI
新人特惠 爆款特惠 最新活动 免费试用