在 请选择EMR服务 下拉框中选择您需要查看日志的服务。在日志界面对日志进行分析。您可以指定时间段和查询语句进行实时查询。例如,可快速分析某一个字段在一段时间内的分布情况,您也可以按条件过滤或统计您希望查看的访问记录。关闭日志...
本文以查询和分析JSON类型的网站日志为例,为您介绍查询和分析JSON日志的步骤,提供SQL语句示例。前提条件 已采集JSON日志。具体操作,请参见 使用极简模式采集日志。步骤一:创建索引 登录 日志服务控制台。在Project列表区域,单击目标...
倒排索引是一种数据存储结构,由关键词...查询和分析的示例,请参见 查询和分析网站日志、查询和分析JSON日志、采集及分析Nginx监控日志、分析负载均衡7层访问日志。设置字段的最大长度 分析时,日志服务默认支持的字段值最大长度为2048字节,...
如果您使用的是e_output函数,则通过e_output函数输出日志到指定的Logstore后,对应的日志不再执行后面的加工规则。如果您希望输出日志到指定的Logstore后,对应的日志还能继续执行后面的加工规则,可使用e_coutput函数。更多信息,请参见 ...
您可以在阿里云的 费用账单 页面,查看日志服务的月账单。具体操作如下:在 账单总览 页签中,选择您要查询的账期。选择 产品 为 日志服务。查看日志服务的月账单。如果您每月的日志服务费用波动较大,则您可以根据未来可能产生的日志服务...
如果您想要查看完整的原始数据,可以在内容模板中引用 query_url 变量,然后在告警通知中单击对应的链接,在日志服务控制台的查询分析页面查看完整的日志。例如:Markdown格式的内容模板(钉钉等渠道),可设置为[查询详情]({{ alert.query...
具体请参见 错误日志查看方式。查看错误日志的 reason 字段,确定这些日志事件的报错原因。根据报错原因,为这些异常日志事件增添逻辑,可使用 e_if、e_switch 等流程控制函数,捕获并处理这些错误。常见错误排查 日志事件中存在异常值。...
阿里云云防火墙联合 日志服务 推出日志分析功能,提供互联网流量日志的实时采集、查询、分析、加工、消费等一站式服务,满足等保合规要求。本文介绍云防火墙日志分析功能相关的资产详情、费用说明及使用限制等。资产详情 专属Project和...
查看日志服务的监控指标。云监控指标含义 云监控指标 含义 写入流量 Logstore每分钟写入数据实时大小。原始数据大小 Logstore每分钟写入数据原始大小,即压缩前的大小。总体QPS 所有操作QPS。操作次数 统计用户每分钟API请求操作的次数。更...
降低存储成本:查询日志服务的费用,请参见 如何查看日志服务的存储容量和消费记录。缩短Logstore的数据保存时间,操作步骤请参见 如何删除日志?开启智能分层存储功能,将热存储的数据转为低频存储或归档存储。更多信息,请参见 数据分层...
本文介绍查看日志服务的消费记录、Logstore的存储容量、停止Logstore的计费等问题。如何查看日志服务的存储容量或消费记录?您可以通过 CloudLens for SLS 或 成本管家 可视化查看存储容量。重要 如果新开通 成本管家 或 CloudLens for SLS...
如果需要 查看Logstore的存储容量,请参见 如何查看日志服务的存储容量或消费记录?删除Project或Logstore 警告 通过任意方式删除Project或Logstore后,所有日志数据及配置信息都会被释放,不可恢复,请慎重确认,避免数据丢失。如果按照...
少于100万次 免费 案例2 A网站的访问日志平均为200 Byte/条,1天共1亿条日志,即每天日志量约为18.6 GB。目前A网站通过日志服务(Shard数量为2个,保存时间为3天)分析网站运营情况。假设本案例中的上传压缩率为20%且不计免费额度。1天的...
本文将重点介绍如何基于阿里云日志服务SLS导入AWS CloudTrail日志的具体操作步骤。准备工作 重要 本文档为阿里云原创文档,知识产权归阿里云所有,由于本文档旨在介绍阿里云与第三方产品交互的服务能力,因此可能会提及第三方公司或产品等...
在 修改服务日志配置 面板中,查看服务日志的存储位置。重要 如果您还未开通服务日志,请先进行开通。任务监控大盘报错处理 异常描述 在目标Project下,打开目标任务的概览页面时,提示 查询失败 错误,统计报表中未展示任何统计数据。异常...
查看报表 单击目标任务对应的 查看报表,系统将跳转至对应的仪表盘页面,并展示各类审计指标。具体操作,请参见 数据报表。修改任务 单击目标任务对应的 修改,可修改任务的名称、描述、对应的Project、Logtail配置等信息。删除任务 如果您...
您可以在控制台右上角的 任务进度 中查看日志导入的进度,导入过程需一定的时间,请耐心等待。单击 启用。执行结果 日志服务采集到PolarDB-X 1.0 SQL审计日志后,您可以执行查询分析、下载、投递、加工、创建告警等操作。具体操作,请参见 ...
您可以通过日志服务控制台查看日志消费的状态并设置告警。前提条件 已开通服务日志中的 重要日志。具体操作,请参见 开通服务日志。背景信息 一个消费组包含多个消费者,每个消费者消费Logstore中的一部分Shard。同一个消费组下面的消费者...
参数 说明 CSV字段 您可以在日志服务的 原始日志 页签中查看日志字段的Key,将您需要投递到OSS的字段名(Key)有序填入。除了日志内容的Key和Value外,日志服务还提供保留字段_time_、_topic_、_source_,保留字段更多信息,请参见 保留...
阿里云支持导出日志服务的使用明细。本文介绍查询日志服务使用明细的操作步骤。操作步骤 登录 用户中心。在左侧导航栏,选择 账单管理>账单详情。...待CSV文件导出成功后,您可以将文件下载到本地,查看日志服务的使用明细。
消费组延迟监控 您可以通过 日志服务 控制台查看日志消费的状态并设置告警。具体信息,请参见 消费组监控与告警。费用说明 当涉及的Logstore的计费模式为按使用功能计费模式,Kafka消费涉及多个计费项,包括读写流量、请求费用等。具体内容...
active命令用来逐级查看活跃的日志文件。建议您先定位当前活跃的Logstore,再定向查询该Logstore下的活跃日志文件。示例/etc/init.d/ilogtaild status active 1 sls-zc-test:release-test sls-zc-test:release-test-ant-rpc-3 sls-zc-test:...
参数 说明 Key名称 您可以在日志服务的 原始日志 页签中查看日志字段的Key,将您需要投递到OSS的字段名(Key)有序填入,在投递时将按照此顺序组织Parquet数据,并使用该key作为Parquet数据列名。除了日志内容的Key外,日志服务还提供保留...
Nginx日志是运维网站的重要信息,日志服务支持通过Nginx模式快速采集Nginx日志并进行多维度分析。本文介绍如何通过日志服务控制台创建Nginx配置模式的Logtail配置采集日志。前提条件 已创建Project和Logstore。更多信息,请参见 创建...
Apache日志是运维网站的重要信息,日志服务支持通过Apache配置模式快速采集Apache日志并进行多维度分析。本文介绍如何通过日志服务控制台创建Apache配置模式的Logtail配置采集日志。前提条件 已创建Project和Logstore。更多信息,请参见 ...
背景信息 Nginx是一款主流的网站服务器,当您选用Nginx搭建网站时,Nginx日志是运维网站的重要信息。传统模式下,需使用CNZZ等方式,在前端页面插入JS,记录访问请求。或者利用流计算、离线计算分析Nginx访问日志,此方式还需要搭建环境,...
创建AnalyticDB MySQL投递任务后,日志服务自动为每个投递任务生成一个仪表盘...日志详情 在 详情日志 区域,查看已投递的日志详情。您也可以在当前Project下的 internal-export-log 日志库中,通过关键词ERROR或WARNING查看完整的错误日志。
创建数据加工任务后,日志服务默认为每个加工任务创建一个仪表盘,您可以在仪表盘中查看数据加工任务运行指标。本文介绍加工任务运行指标详情及如何查看数据加工仪表盘。查看仪表盘 创建加工任务后,您可以在 数据加工概览 页面查看该任务...
查看日志模板发现作业进度 登录 日志服务控制台。查看 作业详情 页面。在 日志应用 区域的 智能运维 页签中,单击 智能异常分析。在实例列表中,单击目标实例。在左侧导航栏中,选择 分析任务>文本分析>日志模板发现。在 作业资源 页签,...
如果后面再次出现相同的日志类别的日志,文本分析作业会定义一个新的日志类别。例如系统异常时输出Error日志,系统恢复后不再出现该日志,等下次系统异常(超过最大静默时间),再次输出Error日志时,作业会提示出现新的日志类别。默认值为...
例如,使用SQL语句分析网站访问日志,对网站的访问异常进行快速排查和问题分析,并查看读写延时、运营商分布等信息。追踪CC攻击者来源 DDoS高防的网站访问日志中记录了CC攻击者的分布及来源。通过对网站访问日志进行实时查询与分析,您可以...
日志服务如何存储、管理用户的日志?日志库(Logstore)是日志服务中的日志存储和查询的基本单元,通常用于存储一类日志数据。目前,支持在控制台或者通过API完成对日志库的增删改查操作。日志库创建完成后,用户通过API或SDK向指定日志库...
日志库 用于存储函数调用日志的日志服务Logstore。日志分割规则 是否启用日志分割规则。启用:启用后,函数计算 将按日志分割规则进行切分日志,即按照行首是否带有日期进行切分。例如日志开头是2021-10-10,则该部分和后面连续不带日期的...
但是只支持关闭审计日志的采集功能,不支持关闭慢日志和运行日志的采集功能。在 开启审计日志 对话框中,设置 保存时间,然后单击 确认。其中,保存时间 的取值范围为1~365。相关操作 开启CloudLens for Redis后,您还可以在 接入管理 页签...
您可以在数据投递概览页面管理OSS投递任务,包括查看OSS投递任务的基础信息、统计报表,修改配置并重启任务、删除OSS投递任务等操作。前提条件 已创建OSS投递任务。具体操作,请参见 创建OSS投递任务(新版)。已开启任务运行日志。具体...
查询和分析 单击目标PolarDB MySQL集群对应的 日志查询,选择对应的日志,系统将跳转至对应的Logstore中。您可以在Logstore中查看对应的原始日志,并执行查询分析操作。具体操作,请参见 查询和分析日志。单击目标PolarDB MySQL集群对应的 ...
您可以通过CloudLens for RDS采集RDS实例的审计日志、错误日志和慢日志,基于采集到的日志进行后续的审计、分析、告警等操作。手动采集功能采集单个RDS实例的审计日志、错误日志和慢日志,自动化采集功能采集符合条件的多个RDS实例(包括...
您可以在数据投递概览页面管理MaxCompute投递任务,包括查看MaxCompute投递任务的基础信息、统计报表,修改配置并重启任务、删除MaxCompute投递任务等操作。前提条件 已创建MaxCompute投递任务。具体操作,请参见 创建MaxCompute投递任务...
进入存储目标Logstore查看VPC流日志的公网流量。新的日志数据,只保留公网日志。您可以输入查询和分析语句,对公网流量的请求来源城市和目的地城市进行查询分析。例如:*|select ip_to_city(srcaddr)as sourceAddr,ip_to_city(dstaddr)as ...
如果下发Logtail配置后,日志文件无更新,则Logtail不会采集该文件中的日志。更多信息,请参见 读取文件。只支持采集容器默认存储或挂载到本地的文件中的日志,暂不支持其他存储方式。采集到日志后,您需要先创建索引,才能在Logstore中...