机器组简介
在VPC等自定义网络环境中，可能出现不同服务器IP地址冲突的问题，导致日志服务无法管理Logtail。使用自定义标识可以避免此类情况的发生。多台服务器通过同一个自定义标识实现机器组弹性伸缩。您只需为新增的服务器配置相同的自定义标识，...
米连科技
日志服务帮助米连科技解决了数据分散、问题排查效率低、数据分析手段少的问题，提升了IT运维、数据运营、风控等方面的能力。公司简介 伊对是北京米连科技有限公司旗下品牌，公司成立于2015年，是国家高新技术企业和北京中关村高新技术企业...
分析Nginx访问日志
nginx_Nginx访问日志仪表盘包括来源IP分布、请求状态占比、请求方法占比、访问PV/UV统计、流入流出流量统计、请求UA占比、前十访问来源、访问前十地址和请求时间前十地址等信息，全方位展示网站访问情况。您还可以使用日志服务的查询分析...
常见问题和错误排查
本文介绍日志服务所提供的Elasticsearch兼容接口的常见问题和错误排查方法。重要 本文档为阿里云原创文档，知识产权归阿里云所有，由于本文档旨在介绍阿里云与第三方产品交互的服务能力，因此可能会提及第三方公司或产品等名称。常见问题 Q...
查询分析程序日志
本文通过查询、关联分析、统计分析等场景介绍如何使用日志服务对程序日志进行查询和分析。背景信息 程序日志内容全、存在一定共性，它是运维程序的重要信息，但程序日志具有如下不便于存储与分析的特性：格式随意：不同开发者的代码风格...
管理日志监控项
统计方法 在计算周期内根据选定的统计方法对日志数据进行聚合处理。如果字段值是数值型，可以使用所有统计方法，否则只能使用 计数 和 countps 两种聚合算法。取值：计数：计算统计周期内指定字段数值的个数。求和：计算1分钟内指定字段...
管理日志监控项
统计方法 在计算周期内根据选定的统计方法对日志数据进行聚合处理。如果字段值是数值型，可以使用所有统计方法，否则只能使用 计数 和 countps 两种聚合算法。取值：计数：计算统计周期内指定字段数值的个数。求和：计算1分钟内指定字段...
日志投递MaxCompute后，如何检查数据完整性
如果不考虑写入了历史数据等问题，在日志实时写入的情况下，有以下两种方法判断分区数据是否已完整：通过API、SDK或控制台判断（推荐）使用 API、SDK 或者控制台获取指定Project/Logstore投递任务列表。例如API返回任务列表如下。控制台会...
资源包介绍
系统每天会统计您使用的日志服务用量，在资源包额度范围内直接抵扣。在有效期内，每月有相同的资源额度。当月额度被用完后，自动转为按量付费方式。重要 新版资源包的优先级高于节省计划，如果同时拥有两者，则优先抵扣新版资源包。从2024...
查询和分析日志
创建索引后，您可以在查询和分析页面对采集到的日志进行实时查询和分析。前提条件 已 创建索引。...相关文档 查询与分析常见问题 时间字段转换示例 查询和分析网站日志 查询和分析JSON日志 分析Nginx访问日志 分析负载均衡7层访问日志
管理Logstore
删除Logstore必须提前删除所有Logtail配置，删除日志是通过设置更短的保存时间，本文介绍Logstore选型、创建及升级Logstore、删除Logstore与日志等操作。基本概念 日志库（Logstore）是日志服务中日志数据的采集、存储和查询单元。每个...
消费-计量计费日志
Inflow>300000 and Method=Post*and Status in[200 300]您也可以在查询后加上统计分析：Inflow>300000 and Method=Post*and Status in[200 300]|select max(Inflow)as s,ProjectName group by ProjectName order by s desc 存储日志并进行T...
CloudLens概述
CloudLens基于日志服务构建统一的云产品可观测能力，通过日志、指标、配置计量等数据的关联分析，提供阿里云产品的用量分析、性能监控、安全分析、数据保护、异常检测、访问分析等服务。从成本、性能、安全、数据保护、稳定性、访问分析六...
使用CloudLens for SLS分析资源用量
本文介绍在CloudLens for SLS中自定义分析 日志服务 资源用量的常用场景。背景信息 CloudLens for SLS推出账单数据（免费），用于监控计费用量。账单数据来源于费用中心，日志服务 使用账单拉取加工任务将数据拉取到表格存储中进行存储...
使用前须知
阿里云视频直播产品联合日志服务推出实时日志推送功能，支持将指定域名的CDN原始访问日志实时推送至日志服务进行分析，便于您快速发现和定位视频直播问题等。本文介绍实时日志推送功能相关的资产、费用及使用限制等信息。资产详情 自定义的...
自助分析阿里云账单
日志服务联合费用中心推出自助分析功能，一键开通后自动导入账单，并提供可视化的账单分析报表，帮助您提高账单分析的效率。前提条件 已开通日志服务。背景信息 阿里云资源具备随时可用、规模弹性、规格丰富的特征，保证您在任意时刻都有...
使用前须知
阿里云视频点播产品联合日志服务推出实时日志推送功能，支持将指定域名的CDN原始访问日志实时推送至日志服务进行分析，便于您快速发现和定位视频播放推流问题、分析点播观看用户数据等。本文介绍实时日志推送功能相关的资产、费用及使用...
监控分析平台对比
索引设置：每个应用的两类日志，分别按照时间周期性创建索引，根据数据大小合理设置Shard数，单Shard以30~50 GB为宜，但是各应用的日志量很难准确估计，常在遇到写入或查询问题后再调整，然而重建索引的消耗又非常大。Kafka消费设置：使用...
日志服务与Elasticsearch的兼容性
为了解决这些问题，日志服务提供了Elasticsearch兼容接口，最大程度保障Elasticsearch查询分析方案迁移的平滑度，降低将日志引擎从Elasticsearch切换为日志服务的使用难度。日志服务所提供的Elasticsearch兼容接口，其兼容机制是将...
任务监控大盘异常处理
本文通过具体案例介绍如何在 CloudLens for SLS 中解决Project任务监控大盘异常问题。重要 阿里云账号具有所有资源的所有权，可以直接操作 CloudLens for SLS。但是使用RAM用户操作时，需确保RAM用户具有 CloudLens for SLS 的只读权限或...
解析Java报错日志
需要逐步查找定位问题，并修改正则表达式，直到加工任务能够成功解析各个不同类型的错误日志。步骤三：分析错误日志数据 基于加工后的错误日志，可以进行错误日志数据分析。本文只对日志服务的Java错误日志做分析。在Project列表区域，单击...
使用前须知
重要日志：包括Logstore粒度的消费组消费延时日志、Logtail相关的错误、心跳和统计日志，存储在指定Project下名为internal-diagnostic_log的Logstore中。详细日志：包括Project内所有资产的创建、修改、更新、删除操作日志和数据读写日志，...
使用前须知
日志服务提供基于原生OpenTelemetry协议的分布式链路追踪功能，支持各类Trace数据的接入、存储、分析、可视化、告警、人工智能运维等。本文介绍日志服务分布式链路追踪功能（Trace服务）相关的背景信息、方案介绍、资产说明、费用等。重要 ...
分钟统计/无 Key
背景信息 分钟统计/无 Key 是通过对日志固定位置的关键字筛选，统计单个指标数据，如统计某个接口被调用的总量等。更多监控类别应用场景，请参见 监控类型概述。配置自定义监控主要包括如下的步骤：选择监控产品 填写基本信息 采集筛选 ...
函数总览
str_count 统计字符串里某个字符出现的次数。str_find 判断原字符串中是否包含指定的子字符串。str_rfind 查找字符串中指定字符最后一次出现的位置。str_endswith 判断字符串是否以指定后缀结尾。str_startswith 判断字符串是否以指定字符...
基于日志关键字设置告警
日志服务提供免运维、高性能、配置灵活的告警方案，帮助您实现基于日志关键字的告警。案例一：出现关键字即触发告警 如果您希望日志中出现目标关键字时，就能触发告警，则您可以参考本案例设置查询语句和告警监控规则。查询语句 选择查询...
使用前须知
阿里云微服务引擎MSE联合日志服务推出网关日志投递功能，用于记录网关访问日志，帮助您了解客户端用户行为、客户端用户的地域分布情况，及时排查问题。本文介绍网关日志投递功能相关的资产、费用、使用限制等信息。资产详情 Project和...
复杂JSON数据加工
status":"red"}]overal_status:yellow servers:[{"host":"192.0.2.1","status":"green"},{"host":"192.0.2.2","status":"green"}]service:search_service 对主题是 overall_type 的日志，统计 client_count 和 server_count。e_if(e_...
使用前须知
日志中心可自定配置预聚和功能，实时计算聚合指标，计算后的聚合结果可降低几个数量级，使查询速度大大提升。实时：DevOps、监控、报警等场景要求日志数据的实时性。结合日志服务强大的大数据计算能力，秒级分析处理实时产生的日志。弹性：...
扫描（Scan）分析概述
针对上述问题，日志服务推出扫描查询和扫描分析功能，用于查询和分析日志，无需对扫描的目标字段建立索引。关于扫描查询的更多信息，请参见 扫描（Scan）查询概述。基本语法 基本语法 在标准SQL前面，加上 set session mode=scan;表示使用...
自定义分析告警日志
日志服务以日志形式记录告警的整个生命周期，并存储到专属的Logstore中。您可以通过告警日志，了解监控对象的整体状况、稳定性等。本文介绍在专属Logstore中进行告警日志自定义分析的操作步骤。背景信息 在首次使用日志服务告警时，系统会...
使用前须知
日志中心可自定配置预聚和功能，实时计算聚合指标，计算后的聚合结果可降低几个数量级，使查询速度大大提升。实时：秒级分析处理实时产生的日志。弹性：可任意设置日志存储周期，Logstore容量可动态伸缩满足业务增长需求。智能：基于达摩院...
配置实时日志推送
通过实时日志推送功能，可以实时地收集指定加速域名在指定区域生成的日志，并将其投递到日志服务（简称SLS）进行分析，以便快速监控和定位业务问题。前提条件 使用该服务前，请确保您已开通 日志服务SLS。相关概念介绍 域名迁移：A域名的...
漏斗图
简介 漏斗图适用于业务流程比较规范、周期长、环节多的单流程单向分析，通过漏斗各环节业务数据的比较能够直观地发现和说明问题所在的环节，进而做出决策。漏斗图用梯形面积表示某个环节业务量与上一个环节之间的差异。操作步骤 登录 日志...
使用GetLogs接口查询日志
完成日志采集后，您可以调用GetLogs接口查询采集到的日志。本文介绍GetLogs接口示例。前提条件 已完成日志采集。具体操作，请参见 日志采集。已创建RAM用户并完成授权。具体操作，请参见 创建RAM用户并完成授权。已配置环境变量 ALIBABA_...
分析视图简介
接下来问题诊断部分会将gc日志中应用存在的较为严重的问题，标在时间轴上，下方会指出这些问题中最严重，最应该优先解决的问题，给出问题发生的时间段（可通过点击时间来查看该时间段的数据以便于分析问题），然后给出常见的排查和调优方法...
导入云监控数据
您可以通过数据导入方式，将阿里云云监控数据导入到日志服务的MetricStore，实现时序数据的查询分析、加工等操作。前提条件 已创建项目Project。已创建MetricStore。创建导入配置 登录 日志服务控制台。单击控制台页面右侧的 快速接入数据 ...
导入Amazon S3文件
阿里云日志服务SLS支持导入Amazon S3中的日志文件。您可以通过数据导入的方式将Amazon S3的日志文件导入到阿里云的日志服务，实现日志的查询分析、加工等操作。目前日志服务只支持导入5GB以内的S3文件，压缩文件大小按照压缩后的大小计算。...
日志聚类
本文介绍日志聚类功能及其操作，包括开启日志聚类、查看聚类结果和原始日志、对比不同时间段的聚类日志数量等。前提条件 已创建Standard Logstore。具体操作，请参见 创建Logstore。已采集日志。具体操作，请参见 数据采集。已配置索引。...
导入Kafka数据
本文介绍如何将Kafka数据导入到日志服务，实现数据的查询分析、加工等操作。前提条件 已有可用的Kafka集群。已创建Project和Logstore。具体操作，请参见 创建项目Project 和 创建Logstore。版本说明 目前，只支持Kafka 2.2.0及以上版本。...
- 产品推荐
- 这些文档可能帮助您