查询MNS日志
阿里云消息服务（MNS）日志推送到日志服务后，可进行实时查询，本文介绍实时查询的常用场景及操作步骤，您也可以通过多个关键字组合方式实现更加复杂的查询。前提条件 已采集到MNS日志。具体操作，请参见 MNS日志。已配置索引。具体操作，...
Spark Streaming消费
日志服务采集到日志数据后，您可以通过运行Spark Streaming任务消费日志数据。日志服务提供的Spark SDK实现了Receiver模式和Direct模式两种消费模式。Maven依赖如下：<dependency><groupId>...
选择网络
网络类型 阿里云内网：阿里云内网为千兆共享网络，日志数据通过阿里云内网传输比公网传输更快速、稳定，内网包括VPC和经典网络。公网：使用公网传输日志数据，不仅会受到网络带宽的限制，还可能会因网络抖动、延迟、丢包等影响数据采集的...
SQL命令管理数据库
您可以执行以下命令，查询SQL Server实例的所有数据库的数据文件和日志文件的路径信息：SELECT db_name(database_id),physical_name FROM sys.master_files;删除数据库 执行如下命令，删除数据库：DROP DATABASE[TestDb]需注意，若您在删除...
快速使用WAF日志服务
Web应用防火墙（Web Application Firewall，简称WAF）日志服务通过阿里云日志服务实时地采集已接入WAF防护的网站业务的全量日志，并对采集到的日志数据进行查询与分析，以丰富的仪表盘形式展示查询结果，满足等保合规要求和网站业务的防护...
使用前须知
阿里云对象存储（OSS）联合日志服务推出OSS访问日志实时查询功能，帮助您完成OSS的操作审计、访问统计、异常事件回溯和问题定位等工作。本文介绍OSS日志实时查询功能相关的功能优势、资产...了解OSS访问日志数据格式请参考文档 日志字段详情。
开启或关闭日志服务
按量付费实例 警告 关闭日志服务，将导致日志服务自动创建的WAF专属日志库（Logstore）以及日志库中记录的日志数据被清除。请确认不再使用日志服务后，再进行该操作。登录 Web应用防火墙3.0控制台。在顶部菜单栏，选择WAF实例的资源组和...
日志服务监控审计
服务日志 日志服务提供服务日志功能，支持记录Project内的用户操作日志等多种日志数据，并提供多种分析维度的仪表盘。您可以通过多种方式实时掌握日志服务的使用状况、提高运维效率。当前Project产生的所有日志数据都会被分类保存到特定的...
全局操作函数概览
日志服务LOG DSL（Domain Specific Language）提供近三十种全局操作函数，您可以在数据加工中通过全局操作函数控制加工逻辑。全局操作函数列表如下表所示。函数类型 函数 操作说明 流程控制函数 e_if 多个条件与操作组合。e_if_else 根据...
iOS SDK快速入门
本文介绍如何快速使用日志服务iOS SDK采集日志数据。前提条件 已安装iOS SDK。具体操作，请参见 安装iOS SDK。快速使用 您可以按照以下方式对SDK进行初始化，并同调用 addLog 方法上报日志。重要 iOS SDK支持初始化多个实例，...
使用前须知
实时：DevOps、监控、报警等场景要求日志数据的实时性。结合日志服务强大的大数据计算能力，秒级分析处理实时产生的日志。弹性：可任意设置日志存储周期。Logstore容量可动态伸缩满足业务增长需求。智能：基于达摩院智能AIOps算法，提供...
时间字段转换示例
日志中可能有多个记录时间的字段，例如：_time_：用API/SDK写入日志数据时指定的日志时间，该字段可用于日志投递、查询、分析。日志中原有的时间字段：日志在生成时，用于记录日志事件发生时间的字段，是原始日志的字段。时间字段的格式...
云产品侧额外费用须知
RDS 开启云数据库RDS审计日志采集功能后，会自动开启符合条件（支持MySQL的非基础版，PostgreSQL高可用版）的RDS实例的SQL洞察（SQL审计）功能。SQL洞察（SQL审计）功能的计费说明，请参见 计费项。说明 如果您已为RDS实例开通SQL洞察试用...
日志备份时报：The transaction log for database xx ...
RDS SQL Server数据库实例进行日志备份时，出现 The transaction log for database xx is full due to 'LOG_BACKUP' 事务日志已满的报错，您可以参照本文进行操作，解决报错问题。问题现象 RDS SQL Server数据库实例进行日志备份时，报 The...
Node.js SDK概述
日志服务Node.js SDK封装了日志服务大部分主要的API接口。您可以通过日志服务Node.js SDK方便地调用日志服务大部分主要的API接口。版本说明 更多信息，请参见 Aliyun Log Node.js Release。示例代码 日志服务Node.js SDK提供丰富的示例代码...
GetLogsV2-查询Logstore中的日志数据
查询指定Project下某个Logstore中的原始日志数据，返回结果显示某时间区间中的原始日志（返回结果压缩后传输）。接口说明 日志服务 SDK 目前仅支持 Go、Java、Python 三种语言，OpenAPI 全部已支持。使用过程中注意指定压缩方法，不同语言...
使用前须知
海量：访问日志数据规模很大，处理访问日志需要考虑性能和成本问题。日志中心可自定配置预聚和功能，实时计算聚合指标，计算后的聚合结果可降低几个数量级，使查询速度大大提升。实时：秒级分析处理实时产生的日志。弹性：可任意设置日志...
GetLogsV2
查询指定Project下某个Logstore中的原始日志数据，返回结果显示某时间区间中的原始日志。（返回结果压缩后传输）。日志服务SDK目前仅支持Go、Java、Python三种语言，OpenAPI全部已支持。使用过程中注意指定压缩方法，不同语言实现的压缩...
如何查询日志的来源机器和日志条目
本文主要介绍在日志服务控制台中，如何查询日志的来源机器和日志条目。通过Logtail采集日志时，如果机器组类型为IP地址机器组，则机器组中的机器通过IP地址的方式区分。在查询时，可以通过hostname和自定义配置的IP地址来判断日志的来源...
日志数据预处理与投递
本视频介绍如何对日志数据进行预处理与投递。
查询不到日志的排查思路
配置索引后，只对新写入的日志数据生效。如果您要查询和分析历史数据，请使用重建索引功能。具体操作，请参见 重建索引。您可以在 查询分析 面板中，检查已设置的分词符是否符合要求。更多信息，请参见 配置索引。其他原因 确认您的日志...
使用前须知
云数据库RDS 开启云数据库RDS审计日志采集功能后，会自动开启符合条件（支持MySQL的非基础版本，PostgreSQL高可用版）的RDS实例的SQL洞察（SQL审计）功能，费用详情请参见 计费项。说明 如果您已为RDS实例开通SQL洞察试用版，则开启采集后...
开启日志功能
本文介绍如何开启日志功能，将MNS操作日志推送到日志服务。前提条件 已创建日志服务Project和Logstore。具体操作，请参见 创建项目Project 和 创建Logstore。您的消息服务操作日志只能被推送到相同地域下的日志服务Project中。已授权消息...
使用前须知
实时：DevOps、监控、报警等场景要求日志数据的实时性。负载均衡结合日志服务强大的大数据计算能力，秒级分析处理实时产生的日志。重要 99.9%情况下，日志延迟不超过3分钟。弹性：您可按ALB实例级别开通或关闭访问日志功能，可任意设置日志...
日志库（Logstore）
日志库（Logstore）是日志服务中日志数据的采集、存储和查询单元。日志服务提供标准型（Standard）和查询型（Query）两种类型的Logstore。标准型Logstore：支持日志服务一站式数据分析功能，适用于实时监控、交互式分析以及构建完整的可...
使用前须知
支持导出大批量的日志数据。最佳实践 使用短信服务做运营活动。运营人员获取一批手机号码，其中部分手机号码已经不再使用，发出的短信没有任何效果，浪费运营经费。通过短信日志分析，找出无效的手机号码，节省经费。运营人员发送营销短信...
基础资源
本文介绍项目（Project）、日志库（Logstore）、机器组（MachineGroup）、日志组（LogGroup）、告警等资源的使用限制。说明 扩容操作本身不收取费用，但扩容后的资源将按照 标准价格 进行计费。限制项 说明 备注 项目（Project）您在1个...
HarmonyOS SDK快速入门
本文介绍如何快速使用日志服务HarmonyOS SDK采集鸿蒙设备日志数据。前提条件 已完成日志服务HarmonyOS SDK安装。更多信息，请参见 安装HarmonyOS SDK。初始化SDK 您可以参考以下代码进行SDK初始化。import { AliyunLog,LogCallback } from...
采集Unity3D日志
logstore：日志库名称。更多信息，请参见 管理Logstore。serviceAddr：日志服务项目的地址，详情请参见 服务入口。using UnityEngine;using System.Collections;public class LogOutputHandler:MonoBehaviour {/Register the HandleLog ...
使用前须知
说明 目前，平台操作日志功能支持采集对象存储OSS的平台操作日志、云服务器ECS的平台操作日志、云数据库RDS的平台操作日志、容器服务Kubernetes版ACK的平台操作日志和E-MapReduce的平台操作日志。资产说明 自定义Project和Logstore 该...
数据编码方式
Protocol Buffer格式用于结构化数据交换格式，当用户需要写入日志时，需要把原始日志数据序列化成如下格式的Protocol Buffer数据流，然后才能通过API写入服务端。message Log { required uint32 Time=1;UNIX Time Format message Content {...
消费组监控与告警
同一个消费组下面的消费者共同消费一个Logstore中的日志数据，消费者之间不会重复消费数据。Shard数据模型可以简单理解为一个队列，新写入的数据被加到队尾，队列中的每条数据都会对应一个数据写入时间，下图是Shard的数据模型。消费组消费...
跨地域传输数据
因为发送日志数据时，压缩单位是一个日志组，如果有多种_source_、_topic_、_tag_组合，会产生多个日志组，从而降低压缩率。如果网络不稳定，如何处理？跨地域传输依赖公网网络环境。如果是跨境传输，不能保证网络稳定性。在网络不稳定情况...
PutWebtracking-通过WebTracking批量写入日志
该接口不支持同时写入多个 Topic 的日志数据。使用该接口则表示该 Logstore 打开互联网匿名写入权限，没有经过有效鉴权（不需要 AccessKey），可能产生脏数据。调试 您可以在OpenAPI Explorer中直接运行该接口，免去您计算签名的困扰。运行...
添加过滤器类型的过滤器
在控制台左侧，单击 日志存储，在 日志库 列表中单击目标Logstore。输入查询和分析语句，然后单击 最近15分钟，设置查询和分析的时间范围。例如，查看每分钟的访问PV的示例，其查询和分析语句如下：*|SELECT date_format(_time_-_time_%60,...
机器组简介
为了实现高效的日志数据收集和分类，建议为每个模块创建单独的机器组。用户需要在各个模块的服务器上配置自定义标识，以确保每个服务器能归属于正确的机器组。例如常见网站分为前端HTTP请求处理模块、缓存模块、逻辑处理模块和存储模块，其...
管理日志存储空间
管理日志存储空间 为避免因日志存储空间占满，新的日志数据无法写入专属日志库而造成日志数据不完整的情况，建议您定期关注日志存储空间的使用情况。登录 云防火墙控制台。在左侧导航栏，选择 日志分析>日志分析。在 日志查询 页面右上方，...
PutWebtracking
该接口不支持同时写入多个Topic的日志数据。使用该接口则表示该Logstore打开互联网匿名写入权限，没有经过有效鉴权（不需要AccessKey），可能产生脏数据。调试 您可以在OpenAPI Explorer中直接运行该接口，免去您计算签名的困扰。运行成功...
显示模式
例如当前时间为19:20:31，设置相对时间1小时，表示查询18:20:31~19:20:31的日志数据。整点时间：表示查询最近整点1分钟、15分钟等时间区间的日志数据。例如当前时间为19:20:31，设置整点时间1小时，表示查询18:00:00~19:00:00的日志数据。...
选购资源包
注意 索引流量包、读写流量包和存储包仅支持日志数据（Logstore），不支持时序数据（MetricStore）。读写流量包用于抵扣 读写流量 计费项。索引流量包用于抵扣 索引流量-日志索引 计费项。存储包用于抵扣 存储空间-日志存储 计费项。选择...
- 产品推荐
- 这些文档可能帮助您