分析Nginx访问日志
日志服务支持采集Nginx日志，并进行多维度分析。本文介绍分析网站访问情况、诊断及调优网站和重要场景告警的分析案例。前提条件 已采集Nginx访问日志，详情请参见 使用Nginx配置模式采集日志。在日志采集配置向导中，已根据日志字段自动...
解析Java报错日志
在大数据、高并发场景下的Java应用中，通过有效方式分析Java报错日志并提供运维指导，能有效减轻产品运营维护成本。日志服务支持采集各云产品的Java报错日志，通过数据加工解析Java错误日志。前提条件 已采集各SLS、OSS、SLB、RDS的Java...
日志查询常见问题
在查询时，可以通过hostname和自定义配置的工作IP来判断日志的来源机器。例如，统计日志中不同hostname出现的次数。说明 已配置_tag_:_hostname_的字段索引并开启统计功能。select"_tag_:_hostname_",count(1)as count group by"_tag_:_...
上下文查询
开发人员无需登录服务器，在大量日志中通过关键字检索日志，日志服务支持通过控制台查看指定日志在原始文件中的上下文信息。前提条件 已通过Logtail采集到日志。具体操作，请参见 通过Logtail采集日志。重要 如果您使用了Logtail插件处理...
错误排查概述
如果时间配置没有设置结束时间，检查源Logstore是否有新日志产生，如果没有新日志产生，且特定时间范围内没有日志而且没有历史日志存在，加工任务无法进行。如果选择的是历史时间，确认历史特定时间范围内源Logstore是否有日志。单击加工...
将日志服务数据投递到AnalyticDB MySQL
日志服务采集到日志后，支持将日志投递至云原生数据仓库AnalyticDB MySQL进行存储与分析。本文档介绍将日志投递至AnalyticDB MySQL的操作步骤。说明 投递数据到AnalyticDB MySQL遵循REPLACE INTO语义。REPLACE INTO用于实时覆盖写入的数据...
使用前须知
本日志应用由阿里云日志服务SLS提供，支持用户导入AWS CloudTrail日志，提供存储、查询、分析以及可视化服务。本文介绍该应用的功能、工作原理、资产、费用等信息。重要 本文档为阿里云原创文档，知识产权归阿里云所有，由于本文档旨在介绍...
使用前须知
阿里云对象存储（OSS）联合日志服务推出OSS访问日志实时查询功能，帮助您完成OSS的操作审计、访问统计、异常事件回溯和问题定位等工作。本文介绍OSS日志实时查询功能相关的功能优势、资产详情、费用说明以及使用限制。重要 日志服务还联合...
使用前须知
阿里云日志服务联合短信服务推出短信日志分析功能，近实时采集短信服务全量日志到日志服务。日志服务提供查询、分析、加工、消费等一站式服务，帮助您专注于分析、远离琐碎的查询和整理工作。本文介绍短信日志分析功能相关的资产详情、费用...
浏览器JavaScript SDK
日志服务支持通过Web Tracking自动采集终端用户浏览器的日志。本文介绍如何使用Web Tracking JavaScript SDK自动采集浏览器的用户日志。背景信息 您可以通过Web Tracking采集各种浏览器、小程序、iOS App或Android App的用户信息，例如：...
ActionTrail日志清洗
DLA提供ActionTrail日志自动清洗解决方案，可以将ActionTrail投递到OSS的日志文件转换为DLA中可以直接查询的数据表，同时自动对数据进行分区和压缩，方便您分析和审计对云产品的操作日志。日志分析痛点 ActionTrail是阿里云提供的云账号...
使用Terraform配置日志审计服务
本文介绍如何使用Terraform调用接口配置日志审计服务。前提条件 已安装和配置Terraform。具体操作，请参见 在Cloud Shell中使用Terraform、在本地安装和配置Terraform。背景信息 Terraform是一种开源工具，用于安全高效地预览、配置和管理...
监控日志服务
日志服务提供服务日志功能，用于记录操作日志、消费组延迟日志、Logtail告警日志、Logtail采集日志和Logtail状态日志，帮助您实时掌握日志服务的使用状况，提高运维效率。前提条件 已开通服务日志。更多信息，请参见 开通服务日志。背景...
开启或关闭日志服务
如果您的日志服务产品欠费，WAF日志采集功能将暂停工作。当您及时补缴欠款后，日志采集功能将自动恢复。关于日志库的更多介绍，请参见 管理Logstore。后续步骤 开启日志服务后，您还需要为WAF防护对象开启日志采集，然后WAF才会采集并存储...
采集-多渠道数据
为不同数据源产生的日志创建日志库，例如：wechat-server（存储微信服务器访问日志）wechat-app（存储微信服务器应用日志）wechat-error（错误日志）alipay-server alipay-app deliver-app（送货员App状态）deliver-error（错误日志）web-...
对接DataV
DataV是阿里云的可视化产品，能帮助您通过图形化的界面轻松搭建专业水准的可视化应用，丰富表现日志分析数据。本文档介绍如何通过日志服务对接DataV进行大屏数据展示。前提条件 已采集数据。具体操作，请参见 数据采集。已创建索引。具体...
C SDK
日志服务C Producer是用纯C编写的日志采集客户端，提供更加精简的环境依赖以及更低的资源占用，适用于各类嵌入式/智能设备的日志采集。功能特性 异步 异步写入，客户端线程无阻塞。聚合&压缩上传 支持按超时时间、日志数、日志size聚合数据...
OSS访问日志分析
您可以通过日志服务SLS存储和分析OSS日志数据，也可以将OSS日志数据导出并存储到指定的OSS目录长期保存，然后通过数据湖分析服务对长期保存的OSS日志数据进行分析。通过数据湖分析服务（Data Lake Analytics，DLA）分析OSS日志数据前，您...
使用前须知
阿里云日志服务联合云安全中心联合推出日志分析功能，提供风险威胁数据的实时采集、查询与分析、加工、消费等一站式服务，帮助您全面了解、有效处理服务器的安全隐患，实现对云上资产的集中安全管理。本文介绍云安全中心日志分析功能相关的...
加工原理
本文档主要介绍进行数据加工时日志数据的调度原理，以及加工规则引擎的工作原理。调度原理 日志服务的数据加工功能使用协同消费组对源日志库的日志数据进行流式消费，将每一条日志通过加工规则处理后再输出。调度机制 对每一个加工规则，...
常见问题（FAQ）
外部写入：Delta Lake以事务日志的形式维护其他元数据，以启用ACID事务和读取器的快照隔离。为了确保正确更新事务日志并执行正确的验证，写操作必须通过Databricks Runtime 外部读取：增量表存储以开放格式（Parquet）编码的数据，允许其他...
项目空间运维与监控
背景信息 项目空间的运维能力主要辅助作业开发和工作流生产，前者提供作业开发过程中的日志监控、版本监控和操作审计监控；后者兼容前者的功能，更提供针对调度场景下的监控与告警。在项目维度，设置了运维中心，协助用户监控作业状态，运...
简介
日志服务提供外部存储功能，可用于日志服务与MySQL数据库、阿里云对象存储OSS、托管的CSV文件进行关联。本文介绍日志服务外部存储功能的应用场景、功能优势等信息。应用场景 在日志分析场景中，您可能经常遇到数据分散存储的问题，例如用户...
使用前须知
日志服务联合阿里云DDoS原生防护推出防护日志分析功能。开启防护分析后，您可以通过防护日志查询和分析DDoS原生防护实例上的清洗、黑洞和代播牵引事件信息。帮您排查网站访问异常、分析网站运营情况等。本文介绍DDoS原生防护日志分析功能...
应用场景
日志审计服务、SLB日志中心等日志服务应用中内置了告警监控任务的规则模板，可简化开发人员部分监控任务的构建工作。IT运维（ITOps）IT运维人员需要确保整个IT基础设施的可靠性与稳定性。企业或组织将内部系统的日志或指标数据接入日志服务...
采集-IoT/嵌入式日志
客户端计算与I/O逻辑分离：日志异步输出，不阻塞工作线程。支持多优先级：不同客户端可配置不同的优先级，保证高优先级日志最先发送。本地调试：支持设置本地调试，便于您在网络不通的情况下本地测试应用程序。在以上场景中，C Producer ...
日志审计服务概述
Logstore cloudfirewall_log 仪表盘 云防火墙审计中心 堡垒机 操作命令日志 所有在售地域 V3.2版本及以上 Logstore bastion_log 仪表盘 无 对象存储 资源操作日志 数据操作日志 数据访问日志、计量日志 过期文件删除日志 CDN回流日志 华东1...
Logtail基本问题
采集主机文本日志 通过DaemonSet方式采集Kubernetes容器文本日志 通过Sidecar方式采集Kubernetes容器文本日志 通过DaemonSet-控制台方式采集Kubernetes容器标准输出 Logtail输入插件概述 Logtail是如何工作的？Logtail采集原理包括监听文件...
什么是Logtail
Logtail是日志服务提供的日志采集Agent，用于采集阿里云ECS、自建IDC、其他云厂商等服务器上的日志。本文介绍Logtail的功能、优势、使用限制及配置流程等信息。Logtail多年来一直承载着阿里巴巴集团重要服务的数据采集。每天采集数百万...
开通日志功能
本文介绍如何在移动研发平台EMAS控制台上开通日志功能，将日志推送到日志服务中。前提条件 已开通日志服务。已创建应用。操作步骤 重要 如果您使用RAM用户开通日志功能，则需先为RAM用户授权。具体操作，请参见 RAM用户授权。登录 移动研发...
投递CDN实时日志到SLS来分析用户访问数据
日志分析 CDN实时日志打通了SLS日志服务的日志转存和日志分析能力，预制了CDN基础数据、CDN错误分析、CDN热门资源、CDN用户分析这四张常用分析报表，也支持自定义日志分析策略，可以一站式提供日志存储和日志分析能力，而离线日志目前只...
使用前须知
阿里云日志服务和友盟联合推出实时日志订阅功能，将友盟数据开放平台U-DOP的各类明细数据一键实时同步至日志服务，实现日志实时查询、可视化分析、告警、投递、加工等操作。本文介绍友盟相关日志的资源说明、费用说明和使用限制。资源说明 ...
日志字段详情
本文介绍OSS日志类型及相关的日志字段详情。OSS日志类型 日志类型 说明 访问日志 记录相关OSS Bucket的所有访问日志，实时采集。批量删除日志 记录批量删除日志时具体的删除信息，实时采集。说明 当您调用DeleteObjects接口时，访问日志中...
Flutter SDK概述
版本说明 日志服务Flutter SDK版本通过Dart包官方托管网站发布。更多信息，请参见 Aliyun Log Flutter Release。示例代码 日志服务Flutter SDK提供相应的示例代码，方便您参考或直接使用。更多示例代码，请参见 Aliyun Log Flutter SDK ...
迁移指南
说明 详情可参考Databricks官网文章：迁移指南 将工作负载迁移到Delta Lake 当您将工作负载迁移到Delta-Lake时，您应该注意到以下简化和与apachespark和apachehive提供的数据源相比的区别。Delta Lake自动处理以下操作，您永远不要手动执行...
基于SLS+OSS+DLA构建海量、低成本日志分析方案
方案介绍 对于数据分析人员、开发人员或者运维人员而言，日志数据对分析和诊断问题以及了解系统活动等有着非常重要的作用，日志都是其工作过程中必不可缺的数据来源。为了节约成本，通常情况下日志会被设定一定的保存时间，此类日志称之为...
小程序JavaScript SDK
日志服务支持通过Web Tracking自动采集终端用户小程序的日志。本文介绍如何使用Web Tracking JavaScript SDK自动采集小程序的用户日志。背景信息 您可以通过Web Tracking采集各种浏览器、小程序、iOS App或Android App的用户信息，例如：...
构建字典与表格做数据富化
日志1"{"city":"shanghai","name":"aliyun","age":"10"}"日志2"{"city":"city:nanjing and data>100","name":"Maki","age":"18"} 不同表格构建方式对比：构建方式 优点 缺点 从文本构建 直观、简单、方便。如果内容较多，规则会相对冗长。...
快速入门
Step 2：后台开通PCDN服务 工作人员与用户沟通业务详细需求，用户确定使用PCDN，后台为用户开通PCDN服务。Step 3：添加PCDN加速域名 用户登录 PCDN控制台，进入 域名管理，点击 添加域名。填写域名基本信息（包括业务类型、PCDN加速域名、...
日志审计服务多账号采集配置
方式 说明 全员 日志审计服务自动将资源目录下的所有成员纳入到采集名单中，并采集这些成员中已开启日志采集功能的云产品的日志。新增资源目录成员后，该成员自动被纳入采集名单中。移除资源目录成员后，该成员自动被移出采集名单。自定义 ...
- 产品推荐
- 这些文档可能帮助您