日志查询
为 Web 应用防火墙 WAF（Web Application Firewall）防护对象开启日志采集后，您可以通过日志查询，对防护对象的日志数据进行查询与分析，并基于查询与分析结果生成统计图表、创建告警等。前提条件 已开启WAF日志服务。相关操作，请参见 ...
应用场景
阿里云Elasticsearch具有广泛的应用场景，包括日志分析与运维全观测、信息检索、数据智能等。日志分析与全观测 在复杂业务场景下，海量服务器、物理机、Docker容器、移动设备和IoT传感器等设备中，往往存在着结构分散、种类多样、规模庞大...
create_external_store
注意事项 说明 在进行日志数据查询分析时，日志中的部分信息需要和外部存储（ExternalStore）的信息进行关联查询，从而进一步丰富日志服务中的日志数据。更多信息，请参见 关联外部数据源简介、关联Logstore与OSS外表进行查询和分析 和 ...
快速使用WAF日志服务
日志分析仪表盘包含：运营中心：展示网站的业务运营指标，包含请求趋势、攻击概况等。访问中心：展示网站的访问指标、客户端分布、流量与性能等。安全中心：展示网站的被攻击指标、趋势、来源分布等。您只需设置查询时间，即可直接查询相关...
查询和分析JSON日志的常见问题
首先，在查询和分析JSON日志时，如果数据量很大或结构复杂但相对固定，并且您对查询分析性能有要求时，建议对JSON叶子节点建立字段索引，然后再进行查询分析。如果数据量比较小，出于成本考虑，您可以不对JSON叶子节点建立字段索引，而是...
概述
日志分析仪表盘 仪表盘是日志服务提供的实时数据分析大盘。您可以在仪表盘查看多个基于查询与分析结果的统计图表。WAF日志服务基于常见的业务及防护查询场景，为您预置了运营中心、访问中心、安全中心仪表盘，方便您无需输入查询与分析语句...
什么是MaxCompute
MaxCompute适用于大型互联网企业的数据仓库和BI分析、网站的日志分析、电子商务网站的交易分析、用户特征和兴趣挖掘等。详细发展历程、产品荣誉及客户案例请参见 发展历程 和 客户案例。MaxCompute还深度融合了阿里云如下产品：DataWorks ...
使用前须知
一站式服务 传统的离线日志分析模式需要您先下载日志，再上传至数据仓库，然后在数据仓库进行一系列的清洗和数据模型定义。这一系列操作处理完成后，您才能进行数据分析，整个过程需要较多的时间和人力。CDN实时日志通过日志服务的日志转存...
拓扑图
针对上述拓扑数据，日志服务支持您通过查询和分析语句获取描述拓扑关系的字段，例如通过*|SELECT child,parent,child_type,parent_type FROM log 语句获取 child、child_type、parent 和 child_type。提取字段后，日志服务会根据这些字段...
查询和分析全量日志
网站域名开启DDoS高防全量日志采集后，您可以通过全量日志页面对采集到的日志数据进行实时查询和分析。本文介绍如何查询和分析DDoS高防全量日志。日志采样说明 当QPS流量在实例购买的规格范围内时，系统接近1:1采样，流量越小采样准确率越...
自定义分析数据
本文介绍如何在日志服务Logstore中自定义分析...提供丰富的SQL函数，用于日志分析。更多信息，请参见 函数概览。例如统计各个浏览器的数量，并通过饼图展示。支持以统计图表形式保存查询和分析结果到仪表盘。更多信息，请参见 可视化概述。
通过性能监控分析及优化应用程序的性能
本文介绍如何运用性能监控（火焰图等）工具，分析应用程序的性能数据以及实现应用程序的CPU、内存优化。背景信息 日志服务性能监控平台为开发者提供开放、一站式性能持续分析功能，目前已完全兼容Pyroscope开源SDK和Agent。本实践基于A公司...
查询防护日志
开启防护日志后，您可以通过防护日志查询和分析DDoS原生防护实例上的清洗、黑洞和代播牵引事件信息。前提条件 已开启防护日志功能。更多信息，请参见 开启防护日志。查询分析日志 登录 流量安全产品控制台。在左侧导航栏，选择 网络安全>...
气泡图
简介 气泡图通常用于比较和展示不同类别之间的关系（例如分析数据之间的相关性），通过气泡的位置以及面积大小进行比较。基本构成如下：X轴 Y轴 气泡 操作步骤 登录 日志服务控制台。在Project列表区域，单击目标Project。在 日志存储>日志...
产品架构
日志服务 数据类型 日志服务为Log、Metric、Trace等数据提供大规模、低成本、实时的平台化服务。更多信息，请参见 日志（Log）、时序数据（Metric）、链路数据（Trace）。功能特性 数据采集：日志服务支持通过Logtail、SDK、协议等多种方式...
简介
您可以在 PolarDB-X 1.0 控制台，开通SQL审计与分析功能，进行实时日志分析。同时，PolarDB-X 1.0 依托日志服务，提供开箱即用的报表中心，使您对数据库执行状况、性能、潜在安全问题了如指掌。功能优势 操作简单：轻松配置即可开启，实时...
分析视图简介
Java GC日志分析视页面中每个视图的主要功能 基础信息 基础信息视图首先展示本GC日志的一些基本信息，gc算法，gc线程数，日志覆盖的时间段，当前所选的时间段以及日志时长。接下来问题诊断部分会将gc日志中应用存在的较为严重的问题，标在...
使用前须知
结合日志服务强大的大数据计算能力，秒级分析处理实时产生的日志。弹性：可任意设置日志存储周期。Logstore容量可动态伸缩满足业务增长需求。智能：基于达摩院智能AIOps算法，提供各类指标自动巡检功能，有助于更快、更准确地发现并定位...
矩形树图
简介 矩形树图，即矩形式树状结构图（Treemap），用矩形面积表示数据的大小。各个小矩形的面积越大，表示占比越大。基本构成：计算排列得到的矩形块。操作步骤 登录 日志服务控制台。在Project列表区域，单击目标Project。在 日志存储>日志...
什么是威胁分析与响应
具体支持的云产品和日志信息如下表所示：云厂商 产品名称 日志类型 阿里云 云安全中心（Security Center）云安全中心告警日志、云安全中心配置检查日志、漏洞日志、基线日志 登录流水日志、网络连接日志、进程启动日志、文件读写日志、主机...
构建审计日志的分析方案
将ActionTrail的审计日志定时同步到OSS进行长周期（超过90天）保存，利用Data Lake Analytics将日志数据标准化，利用Quick BI进行审计日志的主题式分析，从而完成海量、低成本的审计日志分析。方案介绍 随着网络信息化的成熟发展、《国家...
集群自定义监控报表
集群数据库 io_write_rt SSStore 每次写入平均耗时 集群数据库 io_read_size SSStore 每秒读取数据量 集群数据库 io_size SSStore 每秒处理数据量 集群数据库 io_write_size SSStore 每秒写入数据量 集群数据库 transaction_multi_...
使用前须知
日志服务联合阿里云负载均衡推出 CloudLens for CLB，提供CLB访问日志分析、配置审计日志分析、云监控事件分析、秒级监控指标分析、实时告警等功能，并提供基于AIOps的自动异常巡检功能。您可以通过 CloudLens for CLB 了解客户端用户行为...
米哈游
然而全球化也带来了数据日志集中采集困难，可靠性低的问题。突增流量 作为一款开放世界冒险游戏，《原神》结合游戏地图内每个地区不同的时节、文化背景创作了丰富的活动内容，同时假期活动及版本更新也将带来流量的突增。因此《原神》便...
支持的云服务
日志数据采集后，需要更多的个性化分析、挖掘，您可以通过DataWorks的数据集成将日志服务数据同步到MaxCompute，通过MaxCompute对日志数据进行个性化、深层次的数据分析、挖掘。更多SLS信息，请参见 日志服务SLS。访问控制RAM RAM是阿里云...
使用前须知
日志服务联合阿里云负载均衡推出CloudLens for ALB，提供ALB 7层日志分析、秒级监控指标分析、实时告警等功能，并提供基于AIOps的自动异常巡检功能。您可以通过CloudLens for ALB了解客户端用户行为、客户端用户的地域分布、请求成功率、...
对接DataV
DataV是阿里云的可视化产品，能帮助您通过图形化的界面轻松搭建专业水准的可视化应用，丰富表现日志分析数据。本文档介绍如何通过日志服务对接DataV进行大屏数据展示。前提条件 已采集数据。具体操作，请参见 数据采集。已创建索引。具体...
应用场景
日志服务的典型应用场景包括：数据采集与消费、数据清洗与流计算（ETL/Stream Processing）、数据仓库对接（Data Warehouse）、日志实时查询与分析。数据采集与消费 通过日志服务LogHub功能，可以大规模低成本接入各种实时日志数据（包括...
统计图表概述
日志服务支持通过统计图表的方式对查询和分析结果进行可视化展示。注意事项 已配置索引并开启分析功能，即在 查询分析 面板中打开对应字段的 开启统计 开关。具体操作，请参见 开启并配置索引。执行查询和分析语句（查询语句|分析语句）后...
查询及分析日志
本文将指导您如何运用查询和分析语句操作日志分析工具，并展示如何查阅和理解查询结果。语句说明 查询语句和分析语句 日志分析的语句分为查询语句和分析语句，查询语句和分析语句之间以竖线（|）分隔。查询语句|分析语句 查询语句的语法为...
开启SQL独享版
当您使用SQL分析时，如果数据量较大，SQL普通版无法在一次查询中完整扫描指定时间段内的所有日志，返回的结果可能不包括所有匹配的数据，增加Shard可以提升读写能力，但只对新写入的数据生效。您可以通过开启SQL独享版，增加计算资源，提升...
产品概述
阿里云流数据处理平台数据总线DataHub是流式数据（Streaming Data）的处理平台，提供对流式数据的发布(Publish)，订阅（Subscribe）和分发功能，让您可以轻松构建基于流式数据的分析和应用。数据总线 DataHub服务可以对各种移动设备，应用...
实时大盘
实时大盘实时更新并展示最近一小时或今天App异常（崩溃、ANR）的关键指标数据。实时大盘用于在发布版本、重要活动等关键时间点实时监控App。前提条件 已接入数据。具体操作，请参见 通过Android SDK接入数据 或 通过iOS SDK接入数据。操作...
SQL查询
工作空间已配置数据源：DataWorks的数据源分为引擎绑定时默认创建的引擎数据源和在数据源配置界面创建的自建数据源，若要操作非引擎数据源，请确保已创建数据源，详情请参见 创建并管理数据源。已拥有某数据源在数据分析模块的查询权限：...
时序图
在时序图中，您可以清晰地观测到数据在某一个周期内的变化，例如：递增性或递减性 增减的速率情况 增减的规律（如周期变化）峰值和谷值 时序图是用于分析数据随时间变化趋势的最佳选择。您也可以绘制多条线用于分析多组数据在同一时间周期...
最佳实践
分析Nginx访问日志 分析Apache日志 分析IIS日志 分析Log4j日志 分析网站日志 查询分析程序日志 分析负载均衡7层访问日志 分页显示查询分析结果 分析行车轨迹日志 分析销售系统日志 数据加工 调用函数清洗数据 事件判断 处理日期时间 数据...
查询和分析时序数据
本文介绍如何在日志服务MetricStore中查询和分析时序数据、设置时序图图例名称等相关操作。前提条件 已采集到时序数据。操作步骤 说明 在日志服务MetricStore查询和分析页面，只支持使用PromQL查询语法。如果您要使用标准SQL语法或SQL+...
雷达图
日志服务提供雷达图，用于展示多维数据。本文介绍雷达图的基本配置。简介 雷达图支持不同数据在相同维度下的对比。例如在一个查询分析结果中包含request_method、total、avg_time和avg_length这4列数据，表示在一定时间范围内各个请求方法...
RDS SQL Server空间不足问题
如果发现实例的空间使用率过高，首先应该在 RDS管理控制台 的 监控与报警 页面中检查数据、日志、临时文件、系统文件各部分的空间使用情况，确认是哪种文件的空间增长过快，并进一步评估能否采取措施释放空间或避免空间快速增长。...
Quick BI v4.4版本说明
发布日期 2022年08月04日 重点升级概览 数据大屏 数据大屏上新10个新零售大屏模板系列。仪表板开发者提效 仪表板支持新增撤销回退功能。地图样式&字段面板优化、桑基图支持配色设置、趋势分析表格支持非日累计的分析方式。移动端交互式分析...
- 产品推荐
- 这些文档可能帮助您