技术发展趋势
规模爆炸性增长 随着8K、5G、IoT、大数据、AI等系列技术的发展，数据量迎来了爆发式增长。IDC在《Data Age 2025》的报告中预测，从2018年到2025年，全球数据将从33ZB急速增长到175ZB，比2016年产生的数据量增加了十倍。这表明注重数据价值...
日志常见问题
释放云防火墙后，日志分析数据是否会保留？日志审计记录是否支持导出？为什么云防火墙的日志总数与DDoS高防、WAF的日志总数不一致？为什么云防火墙的日志总数与DDoS高防、WAF的日志总数不一致？因为云防火墙日志记录对象是四层流量的入向和...
使用前须知
DDoS原生防护分析功能公测中，提供防护流量全量日志分析和报表功能，公测期间免费。DDoS原生防护将日志推送到日志服务后，当Logstore的计费模式为按使用功能计费时，在日志服务进行查询、分析、告警监控、可视化等操作免费，进行流量读取、...
什么是实时日志
日志分析 CDN实时日志打通了SLS日志服务的日志转存和日志分析能力，预制了CDN基础数据、CDN错误分析、CDN热门资源、CDN用户分析这四张常用分析报表，也支持自定义日志分析策略，可以一站式提供日志存储和日志分析能力，而离线日志目前只...
Logstore
按写入数据量计费模式支持完整日志服务功能集合，增值功能如查询分析、数据加工、智能告警、消费投递等能力均不产生额外费用，但存在配额限制，具体说明如下。配额限制 说明 数据加工量 单个Logstore每月支持的最大加工数据量为100 TB。...
开通审计日志
背景信息 阿里云日志服务SLS（Log Service）是针对日志类数据的一站式服务，由阿里巴巴集团经历大量大数据场景锤炼而成。无需开发就能快捷完成日志数据的采集、消费、投递以及查询分析，是提升运维与运营效率的极佳工具。云数据库MongoDB将...
SLS的OSS投递数据源
业务场景 企业会把服务日志、行为日志等数据存储在日志服务SLS中，当数据量较大时，可以通过投递的方式把全量数据归档到OSS。以前这些数据不可进行分析计算，使用DLA的元信息发现功能，能够一键构建数据湖的元数据，接入DLA的统一数据分析...
规格容量评估
小规格实例参考：单个数据节点的Shard数量=当前节点的内存大小*30 大规格实例参考：单个数据节点的Shard数量=当前节点的内存大小*50 说明 评估Shard数量时，还需结合数据量进行分析，建议TiB级别以下的数据量参考小规格实例进行评估。...
解决SQL Server实例空间满自动锁的问题
系统文件空间使用量 master、msdb和model数据库的数据文件和日志文件，以及SQL Server实例目录下面的一些系统文件（错误日志和dll文件等）的大小。方法二：通过SQL语句查看所有数据库的数据文件（mdf和ndf文件）和日志文件（ldf文件）的...
解决SQL Server实例空间满自动锁的问题
系统文件空间使用量 master、msdb和model数据库的数据文件和日志文件，以及SQL Server实例目录下面的一些系统文件（错误日志和dll文件等）的大小。方法二：通过SQL语句查看所有数据库的数据文件（mdf和ndf文件）和日志文件（ldf文件）的...
概述
在进行日志数据查询分析时，日志中的部分信息需要和外部存储（ExternalStore）的信息进行关联查询，从而进一步丰富日志服务中的日志数据。外部存储简介 外部存储和Logstore的区别 项目 外部存储（ExternalStore）Logstore 数据存储 日志...
查询和分析全量日志
已开通全量日志分析功能并为网站域名开启了全量日志采集。具体操作，请参见 概述。操作步骤 登录 DDoS高防控制台。在顶部菜单栏左上角处，选择地域。DDoS高防（中国内地）：选择 中国内地 地域。DDoS高防（非中国内地）：选择 非中国内地 ...
扫描（Scan）分析概述
针对数据量大的场景，推荐结合查询语句（需要创建索引），先过滤日志。是否收费 索引流量和索引存储费用。更多信息，请参见 按使用功能计费模式计费项。扫描部分按照流量收费，即基于索引查询后扫描命中的数据量收费。使用限制 扫描分析...
ActionTrail日志清洗
日志分析痛点 ActionTrail是阿里云提供的云账号资源操作记录的查询和投递服务，可用于安全分析、资源变更追踪以及合规性审计等场景。您可以通过 ActionTrail控制台 查看各个云产品的操作日志。对于30天以内的日志，ActionTrail支持投递到 ...
流式数据通道概述
热数据存储量会出现增长情况：在开启异步处理的场景下（Merge或Zorder），MaxCompute流式数据通道服务会对最近一小时写入的数据保存两份，一份为原始数据，一份为异步聚合后的数据，数据的存储量会有一定程度的冗余。冗余数据的保存周期...
RDS SQL Server I/O高问题
实例I/O过高时，容易影响查询性能。本文介绍查看I/O吞吐情况的方式以及如何排查I/O高...如果调整备份时间无法避免全量备份操作和业务的冲突，建议升级实例的磁盘性能等级，或者拆分数据，减少单个实例上的数据量，缩短全量备份所需的时间。
API概览
SQL独享实例 API 标题 API概述 CreateSqlInstance 创建SQL独享实例 当您使用SQL分析时，如果数据量较大，SQL普通版无法在一次查询中完整扫描指定时间段内的所有日志，返回的结果可能不包括所有匹配的数据，增加Shard可以提升读写能力，但只...
最佳实践
分析Nginx访问日志 分析Apache日志 分析IIS日志 分析Log4j日志 分析网站日志 查询分析程序日志 分析负载均衡7层访问日志 分页显示查询分析结果 分析行车轨迹日志 分析销售系统日志 数据加工 调用函数清洗数据 事件判断 处理日期时间 数据...
使用前须知
阿里云日志服务联合云安全中心联合推出日志分析功能，提供风险威胁数据的实时采集、查询与分析、加工、消费等一站式服务，帮助您全面了解、有效处理服务器的安全隐患，实现对云上资产的集中安全管理。本文介绍云安全中心日志分析功能相关的...
使用前须知
功能优势 时效性高：开通服务后，日志数据自动投递到日志服务，可查看实时日志分析结果，日志时效性在3分钟以内。字段丰富：实时日志提供更加丰富的日志字段。更多信息，请参见 日志字段详情。业务合规：实时日志采集投递具备合规性。强大...
按使用功能计费模式计费项
日志服务在采集日志时，会自动压缩日志数据量，压缩率为10%~20%。日志服务按使用功能计费模式计费项如下所示，详细价格说明请参见 产品定价。计费项 计费说明 付费方式 免费额度 存储空间-日志热存储 包括日志（压缩后）的存储量和日志（未...
通过性能监控分析及优化应用程序的性能
本文介绍如何运用性能监控（火焰图等）工具，分析应用程序的性能数据以及实现应用程序的CPU、内存优化。背景信息 日志服务性能监控平台为开发者提供开放、一站式性能持续分析功能，目前已完全兼容Pyroscope开源SDK和Agent。本实践基于A公司...
投递CDN实时日志到SLS来分析用户访问数据
日志分析 CDN实时日志打通了SLS日志服务的日志转存和日志分析能力，预制了CDN基础数据、CDN错误分析、CDN热门资源、CDN用户分析这四张常用分析报表，也支持自定义日志分析策略，可以一站式提供日志存储和日志分析能力，而离线日志目前只...
背景信息以及准备工作
DLA可以在不移动OSS日志文件的情况下读取并分析日志文件数据，定位服务故障原因等。对于一个服务而言，日志文件记录了服务运行的所有详细信息。在进行故障排除、状态监控或者预测告警时，都需要对日志文件进行查询分析。阿里云对象存储服务...
使用前必读
开通日志分析后，系统会在日志服务控制台创建专属于云安全中心的Project，并在该Project下创建专属Logstore，云安全中心全量日志数据集中存放在专属Logstore（日志库）中。本文介绍在使用云安全中心日志分析功能前您需要了解的日志存储相关...
应用场景
例如，当应用日志用于离线日志分析时，搜索单个日志记录同样不可或缺，而构建各自独立的工作流来采集每种类型的数据再导入到各自的专用系统显然不切实际，利用 云消息队列 Kafka 版 作为数据中转枢纽，同份数据可以被导入到不同专用系统中...
投递CDN实时日志到SLS来分析用户访问数据
日志分析 CDN实时日志打通了SLS日志服务的日志转存和日志分析能力，预制了CDN基础数据、CDN错误分析、CDN热门资源、CDN用户分析这四张常用分析报表，也支持自定义日志分析策略，可以一站式提供日志存储和日志分析能力，而离线日志目前只...
投递CDN实时日志到SLS来分析用户访问数据最佳实践
日志分析 CDN实时日志打通了SLS日志服务的日志转存和日志分析能力，预制了CDN基础数据、CDN错误分析、CDN热门资源、CDN用户分析这四张常用分析报表，也支持自定义日志分析策略，可以一站式提供日志存储和日志分析能力，而离线日志目前只...
数据加工概述
全托管、免运维，与阿里云大数据产品、开源生态集成。费用说明 若Logstore的计费模式为按写入数据量计费时，数据加工服务不产生费用，仅从日志服务公网域名所在接口拉取数据时，会产生外网读取流量（按照压缩后的数据量计算）。具体内容，...
查看审计日志
在左侧导航栏，选择 数据审计>日志分析。在 日志分析 页面左侧产品名称导航栏，单击目标产品名称。在 分析模式 下，查看日志记录。选择需要查看审计活动的时间段后，DSC按照时间由近及远的展示数据库活动。单击目标记录操作列的 详情，可...
监控分析平台对比
运营、分析：大规模数据分析，如OLAP场景，秒级到小时级延时。资源需求估算难 对于快速发展的业务，各类数据的规模在一开始是很难准确估算的，经常遇到：新业务接入，数据量无准确估算参考。业务快速发展，数据暴增。数据使用需求变动，...
使用前须知
当涉及的Logstore的计费模式为按写入数据量计费时，流日志捕获的流量信息存储在日志服务中，您可以在日志服务中查看和分析相关数据，日志服务将根据原始写入数据量等进行收费。更多信息，请参见 按写入数据量计费模式计费项。使用限制 仅...
查看与分析API调用日志（公测）
数据服务提供日志分析功能，您可以使用日志分析功能对调用请求进行分析，当调用请求出现异常时，智能分析能帮助您快速定位问题，并给出诊断结果和建议。使用限制 仅DataWorks专业版及以上版本，支持使用智能分析功能。您目前可以免费体验，...
应用场景
互联网类应用 Cassandra能够支持大并发低延时的访问需求，具备高可用和弹性扩容能力，适合日志、消息、feed流、订单、账单、网站等各种大数据量的互联网在线应用场景。多活 Cassandra原生支持多DC部署方式，实现更好的可用性和容灾能力。云...
快速使用WAF日志服务
Web应用防火墙（Web Application Firewall，简称WAF）日志服务通过阿里云日志服务实时地采集已接入WAF防护的网站业务的全量日志，并对采集到的日志数据进行查询与分析，以丰富的仪表盘形式展示查询结果，满足等保合规要求和网站业务的防护...
日志类型
日志服务提供的服务日志功能可记录多种日志类型，本文介绍各种日志类型及不同日志类型的日志字段。日志类型 开启服务日志功能时，您可以选择服务日志的类型，具体说明如下表所示。重要 为保证您自定义查询语句的兼容性，建议您在查询语句中...
使用数据实验室
日志服务数据实验室为您提供各种场景的模拟日志数据及各种公共数据集数据，便于您熟悉日志服务的查询分析、查看报表等各种操作。本文介绍如何使用阿里云数据实验室。前提条件 已开通日志服务。首次登录 日志服务控制台 时，根据页面提示...
使用前须知
阿里云DDoS高防（新BGP）、DDoS高防（国际）联合日志服务推出全量日志分析功能，提供网站访问日志、CC攻击日志的实时采集、查询、分析、加工、消费等一站式服务，帮助您排查网站访问异常、追踪CC攻击者来源、分析网站运营情况等。...
常见问题
如果数据量突然激增，日志服务如何保证服务不受影响？日志服务中的数据如何实现低成本存储？日志服务中的数据可以保存多久？如何开始使用日志服务？如果有需求，如何联系？什么是日志服务？日志服务SLS是云原生观测与分析平台，为Log、...
使用前须知
阿里云日志服务Nginx日志中心提供日志分析、秒级监控指标分析、实时告警等功能，并提供基于AIOps的自动异常巡检功能。您可以通过Nginx日志中心了解客户端用户行为、客户端用户的地域分布、请求成功率、响应延迟等。本文介绍Nginx日志中心...
- 产品推荐
- 这些文档可能帮助您