日志类别及字段说明
购买日志分析存储容量后，云安全中心默认开启了安全日志、网络日志、主机日志，分别记录系统中的安全事件、网络流量情况和主机的活动。本文介绍云安全中心支持的日志类型以及每种日志类型的字段说明。日志分类 云安全中心分为安全日志、...
get_logs
调用CLI命令查询指定Project下某个Logstore中的日志。该命令适用于精确查询场景。在使用该命令时，您需要构造JSON格式的request请求配置文件，在JSON文件中，您可以灵活、准确地配置查询请求。命令格式 aliyunlog log get_logs-request=[-...
背景信息以及准备工作
DLA可以在不移动OSS日志文件的情况下读取并分析日志文件数据，定位服务故障原因等。对于一个服务而言，日志文件记录了服务运行的所有详细信息。在进行故障排除、状态监控或者预测告警时，都需要对日志文件进行查询分析。阿里云对象存储服务...
快速入门Java GC日志分析
通常我们会先查看GC类型，GC线程数，日志覆盖的时间段等信息，排除误操作，确认该文件和我们要分析的应用匹配。接下来可以调整一下【分析配置】，选择出现超时问题的时段。由于对暂停时间要求较高，可以把长暂停时间阈值设置到200ms。接...
存储空间占用情况
审计日志文件作为HDFS文件系统目录的一部分，存储在/.sysinfo 路径下。您可以通过hdfs du命令查看HDFS审计日志数据的空间占用情况。OSS-HDFS 文件清单数据 OSS-HDFS服务支持文件清单导出功能。清单文件保存在Bucket中，占用OSS部分存储容量...
回收站
例如使用Nginx配置了自动轮转日志且最多保留20个日志文件，当日志文件 test.log.19 轮转为日志文件 test.log.20 时，原日志文件 test.log.20 将进入回收站。说明 如果仅覆写文件内容，不删除该文件，不会触发文件进入回收站。例如调用 open...
运维管理
Java线程栈分析和Java堆分析：Workbench对接应用诊断分析平台ATP，向ATP平台提供日志文件的OSS URL后，ATP会自动完成日志文件的下载和分析，并返回诊断分析链接。您通过ATP平台的链接即可获取相应的堆分析和线程栈分析结果。更多信息，请...
Apache网站常见问题排查
CentOS/Alinux系统默认配置文件：/etc/httpd/conf/httpd.conf/etc/httpd/conf.d/Ubuntu系统默认配置文件：/etc/apache2/apache2.conf/etc/apache2/sites-enabled/查看配置文件中部分的配置，是否配置了 Deny from all 拒绝访问。...
日志分析
日志分析功能帮助您采集、存储接入办公安全平台SASE（Secure Access Service Edge）的日志信息，并基于阿里云日志服务，支持查询分析、统计图表、告警服务等功能，帮助您专注于分析，远离琐碎的查询和整理工作。本文介绍如何开通和分析日志...
什么是Logtail
自动处理日志轮转 很多应用会按照文件大小或者日期对日志文件进行轮转（rotation），把原日志文件重命名，并新建一个空日志文件等待写入。例如：app.LOG 文件，通过日志轮转会生成 app.LOG.1、app.LOG.2 等。您可以指定采集日志写入的文件...
查看与分析API调用日志（公测）
数据服务提供日志分析功能，您可以使用日志分析功能对调用请求进行分析，当调用请求出现异常时，智能分析能帮助您快速定位问题，并给出诊断结果和建议。使用限制 仅DataWorks专业版及以上版本，支持使用智能分析功能。您目前可以免费体验，...
日志同步分析概述
相关文档 方案描述 通过Filebeat采集Apache日志数据 典型的ELK日志采集模式。使用阿里云Filebeat采集Apache日志数据，通过阿里云Logstash过滤采集后的日志数据，传输到Elasticsearch中进行查询分析。通过logstash-input-sls插件从日志服务...
日志管理
持久化日志：创建或部署任务时，SAE 可以自动打通日志服务SLS，将容器标准输出日志（stdout）和业务文件日志（容器内日志路径）输出到SLS，帮助您无限制行数地查看日志、自聚合分析日志。设置日志收集 创建或者编辑任务模板时，如果您启用...
日志转存
日志文件命名规则 转存后的日志文件命名规则如下：<TargetPrefix><SourceBucket>YYYY-mm-DD-HH-MM-SS-UniqueString 字段 说明 TargetPrefix 日志文件的文件名前缀。SourceBucket 产生访问日志的源Bucket名称。YYYY-mm-DD-HH-MM-SS 日志文件...
delete_external_store
命令格式 重要 删除外部数据源后，您无法关联RDS MySQL、OSS、本地CSV文件数据源进行查询和日志分析。请谨慎操作。aliyunlog log delete_external_store-project_name=<value>-store_name=[-access-id=][-access-key=][-sts-token=][-...
使用前须知
阿里云企业级分布式应用服务EDAS联合日志服务推出日志功能，支持将部署在容器服务Kubernetes集群中的应用的相关业务文件日志、容器标准输出日志投递到日志服务进行查询与分析。本文介绍EDAS日志功能相关的资产、费用等信息。资产详情 ...
网站流量异常导致网站无法访问
执行 type 命令将所有日志文件合并成一个 logs.log 文件。type log?log>logs.log 执行成功后，您可以在日志存放路径下查看到 logs.log 文件。打开该文件后，确认所有日志文件内容已全部包含。下载并安装 WebLog Expert 工具。本文以WebLog ...
查询和分析日志
创建索引后，您可以在查询和分析页面对采集到的日志进行实时查询和分析。前提条件 已 创建索引。如果您要分析日志，则需创建 字段索引 并 开启统计。操作视频 您可以参见如下视频完成查询和分析操作。步骤一：输入查询和分析语句 登录 日志...
使用Cloud Shell下载日志数据
通过Cloud Shell可以快速下载较大数量的日志文件，并快速上传至OSS。本文介绍使用Cloud Shell下载日志数据。前提条件 如果您使用RAM用户下载日志，则需要先给RAM用户授予以下权限：只读访问日志服务的权限（AliyunLogReadOnlyAccess）。...
实时日志查询常见示例
通过使用日志服务SLS提供的实时日志查询能力，您可以分析对象存储OSS的访问日志、批量删除日志、每小时计量日志，从而及时监控并优化OSS的使用情况、定位和分析潜在的问题，提升数据存储和访问的效率。本文介绍实时日志查询的常见示例。...
下载或删除网站日志
查看网站日志可以帮助您了解访问者的需求、网站访问量的变化趋势或分析网站运行中遇到的故障问题等，从而提升用户体验和明确网站优化方向，本文为您介绍下载或删除网站日志的方法。前提条件 已安装FTP客户端。说明 建议您使用FileZilla工具...
使用Syslog协议上传日志
您可以使用Rsyslog、Syslog-ng采集日志并通过Syslog协议上传到日志服务。本文介绍通过Syslog协议将日志上传到日志服务的操作步骤。相关限制 Syslog协议必须为标准的 RFC5424 协议。每条日志最大支持64 KB。为保证数据传输安全性，数据传输...
OSS访问日志分析
您可以通过日志服务SLS存储和分析OSS日志数据，也可以将OSS日志数据导出并存储到指定的OSS目录长期保存，然后通过数据湖分析服务对长期保存的OSS日志数据进行分析。通过数据湖分析服务（Data Lake Analytics，DLA）分析OSS日志数据前，您...
Java GC日志分析报错
请检查文件类型是否正确，比如是否将堆文件当作GC日志文件进行分析 GC type not supported 当前使用的GC算法不支持 Fail to find any gc event in this log 无法从文件中读取到任何一次GC事件，ATP要求分析的GC日志中至少包含一次GC事件 ...
ECS集群应用日志清理机制是什么
本文介绍关于在EDAS中部署应用时，生成的日志清理机制的常见...因此建议您在应用中使用Java自带或者开源日志框架管控应用日志，并使用日志框架去轮询和控制应用日志文件保存的数量、大小、个数等，这样可以避免应用日志写入过多耗尽磁盘空间。
配置日志收集
在容器服务K8s集群中创建或部署应用时，您可开通日志服务SLS，把业务文件日志、容器标准输出stdout、stderr日志输出到SLS，方便无限制行数地查看日志和自聚合分析日志。本文介绍如何配置日志收集。前提条件 开通日志服务SLS 安装SLS组件，...
日志管理
当您的应用出现异常情况的时候，可以通过查看实例和应用级别的日志来排查问题。EDAS提供了日志查看、日志搜索和日志下线功能。添加在线查看 登录 EDAS控制台。在左侧导航栏，单击 应用管理>应用列表，在顶部菜单栏选择地域，并在页面上方...
RDS SQL Server空间不足问题
绝大部分情况下，您不需要手动对日志文件执行收缩操作，每次自动备份后都会收缩日志文件，如果确实需要尽快收缩日志文件大小，例如日志文件增长导致实例可用存储空间过低，且无法等到下一次的自动备份开始，您可以在实例的 备份恢复 页面...
采集主机文本日志
Logtail只采集增量日志，如果下发Logtail配置后日志文件无更新，则Logtail不会采集该文件中的日志。更多信息，请参见 读取日志。操作步骤 登录 日志服务控制台。在 接入数据 区域中，根据需要选择包含 文本日志 后缀的入口。本文以采集主机...
通过自建Filebeat收集MySQL日志
如果您需要查看并分析MySQL的日志信息（例如慢日志、error日志等），可通过Filebeat采集MySQL日志并发送到阿里云Elasticsearch中，然后在Kibana控制台中完成可视化查询、分析和展示。操作流程 准备工作 创建阿里云Elasticsearch和ECS实例。...
快速使用全量日志分析
将网站接入DDoS高防后，您可以通过全量日志分析采集和存储网站的日志数据，并对采集到的日志数据进行查询与分析。本文介绍如何快速使用全量日志分析功能。使用前须知 使用前请您了解什么是全量日志分析、如何计算所需的日志存储容量、日志...
设置日志收集到SLS
同时，为满足更高的查阅需求，您可以将文件采集日志、标准输出日志收集并存储至 日志服务 SLS（Simple Log Service），使用一站式数据功能，包括数据采集、加工、查询与分析、可视化和告警等，帮助您无限制行数查看日志、自行聚合分析日志...
导出日志
您可以将日志或查询分析结果下载到本地或投递到OSS bucket存储，便于您对日志数据进行详细的数据审查和长期存档。前提条件 已开通云防火墙日志分析服务。更多信息，请参见 概述。下载日志到本地 您可以通过控制台直接下载、命令行下载或...
定期清理程序日志
文件清空清理 针对一些不会实现日志文件轮转的场景，可以直接清空文件内容。对于CentOS和Debian系统，安装和设置Crontab的方式和上文一致。以下示例仅介绍如何编写Crontab命令。yes|cp/dev/null/home/admin/logs/demo.log 其中绝对路径/...
通过DaemonSet方式采集Kubernetes容器文本日志
containerd：当容器被停止时，Logtail会持续持有容器内文件的句柄（即保持对日志文件的打开状态），直至所有日志文件内容发送完毕。因此，当出现网络延迟、资源占用多等原因导致的采集延时时，可能会导致业务容器不能及时销毁。前提条件 已...
保留字段
Logtail采集的日志文件路径，Logtail为日志自动填加该字段。可用于日志查询、分析、自定义消费。对该字段进行SQL分析时，需要给该字段加上双引号。tag_:_hostname_字符串格式。索引设置：开启索引后，日志服务默认为_tag_:_hostname_创建...
基于SLS+OSS+DLA构建海量、低成本日志分析方案
方案介绍 对于数据分析人员、开发人员或者运维人员而言，日志数据对分析和诊断问题以及了解系统活动等有着非常重要的作用，日志都是其工作过程中必不可缺的数据来源。为了节约成本，通常情况下日志会被设定一定的保存时间，此类日志称之为...
create_external_store
更多信息，请参见 关联外部数据源简介、关联Logstore与OSS外表进行查询和分析 和 外部存储API接口。在使用CLI命令之前，您需要注意以下事项：已开通日志服务。具体操作，请参见 如何开始使用日志服务？已采集日志。更多信息，请参见 数据...
导出日志
您可以将云安全中心日志分析服务中产生的日志导出到本地，方便您通过日志分析和定位问题。本文介绍如何导出日志。操作步骤 登录云安全中心控制台。在控制台左上角，选择需防护资产所在的区域：中国 或 全球（不含中国）。在左侧导航栏，...
导入Amazon S3文件
阿里云日志服务SLS支持导入Amazon S3中的日志文件。您可以通过数据导入的方式将Amazon S3的日志文件导入到阿里云的日志服务，实现日志的查询分析、加工等操作。目前日志服务只支持导入5GB以内的S3文件，压缩文件大小按照压缩后的大小计算。...
- 产品推荐
- 这些文档可能帮助您