日志主题
日志可以通过日志主题（Topic）来划分，您可以在日志服务控制台上创建Logtail配置时设置日志主题，也可以在使用API或SDK上传数据时设置日志主题。空-不生成Topic 机器组Topic属性 文件路径正则 静态主题生成 空-不生成Topic 设置 Topic生成...
日志字段详情
字段 说明_topic_日志主题 redis_audit_log：DB节点的审计日志 redis_proxy_audit_log：Proxy节点的审计日志 account 数据库账号名称 command 执行的Redis命令 db 数据库名称 extend_information 附加信息 instanceid Redis实例ID ip IP...
使用前须知
阿里云日志服务和数据库审计推出日志功能，将数据库审计相关的日志存储到日志服务中，助力企业顺利通过等保合规审计。本文介绍数据库审计日志功能相关的资产详情、费用说明及使用限制等。资产详细 专属Project和Logstore 开启日志功能后，...
如何实现文件中的日志被采集多份
解决方案 将日志数据存储到不同Logstore 不需要配置多个Logtail采集配置，可以使用日志服务数据加工功能对日志进行复制，避免对同主机的其他服务性能造成影响。具体操作，请参见 复制Logstore数据。创建多个Logtail采集配置 主机场景 创建...
术语表
Logtail配置 Logtail配置是Logtail进行日志采集的策略集合，包括日志文件的位置、采集方式等。更多信息，请参见 Logtail配置。机器组 机器组是包含多台服务器的虚拟分组。日志服务通过机器组的方式管理所有需要通过Logtail采集日志的服务器...
查询不到日志的排查思路
待采集的日志文件没有实时写入数据。您可以打开/usr/local/ilogtail/ilogtail.LOG 查看报错信息。常见错误如下：parse delimiter log fail：通过分隔符模式采集日志出错。parse regex log fail：通过完整正则模式采集日志出错。分词符设置...
Logtail配置
preserve boolean 否 true 如果一个日志文件在指定时间内没有任何更新，则认为该文件已超时。可选值如下：true（默认）：永不超时。false：如果日志文件在30分钟内没有更新，则认为已超时，并不再监控该文件。preserveDepth integer 否 1 ...
日志类型
M_INFO_COL,all_status_monitor,T22380,0,2018-04-17 10:48:25.0,AY66K,AM5,2018-04-17 10:48:25.0,2018-04-17 10:48:30.561,i-23xebl5ni.1569395.715455,901,00789b file_dev 日志文件的device ID。说明 当 file_name 为 logstore_...
回收站
例如使用Nginx配置了自动轮转日志且最多保留20个日志文件，当日志文件 test.log.19 轮转为日志文件 test.log.20 时，原日志文件 test.log.20 将进入回收站。说明 如果仅覆写文件内容，不删除该文件，不会触发文件进入回收站。例如调用 open...
通过JDBC协议分析日志
日志服务支持您在数据库（例如MySQL）中使用JDBC协议连接日志服务，并通过标准的SQL92语法查询和分析日志。前提条件 已创建阿里云账号或RAM用户的AccessKey。具体操作，请参见 访问密钥。如果使用RAM用户的AccessKey，则RAM用户必须是当前...
日志采集Agent对比
不支持 支持cpu/内存阈值保护 日志文件采集场景-性能对比 以Nginx的access log为样例，如下一条日志365字节，结构化成14个字段：在下面的测试中，将模拟不同的压力将该日志重复写入文件，每条日志的time字段取当前系统时间，其它13个字段...
日志服务采集数据常见的错误类型
本文介绍日志服务采集数据常见的错误类型及对应的解决方法。如果您遇到其他问题，请提交 工单 处理。错误类型 错误说明 解决方法 LOG_GROUP_WAIT_TOO_LONG_ALARM 数据包从产生到发送的过程中等待的时间较长。检查发送是否正常，或者是否...
采集标准Docker容器日志
如果下发Logtail配置后，日志文件无更新，则Logtail不会采集该文件中的日志。更多信息，请参见 读取日志。步骤一：部署Logtail容器 拉取Logtail镜像。docker pull registry.cn-hangzhou.aliyuncs.com/log-service/logtail 您需要根据实际...
日志字段详情
本文介绍RDS相关日志的字段详情。审计日志 字段名称 说明_topic_日志主题，固定为rds_audit_log。instance_id RDS实例ID。check_rows 扫描的行数。db 数据库名。...db_version 数据库版本 content 日志内容 eventType 事件类型
服务指标
自定义配置中可以使用自己设定的日志文件，要求日志文件中必须有：数据库、SQL、耗时、事务 ID。flowlimit 限流 次 框架配置日志。文件采集路径/home/admin/logs/{app}/guardian/guardian-limit-stat.log。msgpub 消息推送 次 框架配置日志...
通过HTTPS投递日志到SIEM
option,settings=get_monitor_option()logger.info("*start to consume data.")worker=ConsumerWorker(SyncData,option,args=(settings,))worker.start(join=True)if_name_='_main_':main()程序配置示例 配置内容 程序日志文件：以便后续...
如何迁移到DBFS？
本文档主要为您说明在使用阿里云数据库存储DBFS时，如何方便的将数据库迁移到DBFS上。一般存在以下几种常用的方式：主备同步：搭建主备库，通过binary log同步...停机拷贝：停掉数据库服务，将数据库所有文件拷贝到DBFS，再拉起数据库服务。
RDS SQL Server空间不足问题
回收日志空间 回收日志空间比较简单，使用 DBCC SQLPERF(LOGSPACE)命令或自治服务查看数据库的日志文件空间中实际已使用部分的比例，如果已使用部分的比例较高，收缩日志文件几乎没有效果，可以查询系统视图sys.databases，通过 log_reuse_...
使用前须知
阿里云企业级分布式应用服务EDAS联合日志服务推出日志功能，支持将部署在容器服务Kubernetes集群中的应用的相关业务文件日志、容器标准输出日志投递到日志服务进行查询与分析。本文介绍EDAS日志功能相关的资产、费用等信息。资产详情 ...
使用前须知
阿里云日志服务联合数据库MongoDB推出日志审计功能，将日志服务的部分功能融合到自身的审计日志、慢日志、运行日志中，实现日志实时查询、可视化分析、告警等功能。本文介绍MongoDB日志相关的资源说明、应用场景、费用说明及使用限制。资源...
按使用功能计费模式计费项
日志服务的所有计费项都是单独计费的，例如您存储日志会产生日志存储费用，您采集日志会产生写流量费用等。本文介绍日志服务按使用功能计费模式计费项的组成及付费方式。说明 日志服务按使用功能计费模式支持采集日志和时序数据，时序数据...
Binlog 相关操作
本页面为您介绍如何通过云数据库 OceanBase 租户工作台开通/关闭 Binlog 服务，以及 Binlog 的其他相关操作。使用限制 Binlog 服务目前仅对白名单用户开放，限时免费。如果您需要使用本服务，请联系 OceanBase 技术支持。开通 Binlog 日志...
使用资源函数增量获取数据
资源信息与数据示例 日志服务资源 Project：client-project 源Logstore：client-log 数据样例如下所示：目标Logstore：client-information RDS资源 数据库：client-db 数据库表：client 数据样例如下所示：数据库用户名和密码：test/test...
高级管理FAQ
目标目录的所有文件数据只要满足生命周期管理策略，即会自动转储至低频存储或归档存储中。设置生命周期管理策略后，文件多久会被转储到低频存储或归档存储？转储时间会和文件系统的大小和转储数据量有关，功能开启后，符合生命周期管理策略...
使用限制
32000}MBps 快照 限制项 限制 限制说明 每个文件系统可以保留的快照总数（包括手动快照与自动快照）256 1，当数据库文件系统的快照数量达到额度上限，在创建新的自动快照时，系统会删除该数据库文件系统最早的自动快照点。2，若手动快照...
RDS SQL Server如何收缩事务日志
日志空间充足 如果日志空间充足，可以通过RDS控制台备份并收缩事务日志功能来处理，该功能是指系统将自动通过执行日志备份和日志收缩操作来管理和优化事务日志文件的大小。访问 RDS实例列表，在上方选择地域，然后单击目标实例ID。在左侧...
日志管理
日志库（Logstore）是日志服务中的日志存储和查询的基本单元，通常用于存储一类日志数据。目前，支持在控制台或者通过API完成对日志库的增删改查操作。日志库创建完成后，用户通过API或SDK向指定日志库写入日志数据。如果用户希望收集阿里...
查看数据报表
CloudLens for Redis提供丰富的可视化图表，用于展示云数据库Redis日志的分析结果。前提条件 已开启日志采集功能。具体操作，请参见 开启日志采集功能。功能入口 登录 日志服务控制台。在 日志应用 区域的 云产品Lens 页签中，单击 ...
应用场景
日志服务的典型应用场景包括：数据采集与消费、数据清洗与流计算（ETL/Stream Processing）、数据仓库对接（Data Warehouse）、日志实时查询与分析。数据采集与消费 通过日志服务LogHub功能，可以大规模低成本接入各种实时日志数据（包括...
将日志服务数据投递到AnalyticDB MySQL
日志服务采集到日志后，支持将日志投递至云原生数据仓库AnalyticDB MySQL进行存储与分析。本文档介绍将日志投递至AnalyticDB MySQL的操作...查看日志数据 将日志投递到AnalyticDB MySQL后，您就可以在数据库中通过 SELECT 语句查询日志数据。
创建自动快照策略
本文描述了如何在数据库文件存储控制台创建一份自动快照策略。前提条件 您已经开通了云盘快照服务。具体操作，请参见 开通快照。操作步骤 登录 数据库文件存储控制台。在顶部菜单栏左上角处，选择地域。在左侧导航栏，选择 快照，然后单击 ...
使用前须知
阿里云关系型数据库RDS联合日志服务推出RDS SQL审计日志投递功能，将RDS SQL审计日志投递到日志服务中。日志服务提供实时查询、可视化分析、告警、投递、加工等功能。本文介绍RDS SQL审计日志相关的资产详情、费用说明、使用限制等信息。...
自动备份MariaDB数据
设置备份策略实现自动备份 阿里云数据库会执行用户设定的备份策略，自动备份数据库。访问 RDS实例列表，在上方选择地域，然后单击目标实例ID。在左侧导航栏单击 备份恢复。在 备份恢复 页面中选择 备份策略，单击 备份设置 区域后的 编辑。...
开启日志采集功能
CloudLens for Redis支持一键开启日志采集功能，用于采集云数据库Redis的慢日志、运行日志和审计日志。本文介绍开启日志采集功能的操作步骤及相关操作。前提条件 实例需满足下述条件：版本 为Redis社区版、Tair（Redis企业版）内存型、Tair...
通过日志服务导入至数仓版
日志服务采集到日志后，可以将Nginx访问日志、Log4j日志、Apache日志以及结构化文本等日志实时同步至 AnalyticDB MySQL 数仓版（3.0）进行存储和分析。前提条件 已采集日志到目标Logstore。具体操作，请参见 数据采集。在AnalyticDB MySQL...
日志备份时报：The transaction log for database xx ...
执行以下SQL语句，查看并收缩日志文件。use<数据库名>dbcc shrinkfile('<数据库名>_log')执行以下SQL语句，恢复数据库模式。alter database<数据库名>set recovery full（可选）优化实例日志空间。事务日志增长过快的根本原因是事务较多...
查看日志
系统是从数据库内采集csvlog文件内容，然后保存到日志服务器后提供给您查看，如果需要调整数据库内csvlog文件的最大保留个数，您可以调整实例参数 rds_max_log_files。保留的csvlog文件个数越多，可以查询的时间越长，但是占用空间也会越大...
GetSnapshotLink-获取单个快照链
查询数据库文件系统快照链。快照链是一个数据库文件系统所有快照组成的关系链，一个文件系统对应一条快照链。调试 您可以在OpenAPI Explorer中直接运行该接口，免去您计算签名的困扰。运行成功后，OpenAPI Explorer可以自动生成SDK代码示例...
使用RDS内网地址访问RDS MySQL数据库
当您的数据分散存储在日志服务Logstore和RDS MySQL数据库中时，您可以通过日志服务数据加工功能从对应数据库获取数据，实现数据富化。本文介绍如何配置数据加工规则及高级参数，实现通过RDS内网地址访问RDS MySQL数据库获取数据。背景信息 ...
开启或关闭日志服务
按量付费实例 警告 关闭日志服务，将导致日志服务自动创建的WAF专属日志库（Logstore）以及日志库中记录的日志数据被清除。请确认不再使用日志服务后，再进行该操作。登录 Web应用防火墙3.0控制台。在顶部菜单栏，选择WAF实例的资源组和...
- 产品推荐
- 这些文档可能帮助您