云数据库MongoDB版日志清理策略
本文主要介绍云数据库MongoDB版日志清理的策略。使用说明 注意 当oplog日志占用磁盘空间过高时（上限比例默认是10%），会触发自动清理策略。如果您对实例或数据有修改、变更等风险操作，务必注意实例的容灾、容错能力，确保数据安全。如果...
但是在数据集‘加速配置’查看日志显示的数据量与...
问题描述 Quick BI数据库表已经新增数据，但在数据集‘加速配置’查看日志显示的数据量与数据库表数据量不一致。问题原因 这是为了抽取的性能，只会增量更新最新的数据，因为旧分区的数据一般不会变的。解决方案 如果需要查询全部分区的...
云数据库RDS MySQL版实例中实时查询慢日志slow_log的...
概述 本文主要介绍在使用云数据库RDS MySQL版实例时，实时查询慢日志slow_log的方法。用户告知 本文仅阐述实时查询slow_log的方法，文中的操作示例未通过where语句进行条件过滤，因此属于全表查询。建议您在操作时，通过where语句增加条件...
Dataphin输出数据源为MySQL，为什么管道任务日志中...
概述 本文主要介绍输出数据源为MySQL，管道任务日志中写入条数远大于数据库中对表 count(1)数目的原因。详细信息 在执行管道任务时，检查运行日志发现写入条数和数据库中表的 count(1)条数对不上，管道任务日志写入条数远大于数据库中表的 ...
查询轻量数据库慢日志明细信息
db-38263fa955774501a2ae1bdaed6f*PageNumber integer 否 轻量数据库实例慢日志列表的页码。起始值：1。默认值：1。1 PageSize integer 否 分页查询时设置的每页行数。取值范围：30~100。最大值：100。默认值：30。30 StartTime string 是 ...
Quick BI报表嵌入第三方之后，访问报“数据库访问异常...
问题描述 Quick BI报表嵌入第三方之后，访问报“数据库访问异常”，捞取后台日志报错“expected one result(or null)to selectOne()but found:2”。问题原因 数据库里有重复用户名的脏数据导致。解决方案 确认查到重复的用户名并删除之后...
云数据库RDS MySQL版远程获取Binlog日志并解析Binlog...
本文主要介绍阿里云云数据库RDS MySQL如何远程获取Binlog日志，并使用mysqlbinlog工具解析Binlog日志。重要 阿里云提醒您：如果您对实例或数据有修改、变更等风险操作，务必注意实例的容灾、容错能力，确保数据安全。如果您对实例（包括但...
使用前须知
资产说明 通用数据库审计应用资产都在您选择的Project下，详细说明如下：Logstore 创建采集任务后，自动生成一个名为general-db-logstore的Logstore，用于存储数据库日志。该Logstore已配置索引。Logtail配置 创建采集任务后，自动生成一个...
SQL命令管理数据库
您可以执行以下命令，查询SQL Server实例的所有数据库的数据文件和日志文件的路径信息：SELECT db_name(database_id),physical_name FROM sys.master_files;删除数据库 执行如下命令，删除数据库：DROP DATABASE[TestDb]需注意，若您在删除...
使用RDS内网地址访问RDS MySQL数据库
当您的数据分散存储在日志服务Logstore和RDS MySQL数据库中时，您可以通过日志服务数据加工功能从对应数据库获取数据，实现数据富化。本文介绍如何配置数据加工规则及高级参数，实现通过RDS内网地址访问RDS MySQL数据库获取数据。背景信息 ...
配置通用数据库审计
您可以在数据库服务器或应用服务器上安装Logtail和抓包工具，采集数据库的所有活动记录，实现数据库审计。本文介绍配置通用数据库审计的操作步骤。前提条件 已有可用的数据库。已创建Project。具体操作，请参见 创建Project。操作步骤 登录...
日志（Log）
格式 文本日志（LogFile）、事件（Event）、数据库日志（BinLog）、时序数据（Metric）等数据都是日志的不同载体。日志服务采用半结构化的数据模式定义一条日志，包含日志主题、日志时间、日志内容、日志来源和日志标签五个数据域。日志...
常见问题
例如执行SQL分析的权限，读取日志库数据的权限。确保已提供足够的计算资源。资源限制说明请参见 查询与分析的使用限制。避免使用逻辑过于复杂的SQL语句以及SQL时间窗口设置过大，否则将导致计算超时（服务端超时时间为10分钟）。通过定时...
日志字段详情
字段 说明_topic_日志主题 redis_audit_log：DB节点的审计日志 redis_proxy_audit_log：Proxy节点的审计日志 account 数据库账号名称 command 执行的Redis命令 db 数据库名称 extend_information 附加信息 instanceid Redis实例ID ip IP...
跨库查询
当需要查询分散在不同数据库中的数据时，您可以使用 云原生数据仓库 AnalyticDB PostgreSQL 版 的跨库查询功能方便地将数据聚合在一起，进行高效查询，提高数据访问效率。功能介绍 Database是PostgreSQL生态下数据库的最高级别，同一个实例...
数据共享
返回信息如下时，表示当前使用的数据库为db02：current_database-db02(1 row)订阅Share，并设置Share的本地别名。IMPORT DATASHARE s01 AS s01a FROM DATABASE";为步骤3中查询到的目标库db01的UUID。在目标库db02中查询源库db01共享的数据...
查看会话日志
在数据库审计系统查看到的会话日志来源是日志服务，您可以在日志服务控制台查看和下载数据库审计服务创建的Project和Logstore中记录的会话日志数据。操作步骤 登录 日志服务控制台。在Project列表处，查看数据库审计相关的Project，单击...
日志管理
日志库（Logstore）是日志服务中的日志存储和查询的基本单元，通常用于存储一类日志数据。目前，支持在控制台或者通过API完成对日志库的增删改查操作。日志库创建完成后，用户通过API或SDK向指定日志库写入日志数据。如果用户希望收集阿里...
查看审计日志
您可以在日志服务控制台查看和下载数据库审计服务创建的Project和Logstore中记录的审计日志数据。操作步骤 登录 日志服务控制台。在Project列表处，查看数据库审计相关的Project，单击目标Project名称。数据库审计服务创建的Project名称为 ...
使用数据实验室
收费与限制 目前数据实验室提供网站访问日志、数据库审计日志、新冠疫情数据集等三个场景，均免费使用。在数据实验室中Logstore仅用于存储模拟数据，数据保留7天，shard数量为1。您无法进行数据写入、编辑索引等操作。场景选择 数据分为...
高级管理
说明 由于相同地域 PolarDB-X 1.0 数据库的SQL审计日志存储在同一Logstore中，如果修改了Logstore的审计日志存储时间，该修改会对该地域下所有 PolarDB-X 1.0 数据库生效。即仅支持修改同一地域所有数据库的日志保存时间，不支持修改某一...
RDS SQL Server如何收缩事务日志
SET RECOVERY SIMPLE 系统会将恢复模式重置为FULL，不会实际修改数据库恢复模式为SIMPLE，但数据库日志链会断开，并返回如下报错信息：Msg 50000,Level 16,State 1,Procedure*,Line 46 Login User[Test11]can't change database[TestDb]...
使用前须知
阿里云日志服务联合数据库MongoDB推出日志审计功能，将日志服务的部分功能融合到自身的审计日志、慢日志、运行日志中，实现日志实时查询、可视化分析、告警等功能。本文介绍MongoDB日志相关的资源说明、应用场景、费用说明及使用限制。资源...
开启SQL审计与分析
执行结果 SQL审计功能开启后，相同地域下的 PolarDB-X 数据库的审计日志会写入同一个日志服务的Logstore中。同时，日志服务为您创建以下默认配置。警告 日志服务会不定期更新与升级SQL日志审计功能，专属日志库的索引与默认报表也会自动...
同步时源库为Db2 for LUW的注意事项及限制
Db2 for LUW同步至PolarDB-X 2.0 说明 DTS默认同步到目标数据库中时会取消外键约束，因此源数据库的级联、删除等操作不会同步到目标数据库。类型 说明 源库限制 带宽要求：源库所属的服务器需具备足够出口带宽，否则将影响数据同步速率。待...
应用场景
数据采集与消费 通过日志服务LogHub功能，可以大规模低成本接入各种实时日志数据（包括Metric、Event、BinLog、TextLog、Click等）。方案优势：使用便捷：提供50+实时数据采集方式，让您快速搭建平台；强大配置管理能力，减轻运维负担。...
管理日志投递任务
存储目标 包括源Project、源Logstore和目标数据库信息。消费进度 数据投递任务读取源Logstore日志数据的消费进度。统计报表 创建投递任务后，自动生成数据投递仪表盘，包括总览指标、每秒投递行数指标、消费延迟指标、消费速率指标、读写...
开启SQL日志审计
默认情况下，只对开启SQL日志审计功能之后产生的日志数据进行审计分析，您也可以导入部分历史数据。前提条件 登录 日志服务控制台，根据提示，开通阿里云日志服务。已购买 PolarDB-X 1.0 专享实例，并创建了数据库。默认情况下，只有主账号...
加工原理
调度原理 日志服务的数据加工功能使用协同消费组对源日志库的日志数据进行流式消费，将每一条日志通过加工规则处理后再输出。调度机制 对每一个加工规则，加工服务的调度器会启动一个或多个运行实例，每个运行实例扮演一个消费者的角色去...
RDS SQL Server空间不足问题
select*from sys.dm_db_log_space_usage 查看当前数据库的日志文件的总空间大小以及实际已使用日志空间大小。说明 仅适用于SQL Server 2012及以上版本。select*from sys.dm_db_file_space_usage 查看当前数据库的数据文件的总空间大小以及...
复制和分发数据
通过e_split函数将日志数据进行分裂。更多信息，请参见 e_split。通过e_output函数将日志分发到target-a和target-b。更多信息，请参见 e_output。e_drop()表示将不满足条件的日志丢弃，不进行分发。更多信息，请参见 e_drop。单击 预览数据...
PolarDB云原生数据库
本文介绍PolarDB云原生数据库审计日志、慢日志、错误日志和性能日志的字段详情。审计日志 日志字段 说明_topic_日志主题，固定为polardb_audit_log。owner_id 阿里云账号ID region PolarDB MySQL集群所在地域 cluster_id PolarDB MySQL集群...
常见问题
删除日志库，日志数据是否丢失？日志服务日志保存多长时间？可否修改这个保存时限？希望把日志最终存储到OSS，怎样节省在日志服务上的花费？如何删除日志？删除Project时提示“操作拒绝，权限不足”查询与分析常见问题 日志查询常见问题 ...
查看数据报表
CloudLens for Redis提供丰富的可视化图表，用于展示云数据库Redis日志的分析结果。前提条件 已开启日志采集功能。具体操作，请参见 开启日志采集功能。功能入口 登录 日志服务控制台。在 日志应用 区域的 云产品Lens 页签中，单击 ...
告警属性参考
日志库 区域 否 对日志库和时序库进行查询统计时，取值为目标Project所在地域。说明 对资源数据进行查询统计时，无该参数。cn-hangzhou 项目 否 对日志库和时序库进行查询统计时，取值为源数据所在Project。说明 对资源数据进行查询统计时...
概览
{"Version":"1","Statement":[{"Action":["log:Post*","log:BatchPost*"],"Resource":["acs:log:*:*:project/<指定的project名称>/logstore/<指定的logstore名称>"],"Effect":"Allow"}]} 控制台查询指定日志库（Logstore）数据 给RAM用户...
管理Project
删除项目Project 警告 删除Project后，其管理的所有日志数据及配置信息都会被释放，不可恢复。在删除Project前请慎重确认，避免数据丢失。在Project列表中，单击目标Project对应的 删除。在 删除Project 面板中，输入Project名称和选择删除...
过滤VPC流日志公网流量
新的日志数据，只保留公网日志。您可以输入查询和分析语句，对公网流量的请求来源城市和目的地城市进行查询分析。例如：*|select ip_to_city(srcaddr)as sourceAddr,ip_to_city(dstaddr)as dstAddr,COUNT(*)as pv group by sourceAddr,...
Data Explorer案例
示例4 在RDS数据库审计日志中，统计执行频率Top 10的SQL语句及其执行次数，并统计每个SQL语句同比昨天的执行次数的变化情况。Data Explorer配置 查询和分析语句|select"sql",diff[1]as current_value,diff[2]as previous_value,(diff[1]-...
概述
在进行日志数据查询分析时，日志中的部分信息需要和外部存储（ExternalStore）的信息进行关联查询，从而进一步丰富日志服务中的日志数据。外部存储简介 外部存储和Logstore的区别 项目 外部存储（ExternalStore）Logstore 数据存储 日志...
- 产品推荐
- 这些文档可能帮助您