Dataphin输出数据源为MySQL,为什么管道任务日志中...

概述 本文主要介绍输出数据源为MySQL,管道任务日志中写入条数远大于数据库中对表 count(1)数目的原因。详细信息 在执行管道任务时,检查运行日志发现写入条数和数据库中表的 count(1)条数对不上,管道任务日志写入条数远大于数据库中表的 ...

RDS SQL Server如何收缩事务日志

SET RECOVERY SIMPLE 系统会将恢复模式重置为FULL,不会实际修改数据库恢复模式为SIMPLE,但数据库日志链会断开,并返回如下报错信息:Msg 50000,Level 16,State 1,Procedure*,Line 46 Login User[Test11]can't change database[TestDb]...

SQL命令管理数据库

您可以执行以下命令,查询SQL Server实例的所有数据库的数据文件和日志文件的路径信息:SELECT db_name(database_id),physical_name FROM sys.master_files;删除数据库 执行如下命令,删除数据库:DROP DATABASE[TestDb]需注意,若您在删除...

配置通用数据库审计

您可以在数据库服务器或应用服务器上安装Logtail和抓包工具,采集数据库的所有活动记录,实现数据库审计。本文介绍配置通用数据库审计的操作步骤。前提条件 已有可用的数据库。已创建Project。具体操作,请参见 创建Project。操作步骤 登录...

使用RDS内网地址访问RDS MySQL数据库

当您的数据分散存储在日志服务Logstore和RDS MySQL数据库中时,您可以通过日志服务数据加工功能从对应数据库获取数据,实现数据富化。本文介绍如何配置数据加工规则及高级参数,实现通过RDS内网地址访问RDS MySQL数据库获取数据。背景信息 ...

日志(Log)

格式 文本日志(LogFile)、事件(Event)、数据库日志(BinLog)、时序数据(Metric)等数据都是日志的不同载体。日志服务采用半结构化的数据模式定义一条日志,包含日志主题、日志时间、日志内容、日志来源和日志标签五个数据域。日志...

常见问题

例如执行SQL分析的权限,读取日志库数据的权限。确保已提供足够的计算资源。资源限制说明请参见 查询与分析的使用限制。避免使用逻辑过于复杂的SQL语句以及SQL时间窗口设置过大,否则将导致计算超时(服务端超时时间为10分钟)。通过定时...

管理服务日志

本文介绍了如何开通、关闭服务日志功能及如何修改服务日志的配置。前提条件 已创建Project。具体操作,请参见 创建Project。使用RAM用户登录时,必须由阿里云账号授予其对应权限。具体操作,请参见 RAM用户授权。开通服务日志 重要 详细...

使用前须知

阿里云日志服务联合数据库MongoDB推出日志审计功能,将日志服务的部分功能融合到自身的审计日志、慢日志、运行日志中,实现日志实时查询、可视化分析、告警等功能。本文介绍MongoDB日志相关的资源说明、应用场景、费用说明及使用限制。资源...

日志字段详情

字段 说明_topic_日志主题 redis_audit_log:DB节点的审计日志 redis_proxy_audit_log:Proxy节点的审计日志 account 数据库账号名称 command 执行的Redis命令 db 数据库名称 extend_information 附加信息 instanceid Redis实例ID ip IP...

PolarDB云原生数据库

owner_id 阿里云账号ID region PolarDB MySQL集群所在地域 cluster_id PolarDB MySQL集群ID node_id PolarDB MySQL节点ID db_type PolarDB数据库类型 db_name PolarDB数据库名 version PolarDB数据库版本号 rows_examined 扫描的行数 rows_...

数据库RDS

owner_id 阿里云账号ID region RDS实例所在地域 instance_name RDS实例名 instance_id RDS实例ID db_type 数据库类型 db_version 数据库引擎版本 check_rows 扫描的行数 db 数据库名 fail SQL执行是否出错。其中,0表示成功,除0之外的其他...

数据共享

返回信息如下时,表示当前使用的数据库为db02:current_database-db02(1 row)订阅Share,并设置Share的本地别名。IMPORT DATASHARE s01 AS s01a FROM DATABASE";为步骤3中查询到的目标库db01的UUID。在目标库db02中查询源库db01共享的数据...

高级管理

说明 由于相同地域 PolarDB-X 1.0 数据库的SQL审计日志存储在同一Logstore中,如果修改了Logstore的审计日志存储时间,该修改会对该地域下所有 PolarDB-X 1.0 数据库生效。即仅支持修改同一地域所有数据库日志保存时间,不支持修改某一...

使用数据实验室

收费与限制 目前数据实验室提供网站访问日志数据库审计日志、新冠疫情数据集等三个场景,均免费使用。在数据实验室中Logstore仅用于存储模拟数据,数据保留7天,shard数量为1。您无法进行数据写入、编辑索引等操作。场景选择 数据分为...

为什么购买了资源包仍会欠费?

目前,日志服务提供新版资源包和旧版资源包,不同资源包抵扣规则不同。本文介绍购买资源包后仍产生欠费的原因。说明 在日志服务使用过程中,您可以在 用户中心 查看消费明细。更多信息,请参见 账单查询。新版资源包 购买了资源包后仍出现...

Java SDK概述

日志服务Java SDK封装了日志服务的所有API接口。您可以通过日志服务Java SDK方便地调用日志服务的所有API接口。版本说明 在下载日志服务Java SDK前,请选取合适的版本。...SlsSample.java 查日志日志、查看日志分布情况相关示例。

日志管理

日志库(Logstore)是日志服务中的日志存储和查询的基本单元,通常用于存储一类日志数据。目前,支持在控制台或者通过API完成对日志库的增删改查操作。日志库创建完成后,用户通过API或SDK向指定日志库写入日志数据。如果用户希望收集阿里...

查看数据报表

CloudLens for Redis提供丰富的可视化图表,用于展示云数据库Redis日志的分析结果。前提条件 已开启日志采集功能。具体操作,请参见 开启日志采集功能。功能入口 登录 日志服务控制台。在 日志应用 区域的 云产品Lens 页签中,单击 ...

应用场景

日志服务的典型应用场景包括:数据采集与消费、数据清洗与流计算(ETL/Stream Processing)、数据仓库对接(Data Warehouse)、日志实时查询与分析。数据采集与消费 通过日志服务LogHub功能,可以大规模低成本接入各种实时日志数据(包括...

使用前须知

资产说明 通用数据库审计应用资产都在您选择的Project下,详细说明如下:Logstore 创建采集任务后,自动生成一个名为general-db-logstore的Logstore,用于存储数据库日志。该Logstore已配置索引。Logtail配置 创建采集任务后,自动生成一个...

使用Aliyun Log Java Producer写入日志数据

相对于原始的API或SDK,使用该类库写日志数据能为您带来诸多优势,包括高性能、计算与I/O逻辑分离、资源可控制等。特点 线程安全:Producer接口暴露的所有方法都是线程安全的。异步发送:调用Producer的发送接口通常能够立即返回响应。...

分区

每个日志库(Logstore)分若干个分区,每个分区由MD5左闭右开区间组成,每个区间范围不会相互覆盖,并且所有的区间的范围是MD5整个取值范围。Shard是每个Logstore下读写基本单元,每个Logstore会指定分区数目,每个分区能承载一定量的服务...

Data Explorer案例

示例4 在RDS数据库审计日志中,统计执行频率Top 10的SQL语句及其执行次数,并统计每个SQL语句同比昨天的执行次数的变化情况。Data Explorer配置 查询和分析语句|select"sql",diff[1]as current_value,diff[2]as previous_value,(diff[1]-...

告警属性参考

日志库 区域 否 对日志库和时序进行查询统计时,取值为目标Project所在地域。说明 对资源数据进行查询统计时,无该参数。cn-hangzhou 项目 否 对日志库和时序进行查询统计时,取值为源数据所在Project。说明 对资源数据进行查询统计时...

查看会话日志

数据库审计系统查看到的会话日志来源是日志服务,您可以在日志服务控制台查看和下载数据库审计服务创建的Project和Logstore中记录的会话日志数据。操作步骤 登录 日志服务控制台。在Project列表处,查看数据库审计相关的Project,单击...

最佳实践

时序存储 使用Prometheus采集Kubernetes监控数据 查询与分析 查询和分析网站日志 查询和分析JSON日志 Data Explorer案例 关联Logstore与MySQL数据库进行查询分析 关联Logstore与OSS外表进行查询和分析 查询MNS日志 采集及分析Nginx监控日志...

日志备份时报:The transaction log for database xx ...

RDS SQL Server数据库实例进行日志备份时,出现 The transaction log for database xx is full due to 'LOG_BACKUP' 事务日志已满的报错,您可以参照本文进行操作,解决报错问题。问题现象 RDS SQL Server数据库实例进行日志备份时,报 The...

查看审计日志

日志服务控制台查看审计日志 日志服务存储了数据库审计系统审计到的数据库操作日志,在数据库审计系统查看到的审计日志来源是日志服务。您可以在日志服务控制台查看和下载数据库审计服务创建的Project和Logstore中记录的审计日志数据。...

数据传输预检查

启动数据迁移项目时,为确保项目的顺利运行,OceanBase 数据传输功能会自动启动预检查环节,针对源端和目标端的数据库连通性、相关配置的正确性、增量日志参数等问题或设置进行检查。本文为您介绍数据迁移项目预检查环节的常见报错和解决...

加工原理

调度原理 日志服务的数据加工功能使用协同消费组对源日志库日志数据进行流式消费,将每一条日志通过加工规则处理后再输出。调度机制 对每一个加工规则,加工服务的调度器会启动一个或多个运行实例,每个运行实例扮演一个消费者的角色去...

快速设置日志告警

高级配置:在 高级配置 页签下,您可以选择监控日志库、指标和资源数据日志库:用于存储日志,相关的查询分析配置请参见 查询和分析日志。指标:用于存储时序数据,相关的查询分析配置请参见 查询和分析时序数据。资源数据:用于配置...

日志字段详情

本文介绍RDS相关日志的字段详情。审计日志 字段名称 说明_topic_日志主题,固定为rds_audit_log。instance_id RDS实例ID。check_rows 扫描的行数。db 数据库名。...db_version 数据库版本 content 日志内容 eventType 事件类型

开启日志采集功能

CloudLens for Redis支持一键开启日志采集功能,用于采集云数据库Redis的慢日志、运行日志和审计日志。本文介绍开启日志采集功能的操作步骤及相关操作。前提条件 实例需满足下述条件:版本 为Redis社区版、Tair(Redis企业版)内存型、Tair...

概览

{"Version":"1","Statement":[{"Action":["log:Post*","log:BatchPost*"],"Resource":["acs:log:*:*:project/<指定的project名称>/logstore/<指定的logstore名称>"],"Effect":"Allow"}]} 控制台查询指定日志库(Logstore)数据 给RAM用户...

开启SQL审计与分析

执行结果 SQL审计功能开启后,相同地域下的 PolarDB-X 数据库的审计日志会写入同一个日志服务的Logstore中。同时,日志服务为您创建以下默认配置。警告 日志服务会不定期更新与升级SQL日志审计功能,专属日志库的索引与默认报表也会自动...

管理Project

删除日志项目可能导致日志库数据丢失,请确认Logstore,MetricStore、EventStore等数据无用或已做好数据备份。本文介绍如何在日志服务控制台上创建、删除日志项目Project等操作。基本概念 项目(Project)是日志服务中的资源管理单元,...

从SLS同步

本文介绍如何使用日志投递功能从日志服务(SLS)同步数据到云数据库ClickHouse。注意事项 云数据库ClickHouse的企业版集群和在2021年12月份之后创建的社区兼容版集群不支持日志投递功能。云数据库ClickHouse目前不支持数组类型的数据。支持...

使用前须知

阿里云关系型数据库RDS联合日志服务推出RDS SQL审计日志投递功能,将RDS SQL审计日志投递到日志服务中。日志服务提供实时查询、可视化分析、告警、投递、加工等功能。本文介绍RDS SQL审计日志相关的资产详情、费用说明、使用限制等信息。...

导入MySQL数据

您可以将自建MySQL数据库或RDS MySQL数据库中的数据导入到日志服务,实现数据的查询分析、加工等操作。本文介绍导入MySQL数据的操作步骤。前提条件 已创建MySQL数据库,并已设置具备最小读权限的数据库账号。在MySQL数据库中添加白名单。请...
共有200条 < 1 2 3 4 ... 200 >
跳转至: GO
产品推荐
云服务器 安全管家服务 安全中心
这些文档可能帮助您
云数据库 Redis 版 云数据库 RDS 数据库备份 云数据库 MongoDB 版 弹性公网IP 短信服务
新人特惠 爆款特惠 最新活动 免费试用