入仓解决方案
支持的数据库部署位置 有公网IP的自建数据库 无公网IP:Port的数据库（通过数据库网关DG接入）通过云企业网CEN接入的自建数据库 ECS上的自建数据库 通过专线/VPN网关/智能接入网关接入的自建数据库 ECS上的自建数据库 通过专线/VPN网关/智能...
RDS SQL Server如何收缩事务日志
SET RECOVERY SIMPLE 系统会将恢复模式重置为FULL，不会实际修改数据库恢复模式为SIMPLE，但数据库日志链会断开，并返回如下报错信息：Msg 50000,Level 16,State 1,Procedure*,Line 46 Login User[Test11]can't change database[TestDb]...
SQL命令管理数据库
您可以执行以下命令，查询SQL Server实例的所有数据库的数据文件和日志文件的路径信息：SELECT db_name(database_id),physical_name FROM sys.master_files;删除数据库 执行如下命令，删除数据库：DROP DATABASE[TestDb]需注意，若您在删除...
常见问题
支持的数据库部署位置（接入方式）阿里云实例 有公网IP的自建数据库 通过数据库网关DG接入的自建数据库 通过云企业网CEN接入的自建数据库 ECS上的自建数据库 通过专线/VPN网关/智能接入网关接入的自建数据库 阿里云实例 通过数据库网关DG接...
从ECS上的自建MySQL同步至PolarDB MySQL版
说明 如果源或目标数据库是阿里云数据库实例（例如 RDS MySQL、云数据库MongoDB版 等）或ECS上的自建数据库，DTS会自动将对应地区DTS服务的IP地址添加到阿里云数据库实例的白名单或ECS的安全规则中，您无需手动添加，请参见 DTS服务器的IP...
配置通用数据库审计
您可以在数据库服务器或应用服务器上安装Logtail和抓包工具，采集数据库的所有活动记录，实现数据库审计。本文介绍配置通用数据库审计的操作步骤。前提条件 已有可用的数据库。已创建Project。具体操作，请参见 创建Project。操作步骤 登录...
日志（Log）
格式 文本日志（LogFile）、事件（Event）、数据库日志（BinLog）、时序数据（Metric）等数据都是日志的不同载体。日志服务采用半结构化的数据模式定义一条日志，包含日志主题、日志时间、日志内容、日志来源和日志标签五个数据域。日志...
使用前须知
您可以基于日志服务的存储、查询分析、可视化和告警等一站式功能，完成对数据库的审计。本文介绍通用数据库审计应用的使用场景、资产、费用等信息。使用场景 通用数据库审计应用支持对RDS数据库和自建数据库进行审计。RDS数据库审计场景 将...
自建SQL Server同步至PolarDB MySQL版
如为增量同步任务，DTS要求源数据库的数据日志保存24小时以上，如为全量同步和增量同步任务，DTS要求源数据库的数据日志至少保留7天以上（您可在全量同步完成后将数据日志保存时间设置为24小时以上），否则DTS可能因无法获取数据日志而导致...
实时同步能力说明
整库增量数据实时同步：支持将整个数据库的变化日志同步到目标端中，一般用作纯实时日志的收集。支持一次性配置一个实例下多个库的多个表，一个任务中最多支持3000个目标表。说明 实时同步模块仅进行增量数据实时同步，若您希望全增量数据...
常见问题
例如执行SQL分析的权限，读取日志库数据的权限。确保已提供足够的计算资源。资源限制说明请参见 查询与分析的使用限制。避免使用逻辑过于复杂的SQL语句以及SQL时间窗口设置过大，否则将导致计算超时（服务端超时时间为10分钟）。通过定时...
开通实时日志订阅功能
本文介绍如何在友盟控制台上开通实时日志订阅功能，将U-App、U-MiniProgram和U-Web日志推送至日志服务...后续步骤 同步日志数据到日志服务后，您可以执行查询分析、下载、投递、加工、创建告警等操作。具体操作，请参见 云产品日志通用操作。
通过一键建仓同步至数仓版
您可以在 云原生数据仓库AnalyticDB MySQL版 控制台上通过一键建仓将一个日志服务项目（Project）中的日志投递到 AnalyticDB MySQL 集群，快速创建日志仓库。适用范围 一键创建数据仓库仅适用于 AnalyticDB MySQL版 数仓版（3.0）集群。...
可视化概述
重要 如果您是基于日志数据获取统计图表，并添加到仪表盘，则必须将日志采集到Standard Logstore中。更多信息，请参见 管理Logstore。第三方可视化工具 您可以将日志服务与DataV、Grafana、Tableau等第三方可视化工具对接，进行大屏数据...
最佳实践
时序存储 使用Prometheus采集Kubernetes监控数据 查询与分析 查询和分析网站日志 查询和分析JSON日志 Data Explorer案例 关联Logstore与MySQL数据库进行查询分析 关联Logstore与OSS外表进行查询和分析 查询MNS日志 采集及分析Nginx监控日志...
组织系统配置
开启采集日志同步服务（默认关闭），将数据采集日志同步至MaxCompute项目。单击 编辑，进行以下配置，单击 保存 完成设置。说明 采集数据同步服务、采集日志同步服务可以不同时开启。开启并配置采集数据同步服务。开启 采集数据同步服务 ...
CreateStoreView-创建数据集
my_storeview storeType string 是 数据集类型，支持两种类型，当创建时序库数据集时 storeType 指定为 metricstore，当创建日志库数据集时，storeType 指定为 logstore。logstore stores array 是 日志库或者时序库列表。StoreViewStore ...
数据同步方案概览
源为自建SQL Server或RDS SQL Server的同步方案 源为自建MongoDB或云数据库MongoDB的同步方案 源为自建Redis或云数据库Tair/Redis的同步方案 源为MariaDB的同步方案 源为Db2 for LUW的同步方案 源为Db2 for i（AS/400）的同步方案 源为数据...
使用RDS内网地址访问RDS MySQL数据库
当您的数据分散存储在日志服务Logstore和RDS MySQL数据库中时，您可以通过日志服务数据加工功能从对应数据库获取数据，实现数据富化。本文介绍如何配置数据加工规则及高级参数，实现通过RDS内网地址访问RDS MySQL数据库获取数据。背景信息 ...
部署方案
云数据库 OceanBase 支持包年包月和按量付费两种付费方式，部署方案支持多机房部署、双机房部署和单机房部署三种部署方案。高可用版本 多机房部署 云数据库 OceanBase 多机房部署指将三个节点部署在三个不同可用区，实现跨可用区容灾。每个...
日志字段详情
字段 说明_topic_日志主题 redis_audit_log：DB节点的审计日志 redis_proxy_audit_log：Proxy节点的审计日志 account 数据库账号名称 command 执行的Redis命令 db 数据库名称 extend_information 附加信息 instanceid Redis实例ID ip IP...
事件操作函数
e_if(e_match("k2",r"\w+"),e_output(name="target2",source="source1",topic="topic1"))e_drop()加工结果_topic_:topic1 k1:v1 k2:v2 x1:v3 x5:v4 示例2：基于日志中 db_version 字段的值计算Hash，并根据此Hash值将日志固定输出到存储...
开通日志管理功能
在左侧导航栏中，选择 业务观测>调用日志同步。在顶部菜单栏中，选择地域。在 日志管理 页面，单击 创建日志配置。在 创建日志配置 对话框中，选择您已创建的Project和Logstore，并单击 确定。在 系统提示 对话框中，单击 去SLS控制台配置...
日志同步报警
若您购买了数据采集功能包，并在 组织系统配置 中配置了采集数据同步服务，系统将采集的日志数据加工成可用于分析筛选的行为数据，并将加工好的数据自动同步到用户指定的ADB3.0数据源中。若未成功同步数据到用户指定的数据源，则将在消息...
从ECS上的自建MySQL同步至RDS
为避免该问题，您可以在数据同步配置时将该表所属的整个数据库作为同步对象，且确保RENAME TABLE操作前后的表所属的数据库均在同步对象中。TRUNCATE TABLE 功能限制 不兼容触发器 当同步对象为整个库，且库中的触发器（TRIGGER）会更新库内...
不同阿里云账号下RDS实例间的数据同步
为避免该问题，您可以在数据同步配置时将该表所属的整个数据库作为同步对象，且确保RENAME TABLE操作前后的表所属的数据库均在同步对象中。TRUNCATE TABLE 功能限制 不兼容触发器 当同步对象为整个库，且库中的触发器（TRIGGER）会更新库内...
通过数据同步功能同步SLS数据至数仓版
通过 AnalyticDB for MySQL 的数据同步功能，您可以将SLS中指定时间点之后产生的数据实时同步至 数仓版（3.0）集群，以满足日志数据实时分析的需求。前提条件 数仓版（3.0）集群与日志服务SLS的 Project和 Logstore位于同一地域。具体操作...
通过数据同步功能同步SLS数据至湖仓版
通过 AnalyticDB for MySQL 的数据同步功能，您可以将SLS中指定时间点之后产生的数据实时同步至 湖仓版（3.0）集群，以满足日志数据实时分析的需求。前提条件 湖仓版（3.0）集群与日志服务SLS的 Project和 Logstore位于同一地域。具体操作...
DescribeSynDbs-查看同步db
database SynStatus boolean 同步是否成功，取值说明：true：同步成功。false：同步失败。true ErrorMsg string 当 SynStatus 返回为 true 时，不返回该参数。当 SynStatus 返回为 false 时，表示同步失败的原因。ClickHouse exception,...
新功能发布记录
2022-09-14 全部地域 过滤日志 2022年8月 功能名称 功能描述 发布时间 支持地域 相关文档 导入MySQL Binlog 您可以将自建MySQL数据库或RDS MySQL数据库中的Binlog导入到 日志服务，实现数据的查询分析、加工等操作。2022-08-23 部分地域 ...
通过数据同步功能同步SLS至湖仓版（推荐）
AnalyticDB for MySQL 湖仓版（3.0）支持新建SLS同步链路，通过同步链路从指定时间位点将日志服务LogStore中的数据实时同步至 湖仓版（3.0），以满足近实时产出、全量历史归档、弹性分析等需求。本文介绍如何添加SLS数据源，新建SLS同步...
快速使用WAF日志服务
Web应用防火墙（Web Application Firewall，简称WAF）日志服务通过阿里云日志服务实时地采集已接入WAF防护的网站业务的全量日志，并对采集到的日志数据进行查询与分析，以丰富的仪表盘形式展示查询结果，满足等保合规要求和网站业务的防护...
算法说明
日志聚类算法 日志聚类算法基于日志聚类功能，日志聚类功能对日志数据进行粗粒度聚类，日志聚类算法在粗粒度聚类的结果上进行精度更高的二次聚类。开启日志聚类、查看聚类结果等操作步骤，请参见 日志聚类。模板发现算法 模板发现算法使用...
同步日志
在当前版本中，不同同步方式下，同步日志的记录情况如下：入方向 出方向 记录同步日志 从身份提供方同步 由 IDaaS 推送给应用 由 IDaaS 推送给身份提供方（暂不支持）不记录同步日志，但会记录为管理或用户日志 OpenAPI Developer API（暂...
观测云
基于数据采集引擎DataKit、查询语言DQL和观测云平台，实现系统整体可观测性，统一满足运维人员、开发人员和测试人员的监测需求。简介 观测云的基本信息如下表所示。更多信息，请参见 观测云。类目 说明 项目 观测云SaaS专属版 功能 支持...
日志服务通过数据集成投递数据
本文将以LogHub数据同步至MaxCompute为例，为您介绍如何通过数据集成功能同步LogHub数据至数据集成已支持的目的端数据源（例如MaxCompute、OSS、Tablestore、RDBMS和DataHub等）。前提条件 准备好相关的数据源，详情请参见 创建MaxCompute...
Redis企业版实例间的双向同步
说明 如果源或目标数据库是阿里云数据库实例（例如 RDS MySQL、云数据库MongoDB版 等）或ECS上的自建数据库，DTS会自动将对应地区DTS服务的IP地址添加到阿里云数据库实例的白名单或ECS的安全规则中，您无需手动添加，请参见 DTS服务器的IP...
PolarDB MySQL版间的双向同步
说明 如果源或目标数据库是阿里云数据库实例（例如 RDS MySQL、云数据库MongoDB版 等）或ECS上的自建数据库，DTS会自动将对应地区DTS服务的IP地址添加到阿里云数据库实例的白名单或ECS的安全规则中，您无需手动添加，请参见 DTS服务器的IP...
迁移工具
将MySQL数据同步到表格存储 canal canal基于MySQL数据库增量日志解析，提供增量数据订阅和消费功能，是阿里开源CDC工具，它可以获取MySQL binlog数据并解析，然后将数据变动传输给下游。基于canal，您可以实现从MySQL到其他数据库的实时...
使用前须知
功能说明 全栈可观测基于日志服务的采集、存储、分析、可视化、告警、AIOps等能力，详细功能如下：实时监控各类系统，包括主机监控、Kubernetes监控、数据库监控、中间件监控等。提供全链路分布式链路追踪功能，支持OpenTelemetry、...
- 产品推荐
- 这些文档可能帮助您