查看错误日志和慢日志
关于Binlog日志，请参见 自动备份 和 下载备份。其他引擎的日志管理请参见：SQL Server日志管理 PostgreSQL日志管理 MariaDB日志管理 查看日志 访问 RDS实例列表，在上方选择地域，然后单击目标实例ID。在左侧导航栏中单击 日志管理。在 ...
生成和采集ASM网关访问日志
ASM网关的访问日志配置主要分为生成和采集。生成指网关打印日志到标准输出，您可以自定义在访问日志中打印哪些字段；采集指将网关打印的日志采集到阿里云日志服务，阿里云日志服务可以提供日志的存储、分析以及展示等功能。生成和采集是...
生成和采集ASM网关访问日志
ASM网关的访问日志配置主要分为生成和采集。生成指网关打印日志到标准输出，您可以自定义在访问日志中打印哪些字段；采集指将网关打印的日志采集到阿里云日志服务，阿里云日志服务可以提供日志的存储、分析以及展示等功能。生成和采集是...
RDS MySQL与PolarDB MySQL版间的双向同步
如果源或目标数据库是ECS上的自建数据库，DTS会自动将对应地区DTS服务的IP地址添到ECS的安全规则中，您还需确保自建数据库没有限制ECS的访问（若数据库是集群部署在多个ECS实例，您需要手动将DTS服务对应地区的IP地址添到其余每个ECS的安全...
create_external_store
调用CLI命令关联外部数据源。当前支持关联RDS MySQL、OSS、本地CSV文件作为外部数据源。注意事项 说明 在进行日志数据查询分析时，...使用日志服务关联RDS MySQL进行数据关联查询的最佳实践，请参见 关联Logstore与MySQL数据库进行查询分析。
数据迁移方案概览
“数据传输”导入 事务引擎/分析引擎 使用数据传输（Data Transmission Service）将自建MySQL数据库或者RDS for MySQL数据库迁移到HybridDB for MySQL中。从MySQL批量导入导出 分析引擎 HybridDB for MySQL支持从自建MySQL中全量导入和导出...
查看日志
关于Binlog日志，请参见 自动备份MariaDB数据 和 下载日志备份。查看日志 登录 RDS管理控制台。在页面左上角，选择实例所在地域。找到目标实例，单击实例ID。在左侧导航栏中单击 日志管理。在 日志管理 页面选择查询错误日志、慢日志明细...
通过日志服务导入至数仓版
左边文本框为日志字段名称，右边为AnalyticDB MySQL数据库表中的字段。说明 Timestamp类型的字段映射精确到秒级别。例如日志时间为2022-01-05 10:12:13.145，投递到AnalyticDB MySQL后，投递结果为2022-01-05 10:12:13。投递开始时间 配置...
接入MySQL监控数据
MySQL数据库中提供多项监控指标，您可以将MySQL数据库中的监控指标接入到全栈可观测应用中，进行可视化展示。前提条件 已创建全栈可观测实例。具体操作，请参见 创建实例。已有可用的MySQL数据库。仅支持MySQL 5.5及以上版本。操作步骤 ...
PolarDB-X数据同步工具
兼容的数据同步工具 数据同步工具 兼容版本 说明 MySQL Slave>=5.4.11 目前不支持GTID模式复制 canal>=5.4.11 无 DTS>=5.4.11 具体操作步骤请参见 同步方案概览。debezium>=5.4.12 不支持快照能力，使用时需要关闭快照"snapshot.mode":...
RDS MySQL或自建MySQL逻辑备份
本文仅介绍如何创建并配置MySQL数据库逻辑备份计划，DBS还支持对自建MySQL数据库的物理文件进行全量备份、增量备份、Binlog日志文件备份。更多详情，请参见 MySQL物理备份、MySQL日志备份 以及 逻辑备份和物理备份的区别。配置备份计划 ...
通过数据传输服务进行PolarDB MySQL数据同步时提示...
问题描述 使用阿里云数据传输服务DTS对云原生关系型数据库PolarDB MySQL进行数据同步时，已同步部分数据，但数据不完整，提示以下错误信息：Original error:You are not using binary logging For more information please refer to ...
新用户必读
数仓版快速入门：引导您完成创建数仓版集群、设置白名单、创建数据库账号、创建数据库、连接集群、创建表以及同步数据的操作。湖仓版快速入门：引导您完成创建湖仓版集群、创建数据库账号、绑定RAM用户与数据库账号、创建资源组、分析数据...
最佳实践
时序存储 使用Prometheus采集Kubernetes监控数据 查询与分析 查询和分析网站日志 查询和分析JSON日志 Data Explorer案例 关联Logstore与MySQL数据库进行查询分析 关联Logstore与OSS外表进行查询和分析 查询MNS日志 采集及分析Nginx监控日志...
数据追踪
DMS 的数据追踪功能支持按需查找目标时间段内（数据库Binlog保存时长内）的相关更新信息，并生成回滚脚本，帮助您快速将数据恢复到变更前。前提条件 数据库类型为MySQL，且MySQL为5.6及以上版本。说明 包含已接入DMS企业版统一管理的 RDS ...
通过一键建仓同步至数仓版
数据库名称 从下拉列表中选择目标 AnalyticDB MySQL 数据库名。表名 从下拉列表中选择目标 AnalyticDB MySQL 表名。账号名称 目标 AnalyticDB MySQL 中创建的 数据库账号。账号密码 填写账号名称对应的密码。字段映射 系统自动提取日志服务...
备份MySQL
为避免灾难、硬件故障、数据丢失、损坏和意外删除事故发生，建议您通过 云备份 及时对MySQL数据库进行备份。云备份 支持备份云服务器ECS实例或本地服务器中部署的MySQL数据库，将数据备份至云端。您可以随时根据时间点恢复数据库至源数据库...
库表恢复：按时间点恢复
具体的Binlog日志内容如下图中红框所示部分：在获取Binlog日志文件内容后，可参见 解析Binlong日志 进行Binlog日志解析。步骤二、开始库表恢复 进入集群详情页，在左侧导航栏中，选择 配置与管理>备份恢复。在 备份恢复 页面，单击 库（表...
API概览
UnbindDBResourceGroupWithUser 解绑资源组和用户 调用UnbindDBResourceGroupWithUser接口为AnalyticDB MySQL集群的资源组解绑数据库账号。DescribeDBClusterStatus 查看集群的运行状态 调用DescribeDBClusterStatus接口查询AnalyticDB ...
基本概念
物理库 物理库，是数据库在物理存储设备上的物理表示和存储方式，包括数据文件、日志文件、索引文件等。创建 AnalyticDB for MySQL 集群时，会自动创建一个物理库。每一个物理库被切分为若干个分片（Shard）。这些分片分布到若干个节点组...
订阅Hologres Binlog
Binlog介绍 Hologres同传统MySQL数据库一样，支持通过Binlog记录数据库中所有数据的变化事件日志。通过Hologres Binlog，可以非常方便灵活的实现数据之间的复制、同步。但是Hologres Binlog一般只用于数据同步，而传统数据库Binlog还应用于...
Logtail采集日志失败的排查思路
使用Logtail采集日志后，如果预览页面为空或查询页面无数据，您可以根据本文步骤进行排查。操作步骤 确认日志文件是否有更新。Logtail只采集增量的日志。更多信息，请参见 读取文件。如果下发Logtail配置后，日志文件无更新，则Logtail不会...
映射富化函数
本文介绍映射富化函数的语法规则，包括参数解释、函数示例等。函数列表 类型 函数 说明 字段映射 e_dict_map 与目标数据字典进行映射，根据输入的字段映射一个新字段。支持和其他函数组合使用。相关示例，请参见 使用e_dict_map、e_search_...
通过JDBC协议分析日志
连接参数 此处以MySQL数据库为例，介绍连接参数。重要 MySQL JDBC不支持分页。连接语法的格式 mysql-h host-u user-p password-P port use database;示例 mysql-h my-project.cn-hangzhou-intranet.log.aliyuncs.com -u bq*mo86kq-p 4f*uZP...
无感数据集成（Zero-ETL）
AnalyticDB for MySQL 提供无感集成（Zero-ETL）功能，可以帮助您一站式完成数据同步和管理，实现事务处理和数据分析一体化，专注于数据分析业务。公测时间 2024年4月22号到6月30。公测地域 华北2（北京）、华东1（杭州）、华东2（上海）、...
开启Binlog
背景信息 PolarDB 是一款完全兼容MySQL的云原生数据库，默认使用了更高级别的物理日志代替Binlog，但为了更好地与MySQL生态融合，PolarDB 支持手动开启Binlog，开启Binlog后您就可以连接 ElasticSearch、AnalyticDB 等数据产品，也可以搭建...
RDS MySQL备份、SQL洞察相关问题
答：备份使用量等于保存时间内备份集和binlog日志相加的大小。备份文件是否可以删除？答：请参见 删除或减少备份。一键上传Binlog后，为什么备份使用量没有减少？答：一键上传Binlog 功能是从当前实例存储空间中，将已经不再写入的Binlog...
开启或关闭增量日志备份
增量备份通过记录数据库事务日志，准确追踪数据库的变化操作，如插入、更新和删除。开启增量日志备份后，支持恢复到自备份后的任意时间点，增量备份的数据生命周期信息与全量备份一致。本文介绍开启或关闭增量日志备份的方法。前提条件 ...
MySQL数据源
您可以在MySQL数据库通过如下语句查看当前MySQL数据库版本。SELECT version();准备工作2：配置账号权限 建议您提前规划并创建一个专用于DataWorks访问数据源的MySQL账号，操作如下。可选：创建账号。操作详情请参见 创建MySQL账号。配置...
5.6/5.7/8.0内核版本
数据库内核是指数据库引擎。PolarDB MySQL版 包含5.6、5.7和8.0三个大的数据库内核版本。PolarDB MySQL版 数据库内核在 PolarDB MySQL版 架构中的位置如下图所示。内核版本组成及关系说明 一个完整的 PolarDB MySQL版 数据库内核版本号由大...
常见报错
源库binlog存在性检查失败 报错场景：自建MySQL数据库启动备份计划，显示源库binlog存在性检查失败。解决方法：进入MySQL命令行，使用以下命令查看binlog日志是否开启：SHOW variables LIKE 'log_%';如果binlog日志未开启（如下图所示），...
InnoDB Physiological Logging
逻辑日志（Logical Logging）逻辑日志记录的是对于表的操作，类似于MySQL数据库上层产生的二进制日志（Binlog）。记录的是操作，与物理格式无关。优点 记录非常高效。例如，DELETE 操作只需要记录几个字节。在SMO和页面整理等场景更加明显...
RDS MySQL远程获取的binlog日志报错File is not a ...
问题描述 MySQL读取binlog文件报错：File is not a binary log file 解决方案 在RDS控制台>备份恢复>日志备份（如截图），下载要读取的binlog到本地，在本地解析 问题原因 mysqlbinlog命令去解析的文件必须是show binary logs 里面可获取到...
MySQL基础问题排查
清理数据文件 对于数据文件占用空间高的情况，可以通过清理数据的方式来减少空间占用情况，比如通过 drop table 和 truncate table 来清理不再需要的数据。information_schema.tables 查询的数据容量。information_schema.tables 提供的是...
常见问题
以下为您介绍实时同步数据至Hologres操作失败的常见问题和解决方案。PolarDB数据源网络联通性测试失败怎么办？Oracle数据源网络联通性测试失败怎么办？MySQL数据源网络联通性测试失败怎么办？实时任务，运行报错：...
设置告警
外部配置 无 PolarDB数据库更新峰值监控告警 项目 说明 规则名称 PolarDB数据库更新峰值监控告警 作用 监控PolarDB MySQL数据库的更新（增删改）峰值。当更新峰值超过 更新峰值阈值 时，触发告警。参数配置 告警名称：告警名称。行动策略：...
从自建MySQL迁移至MyBase MySQL
DTS支持结构迁移、全量数据迁移以及增量数据迁移，同时使用这三种迁移类型可以实现在自建应用不停服的情况下，平滑地完成自建MySQL数据库的迁移上云。本文是以新版数据传输服务DTS（Data Transmission Service）控制台为例，旧版数据传输...
配置威胁检测规则
配置检测规则 检测规则是用于检测和分析云产品日志数据的策略，您可以通过指定日志范围、匹配字段、聚合字段等，定义威胁分析与响应自动检测和分析日志的逻辑，帮助您快速识别出业务系统的安全风险。威胁分析与响应提供预定义规则和自定义...
应用场景
在基于 MySQL 数据库的系统架构下，存放着设备信息的库表，往往需要使用分库分表和相应的数据分发技术才能承担业务流量。分库分表的设计不仅增加了数据库运维人员的管理难度，也让系统架构的扩展受到了很大的限制。HybridDB for MySQL的...
日志引擎
PolarDB-X 的Binlog是通过独立部署的集群进行生成的，日志引擎允许您单独管理您的日志引擎模块的集群。集群类型 PolarDB-X 实例日志引擎支持管理如下三种集群类型：集群类型 说明 pxc-*-cdc 单流Binlog集群 pxc-cdc-import-*1.0升级2.0数据...
- 产品推荐
- 这些文档可能帮助您