CDC问题
如何读取一个分库分表的MySQL数据库？多个CDC作业导致数据库压力过大怎么办？使用MySQL CDC，增量阶段读取出来的timestamp字段时区相差8小时，怎么回事呢？MySQL CDC支持监听从库吗？从库需要如何配置？怎么获取数据库中的DDL事件？Flink ...
管理本地日志（Binlog）
MySQL的本地日志（Binlog）是一种记录MySQL数据库所有更改操作的日志文件，可用于自行搭建主从架构、订阅数据等。本文介绍如何查看或删除RDS MySQL实例的本地日志（Binlog）。本地日志与日志备份区别 对比项 本地日志（Binlog）日志备份 ...
采集MySQL Binlog（计划弃用）
本文介绍通过Logtail采集MySQL Binlog的操作步骤。重要 日志服务后续计划不再支持MySQL Binlog采集插件，当前已不支持新用户新建采集配置，原有的采集配置仍能正常使用，建议您使用DataWorks或Flink进行采集。具体操作，请参见 MySQL、...
配置MySQL输入
MySQL输入基于Binlog实时订阅的方式，实时读取您配置的MySQL数据库表数据。本文为您介绍，如何配置MySQL输入，以及配置输入之前需要准备的网络环境及账号权限。前提条件 配置MySQL输入之前，请确保已完成以下规划与准备工作。已配置同步...
MySQL日志备份
数据库已开启Binlog，具体操作，请参见如下步骤：用如下命令确认MySQL数据库的binlog是否已开启。show variables like '%log_bin%';可选：若未开启，可参见如下命令开启Binlog：在/etc/my.cnf文件中增加如下内容：log_bin=mysql-bin binlog...
为自建MySQL创建账号并设置binlog
当数据迁移/同步/订阅的源库为自建MySQL时，为满足预检查阶段对源库的要求，保障任务的顺利执行，在正式配置之前，您需要在自建MySQL数据库上创建账号并设置binlog。适用场景及权限参考 场景 权限参考 数据迁移的源库为自建MySQL，且要执行...
常见问题
MySQL数据源网络联通性测试失败怎么办？实时任务，运行报错：com.alibaba.otter.canal.parse.exception.PositionNotFoundException: can't find start position for XXX 实时任务，运行报错：...
使用生态工具消费PolarDB-X的binlog
使用同步工具消费 PolarDB-X 的binlog 说明 依托于MySQL复制协议的开放性，业界有很多基于MySQL binlog的数据同步生态工具，这些工具在很多行业和企业被广泛使用，PolarDB-X 针对这些工具进行了专门的适配测试，目前已验证的工具列表如下。...
常见问题
MySQL数据源网络联通性测试失败怎么办？实时任务，运行报错：com.alibaba.otter.canal.parse.exception.PositionNotFoundException: can't find start position for XXX 实时任务，运行报错：...
基础版Spark全密态计算引擎使用示例
cryptoTool decrypt decryption_config.json 在RDS MySQL数据库中查看解密后的数据。可看到数据明文的计算结果。SELECT*FROM adb_customer_output;返回结果：+-+-+-+-+|id|name|address|age|+-+-+-+-+|1|james|beijing|10|+-+-+-+-+
全增量同步任务常见问题
MySQL数据源网络联通性测试失败怎么办？全增量实时至MaxCompute时，数据源被置灰了没法选择怎么办？实时任务，运行报错：com.alibaba.otter.canal.parse.exception.PositionNotFoundException: can't find start position for XXX 实时任务...
DataV
域名 连接 AnalyticDB MySQL 数据库的URL地址。说明 此处的URL地址不是官网页面的URL，也不是本机的IP，是需要DataV服务器能够通过公网或阿里云部分Region内网访问您数据库的URL地址。例如使用外网环境下的阿里云 AnalyticDB MySQL，域名...
通过MySQL分析实例同步至数仓版
您可以通过 AnalyticDB MySQL版 控制台或者RDS控制台实例详情页创建和查看MySQL分析实例。MySQL分析实例创建成功后，会默认将RDS MySQL实例中的全部数据同步到MySQL分析实例中。前提条件 RDS MySQL实例版本需满足以下条件才可以创建MySQL...
AnalyticDB MySQL助力Flowerplus业务高速发展
复杂数据查询性能 使用传统MySQL数据库对订单、商品流量、采购、业务转化率以及商品售罄报警等分析时速度较慢，数据达到千万级或者亿级时，复杂查询报表返回很慢或者根本无法返回，无法正常支撑报表和BI业务。数据实时性 部分报表对返回...
MySQL数据库对外键和索引等名称的长度限制导致创建时...
问题描述 RDS产品的MySQL数据库创建索引报如下错误。Identifier name 'XXXXXXXXXXXXXXXXXXXXXXXXXXXXXXXXXXXXXXXXXXXXXXXXXXXXXXXXXXXXXXXX' is too long 问题原因 因为 MySQL数据库 对外键和索引等名称的长度有限制，具体如下：Identifier...
日志节点发布说明
优化 优化mysql binlog dump兼容性，支持checksum、heartbeat等参数。发布日期：2023-12-21 版本号：polarx-cdc-kernel-2.3.0_4988569 类别 说明 新增 新增支持SQL闪回回滚整个事务。修复 修复TSO心跳在binlog中的记录方式，解决下游MySQL ...
数据迁移方案概览
“数据传输”导入 事务引擎/分析引擎 使用数据传输（Data Transmission Service）将自建MySQL数据库或者RDS for MySQL数据库迁移到HybridDB for MySQL中。从MySQL批量导入导出 分析引擎 HybridDB for MySQL支持从自建MySQL中全量导入和导出...
查询数据库账号
AnalyticDB MySQL兼容MySQL数据库，AnalyticDB MySQL中也有一个名为MySQL的内置数据库，该数据库中存储的是AnalyticDB MySQL中的用户与权限信息。您可以通过SELECT语句查询AnalyticDB MySQL中的用户信息。注意事项 AnalyticDB MySQL中，...
通过Spark SQL访问MySQL数据
AnalyticDB MySQL 湖仓版（3.0）支持提交Spark SQL作业，您可以通过View或Catalog两种方式访问自建MySQL数据库或云数据库RDS MySQL、云原生数据库 PolarDB MySQL。本文以RDS MySQL为例，介绍如何通过Spark SQL访问RDS MySQL数据。前提条件 ...
如何设置MySQL数据库备份的binlog_format
本文介绍如何设置MySQL数据库备份的binlog_format。使用说明 binlog_format 需要设置为row，而row模式binlog会包含DML完整的前镜像和后镜像数据，便于数据恢复。binlog_format 不推荐设置为statement、mixed模式，相比row模式，没有更好...
使用HybridDB for MySQL需要有ECS吗？
初始默认状态下，HybridDB for MySQL仅...用户也可以在管理控制台上开通公网IP，就可以从公网访问HybridDB for MySQL数据库。但需注意，由于公网的网络情况较复杂且不属于阿里云的管理访问之内，通过公网IP地址访问数据库的网络性能会有损失。
不同编程语言中如何开启客户端的PrepareStatement
AnalyticDB MySQL 数据库自身具备强大的查询计算能力和计划缓存功能，无需依靠服务器端预处理语句获得大部分性能优势。AnalyticDB MySQL 数据库不建议使用服务器端预编译。大部分开发语言中支持通过配置开启客户端预编译（PrepareStatement...
为什么HybridDB for MySQL 数据库刚创建时就有磁盘...
HybridDB for MySQL 数据库在初创时，会初始化一些系统文件，也会为表空间预分配一些空白磁盘页面，因此会使用一定的磁盘空间，这些磁盘空间在用户有真实数据写入时，会被重新利用起来。
Smartbi
本文列出了Smartbi与 AnalyticDB MySQL版 在连通性、列举数据库、查询表数据等方面的兼容性。测试环境 Smartbi试用地址为 登录Smartbi。...测试范围 连接 AnalyticDB MySQL版 集群数据库 列举数据库 查看表结构 查看表数据
SHOW COLUMNAR OFFSET
本文介绍了如何使用 SHOW COLUMNAR OFFSET 语句查看列存同步位点。注意事项 实例版本需为 5.4.19-16989811及以上。语法 SHOW COLUMNAR OFFSET 示例 SHOW COLUMNAR OFFSET;TYPE|BinlogFile|Position|TSO|TIME|LATENCY(ms)|+-+-+-+-+-+-+|CDC...
名称解释
用户需要在开通HybridDB for MySQL数据库时指定，购买实例后不支持更改。在购买HybridDB for MySQL数据库时，需要搭配阿里云服务器ECS使用，目前HybridDB for MySQL只支持阿里云内网访问，在地域选择时需要与ECS相同。可用区 可用区（AZ）...
SHOW BINLOG EVENTS
本文介绍了如何使用SHOW BINLOG EVENTS语句查看Binlog文件中的具体事件信息。语法 SHOW BINLOG EVENTS[WITH stream_name]说明：执行上述SQL需要有 REPLICATION SLAVE 权限，权限操作请参见 账号权限管理。不加 WITH 子句，可查看单流服务中...
通过外表导入至湖仓版
示例数据说明 本文示例的RDS MySQL数据库名为 test_adb，并在该库中创建了一张名为 person 的表，示例如下：CREATE TABLE IF NOT EXISTS test_adb.person(id int,name varchar(1023),age int);向 person 表中插入数据，示例如下：INSERT ...
用户管理
LIST USERS 数据库创建者也可以查询指定数据库中的所有用户（包括子账号）LIST USERS ON db_name.*示例 数据库创建者通过 LIST USERS 查看用户列表。LIST USERS+-+|USERS|+-+|ALIYUN$dt*_docs|RAM$dt*_docs:adb_account|新增用户 注意：...
应用场景
在基于 MySQL 数据库的系统架构下，存放着设备信息的库表，往往需要使用分库分表和相应的数据分发技术才能承担业务流量。分库分表的设计不仅增加了数据库运维人员的管理难度，也让系统架构的扩展受到了很大的限制。HybridDB for MySQL的...
快速入门综述
快速使用AnalyticDB MySQL版2.0服务 AnalyticDB MySQL版 2.0 全面兼容MySQL协议和SQL 2003，成功购买 AnalyticDB MySQL版 2.0 后，您就可以像使用MySQL数据库一样快速使用 AnalyticDB MySQL版 2.0。创建表组 表组是一系列可发生关联的数据...
C#（Mac）
根据 AnalyticDB MySQL使用流程，在 AnalyticDB MySQL 数据库中准备测试数据。create table t1(a int,s1 varchar)DISTRIBUTE BY HASH(`a`)ENGINE='CSTORE';insert into t1 values(11,'test1'),(22,'test2'),(33,'test3'),(44,'test4');...
概述
MySQL Binary Log（简称binlog），是MySQL记录所有导致数据更改操作的二进制日志文件，这些操作有INSERT、UPDATE、DELETE以及DDL等。...总之，PolarDB-X 的CDC提供的binlog服务，可以让您获得与单机MySQL数据库一致的使用体验。
Tableau
本文测试了Tableau与 AnalyticDB MySQL 在列举数据库、查看表表等方面的兼容性，并给出测试结果图。测试环境 MySQL Tableau mysql Ver5.6.46 for osx10.13 on x86_64(Homebrew)Tableau Desktop 2019.4 测试范围 列举数据库 列举所有表 查看...
Java访问（2.0版）
不带重试的JDBC连接示例 您可以在业务系统的Java代码中添加以下代码，通过MySQL JDBC连接AnalyticDB for MySQL数据库。Connection connection=null;Statement statement=null;ResultSet rs=null;try { Class.forName(...
导出至RDS MySQL
说明 登录 RDS控制台，单击实例ID，在 数据库连接 页面的 网络类型 位置，查看RDS MySQL实例所在的VPC ID。登录 AnalyticDB MySQL控制台，在 数仓版（3.0）页签单击集群ID，在 集群信息 页面的 网络信息 位置，查看 AnalyticDB MySQL 集群...
通过外表导入至数仓版
说明 登录 RDS控制台，单击实例ID，在 数据库连接 页面的 网络类型 位置，查看RDS MySQL实例所在的VPC ID。登录 AnalyticDB MySQL控制台，在 数仓版（3.0）页签单击集群ID，在 集群信息 页面的 网络信息 位置，查看 AnalyticDB MySQL 集群...
Spark SQL开发介绍
AnalyticDB MySQL版 Spark支持在控制台直接提交Spark SQL，无需编写JAR包或者Python代码，便于数据开发人员使用Spark进行数据分析。本文介绍 AnalyticDB MySQL版 Spark ...例如查询语句SELECT、插入语句INSERT、查看数据库SHOW DATABASE等。
访问RDS MySQL数据源
查看方法，请参见查看或修改内外网地址和端口。val url="jdbc:mysql:/rm-bp11mpql1e01*.mysql.rds.aliyuncs.com" // RDS MySQL的表名。格式为"db_name.table_name。val dbtable="test.persons"/连接RDS MySQL数据库的账号。val user="mysql...
API概览
DescribeAdbMySqlTables 查询数据库下所有表信息 枚举AnalyticDB MySQL湖仓版（3.0）集群指定数据库下所有表信息。DescribeAdbMySqlSchemas 查询所有数据库列表 枚举指定AnalyticDB MySQL湖仓版（3.0）集群下所有数据库列表。GetViewDDL ...
- 产品推荐
- 这些文档可能帮助您