通过DataWorks导入数据
本文介绍如何通过DataWorks将RDS MySQL数据导入至 AnalyticDB MySQL版 湖仓版（3.0）或 数仓版（3.0）。前提条件 已购买合适规格的独享数据集成资源组。详情请参见：新增和使用独享数据集成资源组。已完成数据集成资源组与数据源的网络连通...
不支持同步无主键的表
问题描述 DTS同步任务是整库同步，在源库创建的无主键表没有同步到目标库中时，报错信息一般是表不存在。问题原因 DTS不支持无主键表同步到AnalyticDB MySQL中。解决方案 阿里云提醒您：如果您对实例或数据有修改、变更等风险操作，务必...
Golang访问（2.0版）
下载Golang MySQL Driver，请参见 Golang MySQL Driver。使用Shell中的go工具将驱动包安装到$GOPATH 中。go get github.com/go-sql-driver/mysql 说明 要求在您的主机和系统的PATH中安装了Git。连接AnalyticDB MySQL 2.0 package main ...
查询数据库账号
AnalyticDB MySQL兼容MySQL数据库，AnalyticDB MySQL中也有一个名为MySQL的内置数据库，该数据库中存储的是AnalyticDB MySQL中的用户与权限信息。您可以通过SELECT语句查询AnalyticDB MySQL中的用户信息。注意事项 AnalyticDB MySQL中，...
使用DTS同步数据时出现“Cannot parse"2013-05-00 00:...
问题描述 使用DTS同步数据时，出现类似“Cannot parse"2013-05-00 00:00:00":Value 0 for dayOfMonth must be in the range[1,31]]”报错，...如果是在整库同步的增量同步阶段报错，请提交工单处理。适用于 云原生数据仓库AnalyticDB MySQL版
Serverless存储层
云原生数据仓库AnalyticDB MySQL版 采用计算存储分离的架构，通过云原生技术实现了池化，提供了Serverless存储的能力。Serverless架构下的存储资源支持独立弹性伸缩，同时提供了按需横向弹性（扩展存储节点数）和按需纵向弹性（升配存储...
赛盒广告精细化管理方案
解决方案 针对以上问题，阿里云通过 分析型数据库MySQL（AnalyticDB MySQL）和Quick BI制定了解决方案。方案中采用 AnalyticDB MySQL 存放业务数据，AnalyticDB MySQL 的配置为集群版16个C8节点，可支撑上万TPS（Transactions-per-second）...
调优集群性能
语义错误 SQL符合 云原生数据仓库 AnalyticDB MySQL 版 官方对SQL语法的定义，但在语义检查时，发现数据库对象错误，在语义分析阶段报错。例如，表名错误、列不存在、GROUP BY字段缺失、函数参数类型错误等。集群内部问题导致查询失败 查询...
新功能发布记录
Spark应用访问公网配置说明 通过Spark SQL访问MySQL数据 湖仓版（3.0）支持通过Spark SQL访问自建MySQL数据库或阿里云MySQL系列的数据库。通过Spark SQL访问MySQL数据 通过Spark SQL读Lindorm数据 湖仓版（3.0）支持通过Spark SQL访问...
导入数据并查询
通过 CREATE TABLE，在 adb_demo 数据库中创建目标表 adb_oss_import_test 存储从OSS中导入的数据。CREATE TABLE IF NOT EXISTS adb_oss_import_test(uid string,other string)DISTRIBUTED BY HASH(uid);执行 INSERT 语句将OSS数据导入 ...
存储层高可用
AnalyticDB的存储层是基于Raft协议构建了一套分布式强一致、高可用、高可靠的存储...三副本的多数派存活是保证数据读写高可用的关键，优势在于可允许1个副本所在节点发生宕机或重启，即少数派failover的情况下，数据库仍然能提供读写服务。
通过Spark SQL读写C-Store表数据
AnalyticDB MySQL 湖仓版（3.0）集群支持通过Spark SQL在线或离线读写C-Store表数据。本文主要介绍通过Spark SQL在线或离线读写C-Store表数据的具体方法。前提条件 湖仓版（3.0）集群的存储预留资源需大于0 ACU。详情请参见 创建湖仓版集群...
存储层弹性
AnalyticDB MySQL 弹性模式集群版（新版）采用了计算存储分离架构，集群的存储资源与计算资源相互独立。AnalyticDB MySQL 的存储节点除了进行数据存储，还提供数据写入、数据查找和数据扫描等能力。如果读写性能出现瓶颈需要到控制台手动扩...
从MaxCompute批量导入导出
导出HybridDB for MySQL数据到MaxCompute非分区表 insert[overwrite]into odps_nopart_export_test_external_table select*from hybriddb_nopart_export_test#导出HybridDB for MySQL数据到MaxCompute分区表某个分区 insert[overwrite]into...
从OSS批量导入导出
这里导入导出都是同步模式，发起导入的MySQL Client需要一直与数据库保持连接。如需要异步提交，请参见 异步提交导入任务。OSS数据文件无需文件头。如果HybridDB for MySQL存储表中有自增列，OSS外部表的DDL定义无需定义自增列，OSS数据...
使用数据集成迁移数据到AnalyticDB MySQL 2.0
支持的数据源类型 数据集成提供丰富的数据源支持，如下所示：文本存储（FTP/SFTP/OSS/多媒体文件等）数据库（RDS/DRDS/MySQL/PostgreSQL等）NoSQL（Memcache/Redis/MongoDB/HBase等）大数据（MaxCompute/云原生数据仓库AnalyticDB MySQL版 ...
QlikView（2.0版）
参数 说明 Data Source Name 分析型数据库MySQL版的名字。TCP/IP Server 分析型数据库MySQL版的连接地址。Port 连接地址对应的端口号。User AccessKey ID。Password Access Key Secret。Database 分析型数据库MySQL版的名字。完成上述参数...
使用DTS同步数据到AnalyticDB MySQL提示“Get inc_...
问题描述 使用DTS同步数据到AnalyticDB MySQL，提示 Get inc_checkpoint config from Meta failed 或者 Read timed out 报错。问题原因 网络连接不稳定。解决方案 阿里云提醒您：如果您对实例或数据有修改、变更等风险操作，务必注意实例的...
功能特性
PolarDB MySQL数据导入 PolarDB-X数据导入 自建MySQL数据源 AnalyticDB for MySQL支持通过外表将ECS自建MySQL数据库中的数据导入至数仓版集群，同时也支持将数仓版集群中的数据导出至自建的MySQL数据库。自建MySQL数据导入 导出至自建MySQL...
Spark SQL执行方式
AnalyticDB for MySQL 湖仓版（3.0）支持使用批处理和交互式两种方法执行Spark SQL，两种执行方式都直接与 AnalyticDB for MySQL 的元数据服务连通，可以读写 AnalyticDB for MySQL 的库表。本文介绍批处理和交互式两种执行方式的注意事项...
支持的数据源
数据入仓 类别 数据源 导入方式 产品系列 文档链接 数据库 RDS MySQL 外表 数仓版（3.0）通过外表导入至数仓版 湖仓版（3.0）通过外表导入至湖仓版 DTS 数仓版（3.0）通过DTS导入数据 湖仓版（3.0）通过DTS导入数据 DataWorks 数仓版（3.0...
Spark应用配置参数说明
云原生数据仓库 AnalyticDB MySQL 版（AnalyticDB for MySQL）Spark配置参数跟开源Spark中的配置参数基本一致。本文介绍 AnalyticDB for MySQL 与开源Spark用法不一致的配置参数。使用说明 Spark应用配置参数用于配置和调整Spark应用程序的...
创建数仓版集群
重要 如果您同时在使用阿里云上的其他云服务，例如云服务器ECS、云数据库RDS等，请确保AnalyticDB MySQL与其他云服务位于同一个VPC，否则它们无法通过内网互通，无法发挥最佳性能。选择产品系列，配置参数，在右下角单击 立即购买。快速...
通过DataWorks导入数据
操作步骤 配置同步的源端数据库读插件。具体操作，请参见 Kafka Reader。配置同步的目标端数据库写插件。具体操作，请参见 AnalyticDB for MySQL 3.0 Writer。配置同步任务。具体操作，请参见 通过向导模式配置离线同步任务。
通过DataWorks导入数据
您需要在数据集成同步任务配置前，配置好您需要同步的源端和目标端数据库，以便在同步任务配置过程中，可通过选择数据源名称来控制同步任务的读取和写入数据库。同步任务支持的数据源及其配置详情请参见 支持的数据源及同步方案。说明 数据...
产品系列
云原生数据仓库AnalyticDB MySQL版 的产品系列分为 湖仓版（3.0）和 数仓版（3.0）。本文介绍 AnalyticDB MySQL版 产品系列的特点、功能对比及规格。产品系列 湖仓版（3.0）湖仓版（3.0）是基于计算存储分离架构打造的，同时具备低成本离线...
XIHE BSP SQL开发
使用JDBC或MySQL客户端同步提交XIHE BSP作业 通过Hint方式，手动指定Job型资源组，可同步提交XIHE BSP作业。语法/*+resource_group=*/;resource_group_name：Job型资源组的名称。SQL Statement：SQL语句。每次执行的SQL语句前都需要添加...
导出至OSS
在 adb_demo 数据库中创建外表，详情请参见 不带分区的数据文件创建OSS外表。根据外表类型选择执行写入语句，将源数据写入到步骤2创建的外表中。不同的外表类型支持的语法，请参见 未做分区的普通外表语法支持 和 分区外表语法支持。待步骤...
新用户必读
数仓版快速入门：引导您完成创建数仓版集群、设置白名单、创建数据库账号、创建数据库、连接集群、创建表以及同步数据的操作。湖仓版快速入门：引导您完成创建湖仓版集群、创建数据库账号、绑定RAM用户与数据库账号、创建资源组、分析数据...
通过外表导入至湖仓版
返回结果如下：+-+-+-+-+|id|name|age|dt|+-+-+-+-+|1|james|10|2023-06-15|2|bond|20|2023-06-15|3|jack|30|2023-06-15|4|lucy|40|2023-06-15|+-+-+-+-+4 rows in set(0.35 sec)在 AnalyticDB MySQL 中创建数据库。如果有已创建的数据库，...
身份管理
推荐的做法是使用RAM身份（即RAM用户和RAM角色）来访问 云原生数据仓库AnalyticDB MySQL版。RAM用户 RAM用户需要由阿里云账号（即主账号）或拥有管理员权限的RAM用户、RAM角色来创建，且必须在获得授权后才能登录控制台或使用API访问阿里云...
结果集缓存
注意事项 由于当前多主架构设计的限制，底层库表数据发生更新后，数据更新需要经过存储层同步到接入层，并在接入层内部节点间同步。因此数据更新信息的传递会有最多10秒的延迟,导致结果集缓存不能保证强一致性,但可以保证最终一致性,即在...
高性能版Spark全密态计算引擎使用示例
AnalyticDB MySQL 湖仓版（3.0）高性能版的Spark全密态计算引擎，在基础版Spark全密态引擎能力的基础上，支持Parquet模块化加密功能，且兼容社区版Spark、Hadoop、Hive等计算引擎，在保证数据传输与存储过程安全的同时，提升了数据处理效率...
通过元数据发现导入至湖仓版
目标元数据配置 Schema名称 设置Schema名称，映射到 AnalyticDB MySQL 的数据库名称（默认每个发现任务会创建一个新的Schema）。数据库名称填写，需要注意如下两点：不能是 AnalyticDB MySQL 中已有的库名。不能与其他元数据任务的库名相同...
Java访问（2.0版）
不带重试的JDBC连接示例 您可以在业务系统的Java代码中添加以下代码，通过MySQL JDBC连接AnalyticDB for MySQL数据库。Connection connection=null;Statement statement=null;ResultSet rs=null;try { Class.forName(...
通过外表导入至数仓版
您可以使用以下语句在目标数据库 adb_demo 中创建一张目标表，用于存储从HDFS导入的数据：创建普通外表对应的目标表（本文示例中目标表名为 adb_hdfs_import_test），语法如下。CREATE TABLE IF NOT EXISTS adb_hdfs_import_test(uid ...
创建集群
重要 如果您同时在使用阿里云上的其他云服务，例如云服务器ECS、云数据库RDS等，请确保AnalyticDB MySQL与其他云服务位于同一个VPC，否则它们无法通过内网互通，无法发挥最佳性能。时区 设置集群时区，设定后会按照所选时区处理时间相关的...
数据导入优化建议
批量和实时导入如何选择 从MaxCompute或者OSS导入HybridDB for MySQL，推荐使用 INSERT OVERWRITE SELECT 做批量导入：批量导入适合大数据量导入，性能较好。批量导入适合数据仓库语义，即导入过程中旧数据可查询，导入完成一键切换新数据...
自动同步PolarDB-X元数据
注意事项 同步数据时，会在 湖仓版（3.0）集群中创建与PolarDB-X 2.0实例中数据库和表同名的库表，因此在同步数据时需注意以下内容：若 湖仓版（3.0）集群中已经存在同名库和同名表，则会导致数据同步失败。若 湖仓版（3.0）集群仅存在同...
购买、变配与升级
本文介绍 AnalyticDB MySQL 中新购与升级的常见问题及解决方法。说明 当常见问题场景中未明确产品系列时，表明该问题仅适用于 AnalyticDB MySQL 数仓版（3.0）。常见问题概览 AnalyticDB for MySQL数仓版（3.0）和湖仓版（3.0）的区别是...
- 产品推荐
- 这些文档可能帮助您