从MySQL批量导入导出
HybridDB for MySQL支持直接从MySQL中全量导入和导出数据，这也是HybridDB for MySQL的功能之一，相比较借助DTS、Kettle等工具，HybridDB for MySQL直通导入和导出节省了大量的中间转换，导入导出的速度要快10倍以上。导入准备 将数据从...
整体架构
存储引擎 存储引擎是基于Raft协议实现的分布式实时强一致高可用的引擎，通过数据分片和Multi-Raft实现并行，利用分层存储实现冷热分离降低成本，通过行列存储和智能索引达到很好的性能。在这三层架构之上，通过服务秒级恢复，支持跨可用区...
通过外表导入至湖仓版
示例数据说明 本文示例的RDS MySQL数据库名为 test_adb，并在该库中创建了一张名为 person 的表，示例如下：CREATE TABLE IF NOT EXISTS test_adb.person(id int,name varchar(1023),age int);向 person 表中插入数据，示例如下：INSERT ...
AnalyticDB MySQL 2.0数据导入
方式二：通过外表方式进行数据迁移 具体操作，请参见 通过外表导入RDS MySQL数据至数仓版。SQL回归测试 由于 数仓版（3.0）全面兼容MySQL，摒弃了 AnalyticDB for MySQL 2.0的部分函数，如果 AnalyticDB for MySQL 2.0的SQL语句使用了这些...
什么是云原生数据仓库AnalyticDB MySQL版
无论是数据湖中的非结构化或半结构化数据，还是数据库中的结构化数据，您都可使用 AnalyticDB MySQL 构建企业的数据分析平台，同时完成高吞吐离线处理和高性能在线分析，实现降本增效。AnalyticDB MySQL视频简介 产品系列 云原生数据仓库...
登录数据库
HybridDB for MySQL数据库兼容MySQL协议，用户可以通过MySQL客户端或程序访问HybridDB for MySQL数据库，也可以使用阿里云的DMS。首先通过 HybridDB for MySQL管理控制台 创建实例及数据库，待状态显示为“运行中”，则数据库准备就绪；在...
HybridDB for MySQL设计和实践优化建议
当用户在使用HybridDB for MySQL进行数据库设计和实践的过程中，我们有如下建议：分区键的选择 分区键是数据库控制数据分布的维度，以该条件进行等值查询，查询范围只会限制在一个存储分区上，通常选择查询最频繁的列，或数据分布最均匀的...
产品优势
AnalyticDB MySQL版 提供融合数据库、大数据技术于一体的云原生企业级数据仓库服务，高度兼容MySQL，支持毫秒级更新，亚秒级查询。无论是数据湖中的非结构化或半结构化数据，还是数据库中的结构化数据，您都可使用 AnalyticDB MySQL 构建...
通过一键建仓同步至数仓版
已创建PolarDB MySQL数据库。更多信息，请参见 数据库管理。PolarDB MySQL数据库中已存在表数据。计费 一键创建PolarDB MySQL数据仓库时，系统自动通过DTS同步数据，DTS计费规则，请参见 计费概述。注意事项 数据同步过程中，若在源实例...
Spark计算引擎
良好的性能 AnalyticDB MySQL 团队对Spark引擎做了深度定制和优化，如针对对象存储OSS的访问，典型场景下性能可以提升至原来的3~5倍；同时Spark与 AnalyticDB MySQL 数仓深度集成，典型场景下相比JDBC方式性能可以提升至原来的6倍；基于 ...
表格存储（Tablestore）数据导入
数据类型映射关系 Tablestore支持的数据类型与 AnalyticDB MySQL 数据类型的映射关系如下：Tablestore支持的数据类型 映射到 AnalyticDB MySQL 的数据类型 INTEGER（8字节）BIGINT（8字节）STRING VARCHAR BINARY BINARY DOUBLE DOUBLE ...
常见问题
通过 云原生数据仓库AnalyticDB MySQL控制台 湖仓版集群的数据同步和数据迁移功能实现数据入湖，会产生以下费用：AnalyticDB for MySQL 的ACU弹性资源费用，计费项详情，请参见 湖仓版（3.0）计费项。OSS 的存储费用、GET类请求次数以及PUT...
为什么HybridDB for MySQL 数据库刚创建时就有磁盘...
HybridDB for MySQL 数据库在初创时，会初始化一些系统文件，也会为表空间预分配一些空白磁盘页面，因此会使用一定的磁盘空间，这些磁盘空间在用户有真实数据写入时，会被重新利用起来。
功能优势
分析型数据库MySQL版向量分析功能在通用性、性能优化和产品化上与普通向量检索系统相比有以下优势。高维向量数据的高准度和高性能 以典型的人脸512维向量为例，分析型数据库MySQL版向量分析提供百亿向量100 QPS、50毫秒响应时间（RT）约束...
计算层弹性
AnalyticDB MySQL 的存储计算分离架构，让计算节点与有状态的存储节点解耦，成为无状态的节点。从而计算节点的扩缩不再涉及数据状态的迁移，再结合阿里云IAAS层的弹性能力，AnalyticDB MySQL 的计算层扩缩容能获得非常好的弹性体验。分时...
库表结构优化
要做好库表结构设计和优化，用户通常需要关注以下信息：数据库引擎架构 用户需要了解数据库引擎的存储和计算架构特点，才能结合业务的数据分布特征与业务场景特征，进行数据建模，从而设计出符合引擎架构特点的数据表结构。SQL特征差异 ...
从OSS批量导入导出
HybridDB for MySQL支持直接从OSS中导入和导出数据，这也是HybridDB for MySQL的功能之一。将数据从OSS导入到HybridDB for MySQL中需要如下四个步骤：准备OSS中真实数据文件的存储目录 在HybridDB for MySQL中建立一张外表映射到OSS中的源...
羲和分析计算引擎
向量化执行模型 基于全异步的执行引擎之上，羲和采用了向量化的查询执行模型。相对于传统的以数据为中心的计算方式，面向算子为中心的计算方式对现代CPU计算更友好：缓存友好的同时，利用乱序执行扩大了CPU的指令并发，利用SIMD又扩大CPU的...
数据导出到Redis
insert overwrite into export_redis_test_external_table select*from hybrid_export_redis_test 注意事项 要求两张表的DDL定义完全一致（HybridDB for MySQL数据表、HybridDB for MySQL外表）。请谨慎使用OVERWRITE导出，会清空整个db，...
导入与导出
本文介绍AnalyticDB MySQL中导入导出的常见问题及解决方法。说明 当常见问题场景中未明确产品系列时，表明该问题仅适用于 AnalyticDB MySQL 数仓版（3.0）。常见问题概览 如何停止异步导入导出任务？如何使用SQL查看当前库里RUNNING的导入...
“数据传输”导入
源库与目标库 源库的实例类型可以是RDS实例，或者是您自建的MySQL数据库。以RDS实例为例，选择待迁移实例的ID，输入对应的数据库账号及密码。说明 DTS现已支持RDS/MySQL向HybridDB for MySQL的 全量及增量数据同步。目标库选择 PetaData，...
Serverless存储层
存储层的整体架构如下图所示：存储层与其他组件的交互如下图所示：AnalyticDB MySQL 的存储层构建在云原生基础设施之上，该架构有如下几个特点：分层存储 存储介质提供冷热分层存储能力。实时数据存储在热存储（SSD）上，保证超低延时的...
DML差异
MySQL 云原生数据仓库AnalyticDB MySQL 定义 CALL 不支持 调用存储过程。DELETE 支持，详情请参见 DELETE。从表中删除行。DO 不支持 执行表达式，但不返回任何结果。HANDLER 不支持 直接访问表存储引擎接口。INSERT 支持，详情请参见 ...
高性能版Spark全密态计算引擎使用示例
AnalyticDB MySQL 湖仓版（3.0）高性能版的Spark全密态计算引擎，在基础版Spark全密态引擎能力的基础上，支持Parquet模块化加密功能，且兼容社区版Spark、Hadoop、Hive等计算引擎，在保证数据传输与存储过程安全的同时，提升了数据处理效率...
存储空间分析
指标 说明 数据库 数据库名称。表名 表名称。空间占比 表数据量占集群总数据量的比例。计算方法：空间占比=(表的总数据量/集群总数据量)*100%。总数据量 表的总数据量。计算方法如下：方法一：总数据量=热数据量+冷数据量。方法二：总数据...
自动同步PolarDB-X元数据
当您需要 一站式完成 PolarDB分布式版 数据同步与管理时，可以在 PolarDB分布式版 实例中开通列存引擎并绑定目标 湖仓版（3.0）集群。相较于其他数据同步方案，一站式方案同步数据成本低、简单易用、能实时同步数据，可实现真正的实时分析...
资源组介绍
云原生数据仓库AnalyticDB MySQL版 湖仓版（3.0）采用了存储计算分离架构，您可以对计算资源进行弹性扩缩容。资源组功能可以对计算资源进行按需划分，不同资源组间的计算资源在物理上完全隔离。通过将数据库账号绑定到不同的资源组，SQL...
通过Spark SQL读写Hudi外表
Apache Hudi（简称Hudi）是基于OSS对象存储的一种表格式，支持UPDATE、DELETE和INSERT操作。AnalyticDB for MySQL 湖仓版（3.0）和Hudi做了深度整合，您可以通过Spark SQL读写Hudi外表。本文主要介绍如何通过Spark SQL读写Hudi外表。前提...
Spark常见报错
例如：同时访问Hive和RDS MySQL数据源，JAR包中应包含Hive数据源和RDS MySQL数据源的JDBC驱动。CommunicationsException.*Communications link failure 报错出现日志：Driver日志。报错原因：Spark作业中配置的弹性网卡无法访问指定的数据...
查询执行模式
云原生数据仓库AnalyticDB MySQL版 数仓版（3.0）支持 Interactive 和 Batch 两种查询模式，结合资源组功能可实现混合负载。背景 云原生数据仓库AnalyticDB MySQL版（简称ADB MySQL版），是阿里巴巴自主研发的海量数据实时高并发在线分析云...
节点/数据库/表/分区/二级分区
介绍节点、数据库、表、分区表和二级分区的概念。节点 在HybridDB for MySQL中，节点是一个资源单位（比如当前C2规格对应：8 Core 32GB Memory 512GB SSD）。当前在阿里云的控制台中最多能够购买64个节点，如果有需要更多节点，可以通过...
Spark SQL创建C-Store表
AnalyticDB MySQL 支持使用Spark SQL创建C-Store表，本文主要介绍使用Spark SQL创建C-Store表的语法、示例以及数据类型的映射关系。背景信息 AnalyticDB MySQL Spark SQL创建C-Store表的语法与开源社区Spark SQL的建表语法存在差异，...
通过Spark SQL读写Delta外表
Delta是一种可以基于OSS对象存储的数据湖表格式，支持UPDATE、DELETE和INSERT操作。AnalyticDB for MySQL 湖仓版（3.0）和Delta表格式进行了整合，您可以通过Spark SQL读写Delta外表。本文主要介绍如何通过Spark SQL读写Delta外表。前提...
C#（Mac）
根据 AnalyticDB MySQL使用流程，在 AnalyticDB MySQL 数据库中准备测试数据。create table t1(a int,s1 varchar)DISTRIBUTE BY HASH(`a`)ENGINE='CSTORE';insert into t1 values(11,'test1'),(22,'test2'),(33,'test3'),(44,'test4');...
通过一键建仓同步至数仓版
已创建RDS MySQL数据库。更多信息，请参见 创建数据库。RDS MySQL数据库中已存在表数据。计费 一键创建RDS MySQL数据仓库时，系统自动通过DTS同步数据。DTS计费规则，请参见 计费概述。注意事项 数据同步过程中，若在源实例RDS MySQL中新增...
通过数据同步功能同步SLS数据至湖仓版
通过 AnalyticDB for MySQL 的数据同步功能，您可以将SLS中指定时间点之后产生的数据实时同步至 湖仓版（3.0）集群，以满足日志数据实时分析的需求。前提条件 湖仓版（3.0）集群与日志服务SLS的 Project和 Logstore位于同一地域。具体操作...
调优集群性能
如下图所示，某个大表分布不均，存储节点0上的Shard_0和Shard_1中数据量较大，而在存储节点1上的Shard_2和Shard_3中数据量较小，那么当您查询这个大表时，较大概率会出现存储节点0需要处理的数据多，存储节点1上需要处理的数据少的情况，...
通过Spark SQL读Lindorm数据
AnalyticDB MySQL 湖仓版（3.0）支持通过Spark SQL访问Lindorm数据库。本文主要介绍如何通过Spark SQL访问Lindorm中的Hive表和宽表的数据。前提条件 已创建Lindorm单可用区实例。具体操作，请参见 创建实例。重要 Lindorm实例需开通宽表...
从MaxCompute批量导入导出
HybridDB for MySQL支持直接从MaxCompute中导入和导出数据，这也是HybridDB for MySQL的特色功能之一。相比较借助D2、CDP、DTS等工具，HybridDB for MySQL直通导入和导出节省了大量的中间转换，导入导出的速度要快10倍以上。建议 导入导出...
数据类型（2.0版）
与MySQL数据类型对比 分析型数据库MySQL版数据类型 MySQL版数据类型 差异 boolean bool、boolean 一致。tinyint tinyint 一致。smallint smallint 一致。int int、integer 一致。bigint bigint 一致。float float[(m,d)]分析型数据库...
- 产品推荐
- 这些文档可能帮助您