为什么HybridDB for MySQL 数据库刚创建时就有磁盘...
HybridDB for MySQL 数据库在初创时，会初始化一些系统文件，也会为表空间预分配一些空白磁盘页面，因此会使用一定的磁盘空间，这些磁盘空间在用户有真实数据写入时，会被重新利用起来。
Jupyter交互式作业开发
AnalyticDB for MySQL Spark支持使用Docker镜像快速启动Jupyter交互式开发环境，帮助您使用本地Jupyter Lab连接 AnalyticDB for MySQL Spark，从而利用 AnalyticDB for MySQL 的弹性资源进行交互测试和计算。前提条件 已创建 AnalyticDB ...
库表
AnalyticDB MySQL 是分布式数据库，数据需要根据分布字段均匀地分布在各个后台节点才能保证尽可能高的利用资源。分布字段选择不合理，会导致写入时存在热点，降低写入性能。分区字段合理性。AnalyticDB MySQL 后台以分区为粒度进行数据存储...
DataV
域名 连接 AnalyticDB MySQL 数据库的URL地址。说明 此处的URL地址不是官网页面的URL，也不是本机的IP，是需要DataV服务器能够通过公网或阿里云部分Region内网访问您数据库的URL地址。例如使用外网环境下的阿里云 AnalyticDB MySQL，域名...
访问RDS MySQL数据源
您可以通过ENI和SSL链路两种方式访问RDS MySQL数据，SSL链路访问RDS MySQL数据时可以加密网络连接，保证数据的安全性，对比ENI访问方式更加安全。本文主要介绍通过ENI和SSL链路访问RDS MySQL数据的具体方法。前提条件 AnalyticDB MySQL 湖...
通过Logstash写入数据到AnalyticDB MySQL 2.0
以日志数据为例，可以通过开源logstash output插件 logstash-output-jdbc 将log数据导入分析型数据库MySQL版中进行进一步分析（分析型数据库MySQL版支持原生JDBC方式访问）。但经过测试发现，在日志量非常大的情况下，通过jdbc方式写入分析...
其他SQL功能差异
AnalyticDB MySQL不支持的MySQL 5.6功能 数据库管理（Database Administration）插件和自定义函数（Plugin and User-Defined Function）SET 复合查询（Compound）数据备份（Replication）存储对象（Stored Objects）事务和锁定...
基础版Spark全密态计算引擎使用示例
数据准备 本文示例的RDS MySQL数据库名为 adb，并在该库中创建了一张名为 customer 的表，示例如下：CREATE DATABASE IF NOT EXIST adb;CREATE TABLE IF NOT EXISTS adb.customer(id int,name varchar(1023),address varchar(1023),age int...
通过外表导入至湖仓版
示例数据说明 本文示例的RDS MySQL数据库名为 test_adb，并在该库中创建了一张名为 person 的表，示例如下：CREATE TABLE IF NOT EXISTS test_adb.person(id int,name varchar(1023),age int);向 person 表中插入数据，示例如下：INSERT ...
通过数据同步功能同步SLS数据至数仓版
通过 AnalyticDB for MySQL 的数据同步功能，您可以将SLS中指定时间点之后产生的数据实时同步至 数仓版（3.0）集群，以满足日志数据实时分析的需求。前提条件 数仓版（3.0）集群与日志服务SLS的 Project和 Logstore位于同一地域。具体操作...
通过数据同步功能同步SLS数据至湖仓版
通过 AnalyticDB for MySQL 的数据同步功能，您可以将SLS中指定时间点之后产生的数据实时同步至 湖仓版（3.0）集群，以满足日志数据实时分析的需求。前提条件 湖仓版（3.0）集群与日志服务SLS的 Project和 Logstore位于同一地域。具体操作...
连接
本文介绍 AnalyticDB MySQL 中连接的常见问题及解决方法。说明 当常见问题场景中未明确产品系列时，表明该问题仅适用于 AnalyticDB MySQL 数仓版（3.0）。常见问题概览 如何解决白名单设置问题导致的连接失败？当查询过程中关闭了JDBC连接...
导入与导出
数据库服务器端虽然能够及时消费客户端发送的数据，但由于总发送量较小，导致写入TPS不满足预期。您可以调大单次导入的 批量插入条数 及增加 任务期望最大并发数，数据导入性能会随着导入压力的增加而线性增加。DataWorks导入数据至...
DataWorks调度XIHE SQL
本教程将使用 orders 表作为测试数据，连接 AnalyticDB MySQL 数据库后，执行以下SQL创建测试数据表。CREATE TABLE orders(o_orderkey bigint NOT NULL COMMENT'',o_custkey int NOT NULL COMMENT'',o_orderstatus varchar NOT NULL ...
Flink数据导入
步骤三：数据验证 登录 AnalyticDB MySQL 目标数据库，来查看并验证源数据是否成功导入。步骤一：数据准备 在其中一个Flink节点的root目录下，执行 vim/root/data.csv 命令来创建一个名为data.csv的CSV文件。文件中包含的数据如下（您可以...
指定执行查询的资源组
AnalyticDB for MySQL 湖仓版（3.0）支持指定执行查询的资源组，未指定资源组时，则默认使用user_default资源组执行。提交SQL或Spark应用的方式不同，指定资源组的方式也不同。例如，通过JDBC提交XIHE SQL时，可以通过Hint或绑定资源组的...
Spark SQL执行方式
AnalyticDB for MySQL 湖仓版（3.0）支持使用批处理和交互式两种方法执行Spark SQL，两种执行方式都直接与 AnalyticDB for MySQL 的元数据服务连通，可以读写 AnalyticDB for MySQL 的库表。本文介绍批处理和交互式两种执行方式的注意事项...
访问OSS-HDFS数据源
AnalyticDB for MySQL 湖仓版（3.0）Spark支持访问OSS-HDFS数据源，本文介绍如何使用Spark来操作OSS-HDFS数据。前提条件 AnalyticDB MySQL 湖仓版（3.0）集群与OSS存储空间位于相同地域。已在湖仓版（3.0）集群中创建Job型资源组。具体操作...
Spark常见报错
例如：同时访问Hive和RDS MySQL数据源，JAR包中应包含Hive数据源和RDS MySQL数据源的JDBC驱动。CommunicationsException.*Communications link failure 报错出现日志：Driver日志。报错原因：Spark作业中配置的弹性网卡无法访问指定的数据...
快速入门综述
快速使用AnalyticDB MySQL版2.0服务 AnalyticDB MySQL版 2.0 全面兼容MySQL协议和SQL 2003，成功购买 AnalyticDB MySQL版 2.0 后，您就可以像使用MySQL数据库一样快速使用 AnalyticDB MySQL版 2.0。创建表组 表组是一系列可发生关联的数据...
从OSS导入JSON数据文件
HybridDB for MySQL可以方便地通过外部表将存储在OSS中的JSON数据导入到HybridDB for MySQL数据库中。前提条件 资源和环境准备，执行操作前需提前准备OSS和HybridDB for MySQL的相关资源。包括：阿里云RAM账户，提前获取RAM账户的...
客户端及连接池
客户端连接 使用JDBC等连接器，必须指明连接的库，否则无法执行；不支持游标访问；跨分区语句将会在每个分区上建立一条连接，可能导致分区的连接数成比例增加；COM_QUERY语句长度：当前限制用户SQL语句不得超过16 MB，间接要求用户的单行...
C#（Mac）
根据 AnalyticDB MySQL使用流程，在 AnalyticDB MySQL 数据库中准备测试数据。create table t1(a int,s1 varchar)DISTRIBUTE BY HASH(`a`)ENGINE='CSTORE';insert into t1 values(11,'test1'),(22,'test2'),(33,'test3'),(44,'test4');...
Hive数据导入
本文介绍如何添加Hive数据源，新建Hive迁移链路并启动任务，以及数据迁移后如何进行数据分析和管理数据迁移任务。功能介绍 AnalyticDB MySQL版 湖仓版（3.0）支持新建Hive数据迁移任务，通过迁移任务将Hive元数据和数据一键迁移到OSS，或...
通过Spark Distribution SQL Engine开发Spark SQL作业
} } } 重要 启动Spark Distribution SQL Engine时，若设置了 spark.sql.hive.metastore.version=adb，则连接地址中的数据库必须为 AnalyticDB for MySQL 中已存在的数据库，否则会默认使用 default 数据库，造成连接失败。ThriftServer ...
DBeaver（2.0版）
本文介绍如何通过DBeaver连接和管理 云原生数据仓库AnalyticDB MySQL版 2.0集群。开始使用DBeaver之前，您需要先完成以下准备...成功连接至AnalyticDB for MySQL 2.0数据库后，您就可以通过DBeaver对AnalyticDB for MySQL 2.0数据库进行管理。
通过LOAD DATA导入至数仓版
连接AnalyticDB for MySQL集群，通过 CREATE DATABASE 和 CREATE TABLE，在 adb_demo 数据库下创建表 test 表，从本地文件导入的数据将存储在 test 表中。CREATE TABLE test(a int NOT NULL DEFAULT '0',b varchar NOT NULL,PRIMARY KEY(a)...
“数据传输”导入
源库与目标库 源库的实例类型可以是RDS实例，或者是您自建的MySQL数据库。以RDS实例为例，选择待迁移实例的ID，输入对应的数据库账号及密码。说明 DTS现已支持RDS/MySQL向HybridDB for MySQL的 全量及增量数据同步。目标库选择 PetaData，...
写入与查询
AnalyticDB MySQL版 是分布式数据库，查询在多个节点多线程执行，如果某些线程返回了满足LIMIT的行数，查询即终止，所以没有排序的LIMIT的查询结果是一个随机的过程，内部无法保证固定的线程返回结果。带分组的聚合查询，如果SELECT字段中...
新建实例
HybridDB for MySQL数据库初始化需要一定时间，一般不超过20分钟，待管理控制台首页上实例运行状态显示为 运行中，即可进行后续操作。补充 如果新建实例长时间处于 创建中，一般是由于后端资源不足导致的，请您更换其他可用区尝试购买。
创建实例
HybridDB for MySQL数据库初始化需要一定时间，一般不超过20分钟，待管理控制台首页上实例运行状态显示为 运行中，即可进行后续操作。补充 如果新建实例长时间处于 创建中，一般是由于后端资源不足导致的，请您更换其他可用区尝试购买。
统计信息
本文介绍 AnalyticDB MySQL 统计信息的作用与分类，自动收集统计信息的机制，手动收集统计信息的方法，以及如何查看统计信息。功能介绍 查询优化器（Query Optimizer）将查询转换为执行计划，并交给执行引擎执行。执行计划的质量会影响查询...
CREATE EXTERNAL TABLE
AnalyticDB MySQL 湖仓版（3.0）支持创建多种外表，包括：OSS外表、RDS MySQL外表、MongoDB外表、Tablestore外表、MaxCompute外表。前提条件 集群的产品系列为 湖仓版（3.0）。集群的内核版本为3.1.8.0及以上版本。说明 如何查看集群内核...
新功能发布记录
Spark应用访问公网配置说明 通过Spark SQL访问MySQL数据 湖仓版（3.0）支持通过Spark SQL访问自建MySQL数据库或阿里云MySQL系列的数据库。通过Spark SQL访问MySQL数据 通过Spark SQL读Lindorm数据 湖仓版（3.0）支持通过Spark SQL访问...
同步数据
分析型数据库MySQL版支持多种数据加载方式，包括但不限于：通过阿里云数据传输服务DTS将MySQL/DRDS中的数据导入分析型数据库MySQL版，其中MySQL可为RDS for MySQL、其他云厂商或线上IDC的自建MySQL以及ECS自建MySQL。详细操作步骤请参见 ...
BUILD
例如，配置数据库 adb_demo1 中表 test1 的BUILD调度优先级为30，数据库 adb_demo2 中表 test2 的BUILD调度优先级为10。SET ADB_CONFIG RC_BUILD_TASK_PRIORITY_LIST=`adb_demo1.test1.30;adb_demo2.test2.10`;配置同一数据库的所有表具有...
Tableau（2.0版）
参数 说明 服务器 分析型数据库MySQL版的连接地址。端口号 连接地址对应的端口号。用户名 AccessKey ID。密码 Access Key Secret。完成上述参数配置后，单击 确定 连接分析型数据库MySQL版。使用Tableau 在Tableau Desktop上，用户可以看到...
通过Spark SQL访问MySQL数据
AnalyticDB MySQL 湖仓版（3.0）支持提交Spark SQL作业，您可以通过View或Catalog两种方式访问自建MySQL数据库或云数据库RDS MySQL、云原生数据库 PolarDB MySQL。本文以RDS MySQL为例，介绍如何通过Spark SQL访问RDS MySQL数据。前提条件 ...
通过一键建仓同步至数仓版
数据库名称 从下拉列表中选择目标 AnalyticDB MySQL 数据库名。表名 从下拉列表中选择目标 AnalyticDB MySQL 表名。账号名称 目标 AnalyticDB MySQL 中创建的 数据库账号。账号密码 填写账号名称对应的密码。字段映射 系统自动提取日志服务...
DMS调度Spark
使用常规的Spark开发编辑器或命令行等工具进行Spark作业开发时，仅支持单次调度Spark作业，且作业间无依赖关系和执行顺序。为解决以上痛点，您可以通过 数据管理DMS 的任务编排功能，周期性、有顺序地调度Spark作业。本文介绍如何使用DMS...
- 产品推荐
- 这些文档可能帮助您