数据迁移方案概览
“数据传输”导入 事务引擎/分析引擎 使用数据传输（Data Transmission Service）将自建MySQL数据库或者RDS for MySQL数据库迁移到HybridDB for MySQL中。从MySQL批量导入导出 分析引擎 HybridDB for MySQL支持从自建MySQL中全量导入和导出...
使用HybridDB for MySQL 是否还需要单独购买RDS才能...
不需要。HybridDB for MySQL 开通之后即可直接作为数据库使用，不需要再开通RDS实例。
使用HybridDB for MySQL需要有ECS吗？
初始默认状态下，HybridDB for MySQL仅...用户也可以在管理控制台上开通公网IP，就可以从公网访问HybridDB for MySQL数据库。但需注意，由于公网的网络情况较复杂且不属于阿里云的管理访问之内，通过公网IP地址访问数据库的网络性能会有损失。
同步数据
通过Kettle将关系型数据库、Hbase等NoSQL数据源，以及Excel、Access中的数据导入分析型数据库MySQL版中，详细操作步骤请参见 使用kettle将本地数据导入分析型数据库MySQL版。通过 Logstash 插件将采集到的日志等数据等实时写入分析型数据库...
通过日志服务导入至数仓版
左边文本框为日志字段名称，右边为AnalyticDB MySQL数据库表中的字段。说明 Timestamp类型的字段映射精确到秒级别。例如日志时间为2022-01-05 10:12:13.145，投递到AnalyticDB MySQL后，投递结果为2022-01-05 10:12:13。投递开始时间 配置...
通过Spark SQL读写Delta外表
如果已有数据库，可跳过本步骤。CREATE DATABASE if not exists external_delta_db location"oss:/<bucket_name>/test/;用于在该路径中创建表，请替换为自己的OSS路径。执行以下语句，创建Delta外表。CREATE TABLE if not exists external_...
通过一键建仓同步至数仓版
数据库名称 从下拉列表中选择目标 AnalyticDB MySQL 数据库名。表名 从下拉列表中选择目标 AnalyticDB MySQL 表名。账号名称 目标 AnalyticDB MySQL 中创建的 数据库账号。账号密码 填写账号名称对应的密码。字段映射 系统自动提取日志服务...
AnalyticDB MySQL 2.0数据导入
MaxCompute中已经没有原始数据，原始数据只存在于 AnalyticDB for MySQL 2.0集群的数据库中，可以使用两种数据迁移方式将 AnalyticDB for MySQL 2.0集群中的数据导入到 数仓版（3.0）。具体操作，请参见 数据迁移。准备工作 了解 ...
如何查看客户端的IP
操作步骤 方法一：用户使用客户端访问数据库，如果没有正确地设置实例白名单，系统会返回类似 ip not in whitelist,client ip is x.x.x.x 的错误消息。其中 x.x.x.x 即为客户端的IP地址，将该IP加入实例白名单，即可访问实例。如果系统未...
DataWorks调度XIHE SQL
本教程将使用 orders 表作为测试数据，连接 AnalyticDB MySQL 数据库后，执行以下SQL创建测试数据表。CREATE TABLE orders(o_orderkey bigint NOT NULL COMMENT'',o_custkey int NOT NULL COMMENT'',o_orderstatus varchar NOT NULL ...
CREATE DATABASE
CREATE DATABASE 用于创建数据库。创建数据库 说明 每个集群最多可以...使用数据库 数据库创建成功后，您可以通过 USE db_name 命令使用数据库。语法 USE db_name 示例 use adb_demo;show tables;Tables_in_adb_demo|+-+|customer|test_table|
Oracle Golden Gate
Oracle Golden Gate（OGG）可用于将Oracle中的数据同步到 AnalyticDB MySQL 中。Oracle Golden Gate数据类型与AnalyticDB MySQL兼容性 源端 目标端 同步行为 Oracle MySQL AnalyticDB MySQL INSERT UPDATA DELETE number(3)bool或tinyint(1...
“数据传输”导入
源库与目标库 源库的实例类型可以是RDS实例，或者是您自建的MySQL数据库。以RDS实例为例，选择待迁移实例的ID，输入对应的数据库账号及密码。说明 DTS现已支持RDS/MySQL向HybridDB for MySQL的 全量及增量数据同步。目标库选择 PetaData，...
访问MaxCompute数据源
本文介绍如何使用AnalyticDB MySQL湖仓版（3.0）Spark SQL读写MaxCompute数据。背景信息 大数据计算服务MaxCompute是一种快速、完全托管的TB/PB级数据仓库解决方案。您可以通过AnalyticDB MySQL湖仓版（3.0）Spark SQL读写MaxCompute数据。...
通过外表导入至湖仓版
示例数据说明 本文示例的RDS MySQL数据库名为 test_adb，并在该库中创建了一张名为 person 的表，示例如下：CREATE TABLE IF NOT EXISTS test_adb.person(id int,name varchar(1023),age int);向 person 表中插入数据，示例如下：INSERT ...
通过PySpark开发Spark应用
本文介绍了如何开发 AnalyticDB MySQL Spark Python作业，以及如何通过VirtualEnv技术打包Python作业的运行环境。前提条件 已创建 AnalyticDB MySQL 湖仓版（3.0）。具体操作，请参见 创建集群。已创建Job型资源组。具体操作，请参见 新建...
访问Redis数据源
本文介绍如何使用AnalyticDB MySQL湖仓版（3.0）Spark通过ENI网络访问Redis数据。前提条件 已创建AnalyticDB MySQL湖仓版（3.0）集群。具体操作，请参见 创建湖仓版（3.0）集群。已创建数据库账号。如果您是通过阿里云账号访问，只需创建高...
数据库扩缩容
为了支持实例的动态扩展，HybridDB for MySQL提供了在线扩容数据库的功能。注意 数据库扩容过程中会发生闪断，请您在业务低峰期运行，并确保应用程序具备重连机制。登录 HybridDB for MySQL 管理控制台，默认进入 实例列表 页面。在管理...
访问Kafka数据源
本文介绍如何使用 AnalyticDB MySQL 湖仓版（3.0）Spark通过ENI网络访问消息队列Kafka版。前提条件 已创建 AnalyticDB MySQL 湖仓版（3.0）集群。具体操作，请参见 创建湖仓版（3.0）集群。已创建Job型资源组。具体操作，请参见 新建资源组...
Spark SQL创建C-Store表
AnalyticDB MySQL 支持使用Spark SQL创建C-Store表，本文主要介绍使用Spark SQL创建C-Store表的语法、示例以及数据类型的映射关系。背景信息 AnalyticDB MySQL Spark SQL创建C-Store表的语法与开源社区Spark SQL的建表语法存在差异，...
QlikView（2.0版）
本章节介绍如何通过QlikView连接 云原生数据仓库AnalyticDB MySQL版 2.0集群，并通过QlikView构建BI系统。...使用QlikView 在QlikView中读取到数据库数据后，用户可以利用QlikView进行更多数据操作。QlikView的使用请参见 QlikView。
设置白名单
为保障 云原生数据仓库 AnalyticDB MySQL 版 集群的安全稳定，系统默认禁止所有地址访问 AnalyticDB for MySQL 集群，因此，在使用 AnalyticDB for MySQL 集群前，需为集群设置白名单，以允许外部设备访问该集群。背景信息 集群默认的白...
创建数据库
您可以使用DMS（Data Management Service）、客户端（Navicat for MySQL、DBeaver、DBVisualizer、SQL WorkBench/J）、业务系统中的程序代码或者MySQL命令行工具连接 云原生数据仓库AnalyticDB MySQL版 集群，然后通过CREATE DATABASE语句...
设置白名单
为保障 云原生数据仓库 AnalyticDB MySQL 版 集群的安全稳定，系统默认禁止所有地址访问 AnalyticDB for MySQL 集群，因此，在使用 AnalyticDB for MySQL 集群前，需为集群设置白名单，以允许外部设备访问该集群。背景信息 集群默认的白...
功能优势
分析型数据库MySQL版向量分析功能在通用性、性能优化和产品化上与普通向量检索系统相比有以下优势。高维向量数据的高准度和高性能 以典型的人脸512维向量为例，分析型数据库MySQL版向量分析提供百亿向量100 QPS、50毫秒响应时间（RT）约束...
账号与权限管理
登录分析型数据库MySQL版控制台。在集群列表页面，找到目标集群，单击右侧的登录数据库。在DMS for AnalyticDB中，单击主子账号授权，按照下图所示进行 analyticdb_support 账号授权。注意：授权 analyticdb_support 的只读（SELECT、SHOW...
Spark
本文汇总了使用 AnalyticDB MySQL Spark的常见问题及解决方案。常见问题概览 如何查看Spark应用信息？如何解决提交Spark应用时，出现User%s do not have right permission[*]to resource[*]报错？如何解决运行Spark应用时，出现No space ...
新用户必读
完成入门操作后，您可以通过下列资源快速使用其他各项功能：连接数据库：介绍在应用开发中连接 AnalyticDB MySQL 的方法。数据导入：如果您需要将已有数据源中的数据迁移到 AnalyticDB MySQL，阿里云为此提供了完善的数据同步解决方案。...
数据库权限模型
DB：数据库级别。TABLE：表级别。COLUMN：列（字段）级别。如果您希望某个用户只查询某一张表的某一列数据，可以将该列的SELECT权限授予该用户，例如 GRANT select(customer_id)ON customer TO 'test321'。操作和权限关系 操作 需要的权限 ...
Spark常见报错
例如：同时访问Hive和RDS MySQL数据源，JAR包中应包含Hive数据源和RDS MySQL数据源的JDBC驱动。CommunicationsException.*Communications link failure 报错出现日志：Driver日志。报错原因：Spark作业中配置的弹性网卡无法访问指定的数据...
导出至自建MySQL
TABLE_PROPERTIES AnalyticDB MySQL 访问自建MySQL数据库的访问方式。url ECS实例的 主私网IP（即VPC地址）和目标库名（本文示例中为 test_adb）。查看步骤如下：登录 ECS管理控制台 并找到目标实例。在 实例详情 页签的 网络信息 区域，...
导出至RDS MySQL
本文介绍如何通过 AnalyticDB MySQL 数仓版（3.0）的外表导出数据至云数据库RDS MySQL。前提条件 RDS MySQL实例需与 AnalyticDB MySQL 集群位于同一个VPC，即所在专有网络的VPC ID相同。说明 登录 RDS控制台，单击实例ID，在 数据库连接 ...
使用阿里云访问控制进行权限管理
AnalyticDB MySQL版 2.0 支持通过阿里云访问控制（RAM）创建的子账号登录数据库并管理子账号在不同条件下是否有使用数据库的权限。子账号权限管理方式 管理方式 说明（推荐）通过ACL对子账号进行管理 数据库创建者可以把子账号当作普通用户...
Golang访问（2.0版）
本文介绍如何使用Golang连接 云原生数据仓库AnalyticDB MySQL版 2.0集群。前提条件 下载并安装Golang，请参见 Golang。安装Golang MySQL Driver。下载Golang MySQL Driver，请参见 Golang MySQL Driver。使用Shell中的go工具将驱动包安装到...
Golang
本文介绍如何使用Golang连接 AnalyticDB MySQL版。前提条件 已安装了Git，并且已将Git路径添加到Path环境变量中。下载并安装 Golang。安装Golang MySQL Driver。下载 Golang MySQL Driver。使用Shell中的go工具将驱动包安装到$GOPATH 中。...
DBeaver（2.0版）
本文介绍如何通过DBeaver连接和管理 云原生数据仓库AnalyticDB MySQL版 2.0集群。开始使用DBeaver之前，您需要先完成以下准备...成功连接至AnalyticDB for MySQL 2.0数据库后，您就可以通过DBeaver对AnalyticDB for MySQL 2.0数据库进行管理。
DBeaver
DBeaver支持MySQL、PostgreSQL、Oracle、DB2、MSSQL、Sybase以及其他兼容JDBC的数据库。您可以通过DBeaver的图形界面查看数据库结构、执行SQL查询和脚本、浏览和导出数据、处理BLOB/CLOB数据以及修改数据库结构等。准备工作 开始使用...
常见问题
在 云原生数据仓库AnalyticDB MySQL控制台 的监控信息页面，可以查看热数据使用量和冷数据使用量。通过 控制台的数据同步和数据迁移入湖时，会产生哪些费用？通过 云原生数据仓库AnalyticDB MySQL控制台 湖仓版集群的数据同步和数据迁移...
为什么HybridDB for MySQL 数据库刚创建时就有磁盘...
HybridDB for MySQL 数据库在初创时，会初始化一些系统文件，也会为表空间预分配一些空白磁盘页面，因此会使用一定的磁盘空间，这些磁盘空间在用户有真实数据写入时，会被重新利用起来。
应用场景
在基于 MySQL 数据库的系统架构下，存放着设备信息的库表，往往需要使用分库分表和相应的数据分发技术才能承担业务流量。分库分表的设计不仅增加了数据库运维人员的管理难度，也让系统架构的扩展受到了很大的限制。HybridDB for MySQL的...
- 产品推荐
- 这些文档可能帮助您