访问RDS MySQL数据源
您可以通过ENI和SSL链路两种方式访问RDS MySQL数据，SSL链路访问RDS MySQL数据时可以加密网络连接，保证数据的安全性，对比ENI访问方式更加安全。本文主要介绍通过ENI和SSL链路访问RDS MySQL数据的具体方法。前提条件 AnalyticDB MySQL 湖...
使用Spark SQL进行作业开发
输入以下语句，并单击 执行SQL（F8），创建一个名为 spark_external_db 的外库，用于存储Hudi数据。本文以 oss:/testBucketName/adb-test-1/路径为例。CREATE DATABASE spark_external_db LOCATION 'oss:/testBucketName/adb-test-1/';在弹...
存储空间分析
指标 说明 数据库 数据库名称。表名 表名称。空间占比 表数据量占集群总数据量的比例。计算方法：空间占比=(表的总数据量/集群总数据量)*100%。总数据量 表的总数据量。计算方法如下：方法一：总数据量=热数据量+冷数据量。方法二：总数据...
2024年功能发布记录
云数据库MongoDB版（副本集架构）云数据库MongoDB版（分片集群架构）RDS MySQL数据库触发器 新增 您可以在数据传输服务DTS（Data Transmission Service）控制台创建数据同步任务，实时或定时将 云数据库 RDS MySQL 版 实例的增量数据同步至...
访问Hive数据源
spark.adb.eni.extraHosts 否 Spark解析Hive表位置时，需要额外传入IP和表格存储节点Host的映射关系，以便Spark能正确解析表位置的域名信息。获取域名：在自建集群的<Hive_CONF_DIR>/core-site.xml文件中查看 fs.defaultFS 获取域名。例如...
C#（Mac）
根据 AnalyticDB MySQL使用流程，在 AnalyticDB MySQL 数据库中准备测试数据。create table t1(a int,s1 varchar)DISTRIBUTE BY HASH(`a`)ENGINE='CSTORE';insert into t1 values(11,'test1'),(22,'test2'),(33,'test3'),(44,'test4');...
通过Spark SQL读Lindorm数据
AnalyticDB MySQL 湖仓版（3.0）支持通过Spark SQL访问Lindorm数据库。本文主要介绍如何通过Spark SQL访问Lindorm中的Hive表和宽表的数据。前提条件 已创建Lindorm单可用区实例。具体操作，请参见 创建实例。重要 Lindorm实例需开通宽表...
DMS调度XIHE SQL
背景信息 挑战和诉求：事件调度 传统的数据库事件调度（如MySQL的事件调度器Event Scheduler）虽然功能强大，但在使用过程中仍发现一些不足：门槛高：用户需要掌握事件定义的特殊SQL语法（CREATE EVENT、ALTER EVENT），无法通过简单的界面...
通过一键建仓同步至数仓版
数据库名称 从下拉列表中选择目标 AnalyticDB MySQL 数据库名。表名 从下拉列表中选择目标 AnalyticDB MySQL 表名。账号名称 目标 AnalyticDB MySQL 中创建的 数据库账号。账号密码 填写账号名称对应的密码。字段映射 系统自动提取日志服务...
常见问题
在集群使用过程中，会发生数据存储、资源弹性变配，占用存储空间和弹性资源。存储空间和弹性资源都是按量付费，即先使用再按实际使用量收费，因此会产生后付费的费用。更多计费规则的详情，请参见 数仓版（3.0）计费项 和 湖仓版（3.0）...
API概览
UnbindDBResourceGroupWithUser 解绑资源组和用户 调用UnbindDBResourceGroupWithUser接口为AnalyticDB MySQL数仓版（3.0）集群的资源组解绑数据库账号。DescribeDBResourceGroup 查询数据库资源组信息 调用DescribeDBResourceGroup接口...
【停售公告】停止售卖云原生数据仓库AnalyticDB ...
阿里云停止售卖 云原生数据仓库AnalyticDB MySQL版 2.0 集群。...建议 建议您将 云原生数据仓库AnalyticDB MySQL版 2.0 的数据和应用迁移至 云原生数据仓库AnalyticDB MySQL版 3.0。详情请参见 AnalyticDB MySQL 2.0数据导入。
兼容性概览
以下列出了 AnalyticDB MySQL版 支持的客户端或ETL工具，以及这些客户端或工具与 AnalyticDB MySQL版 在数据库连通性、列举数据库、建表、查询表数据等方面的兼容性。客户端与 AnalyticDB MySQL版 兼容性 客户端 连接数据库 列举数据库 建...
通过外表导入至数仓版
需在RDS MySQL实例上完成创建数据库和连接实例等操作，并准备好相关测试数据。详细操作步骤，请参见 创建数据库和账号 和 连接RDS MySQL实例。本文示例中，测试所用的RDS MySQL源库名为 test_adb，并在该库中创建了一张名为 goods 的源表，...
访问Redis数据源
本文介绍如何使用AnalyticDB MySQL湖仓版（3.0）Spark通过ENI网络访问Redis数据。前提条件 已创建AnalyticDB MySQL湖仓版（3.0）集群。具体操作，请参见 创建湖仓版（3.0）集群。已创建数据库账号。如果您是通过阿里云账号访问，只需创建高...
DBeaver（2.0版）
本文介绍如何通过DBeaver连接和管理 云原生数据仓库AnalyticDB MySQL版 2.0集群。开始使用DBeaver之前，您需要先完成以下准备...成功连接至AnalyticDB for MySQL 2.0数据库后，您就可以通过DBeaver对AnalyticDB for MySQL 2.0数据库进行管理。
存储层弹性
AnalyticDB MySQL 的存储节点除了进行数据存储，还提供数据写入、数据查找和数据扫描等能力。如果读写性能出现瓶颈需要到控制台手动扩容弹性IO资源。弹性IO资源（Elastic IO Unit，简称EIU）是弹性模式集群版（新版）衡量实例存储性能的...
账号类型
例如登录阿里云产品控制台、设置白名单、创建数据库账号、申请和释放公网地址、设置可维护时间段、扩容集群、恢复新集群以及 删除集群 等。RAM用户从属于阿里云账号，并且这些子账号下不能拥有实际的任何资源，所有资源都属于阿里云账号。...
CREATE EXTERNAL TABLE
[TBLPROPERTIES('type'='cow|mor' 'auto.create.location'='true|false')]参数说明 参数 是否必填 说明 table_name(column_name column_type[,…])是 定义表名和表结构。表名和列名的命名规则，请参见 命名约束。PARTITIONED BY(column_...
产品优势
无论是数据湖中的非结构化或半结构化数据，还是数据库中的结构化数据，您都可使用 AnalyticDB MySQL 构建企业的数据分析平台，同时完成高吞吐离线处理和高性能在线分析，实现降本增效。弹性能力和扩展性 AnalyticDB MySQL版 采用云原生技术...
品牌升级
无论是数据湖中的非结构化或半结构化数据，还是数据库中的结构化数据，您都可使用 AnalyticDB for MySQL 构建企业的数据分析平台，同时完成高吞吐离线处理和高性能在线分析，实现降本增效。此次品牌升级，存量分析型数据库MySQL版（ADS）...
Spark应用性能诊断
AnalyticDB for MySQL 湖仓版（3.0）推出Spark应用诊断功能，若您提交的Spark应用存在性能问题，您可以根据诊断信息快速定位和分析性能瓶颈问题，优化Spark应用，提高问题解决效率。本文主要介绍如何进行Spark应用性能诊断以及性能诊断的...
其他SQL功能差异
AnalyticDB MySQL不支持的MySQL 5.6功能 数据库管理（Database Administration）插件和自定义函数（Plugin and User-Defined Function）SET 复合查询（Compound）数据备份（Replication）存储对象（Stored Objects）事务和锁定...
同步数据
分析型数据库MySQL版支持多种数据加载方式，包括但不限于：通过阿里云数据传输服务DTS将MySQL/DRDS中的数据导入分析型数据库MySQL版，其中MySQL可为RDS for MySQL、其他云厂商或线上IDC的自建MySQL以及ECS自建MySQL。详细操作步骤请参见 ...
计算层弹性
AnalyticDB MySQL 的存储计算分离架构，让计算节点与有状态的存储节点解耦，成为无状态的节点。从而计算节点的扩缩不再涉及数据状态的迁移，再结合阿里云IAAS层的弹性能力，AnalyticDB MySQL 的计算层扩缩容能获得非常好的弹性体验。分时...
示例代码
访问其他服务 Node.js Python PHP Go Java 访问 MySQL 数据库[node.js14]访问 MySQL 数据库[python3]访问 MySQL 数据库[php7.2]访问 MySQL 数据库[go1]访问 MySQL 数据库[java11]访问 MongoDB 数据库[node.js14]访问 MongoDB 数据库[python...
QlikView
完成上述参数配置后，单击 Test 测试连通性，测试通过后，单击 OK 添加 AnalyticDB MySQL 数据源。打开QlikView，单击 文件>编辑j脚本，选择步骤1中设置的数据库名称，进行连通性测试。说明 您也可以通过 ODBC CONNECT TO DATABASE_NAME;...
数据类型（2.0版）
与MySQL数据类型对比 分析型数据库MySQL版数据类型 MySQL版数据类型 差异 boolean bool、boolean 一致。tinyint tinyint 一致。smallint smallint 一致。int int、integer 一致。bigint bigint 一致。float float[(m,d)]分析型数据库...
DataWorks调度XIHE SQL
DataWorks是基于MaxCompute作为计算和存储引擎的用于工作流可视化开发和托管调度运维的海量数据离线加工分析平台，支持按照时间和依赖关系的任务全面托管调度。AnalyticDB MySQL 用户可以通过DataWorks强大的任务托管调度、任务依赖关系...
Serverless存储层
此外，AnalyticDB MySQL 存储支持一份数据同时满足高性能的在线分析以及低成本的离线处理两种场景，助力企业降本增效。存储层的整体架构如下图所示：存储层与其他组件的交互如下图所示：AnalyticDB MySQL 的存储层构建在云原生基础设施之上...
控制面安全性
控制面流程包括函数权限控制、代码及配置的增删改查，主要包括函数元数据、代码、层和镜像缓存等安全传输及存储。本文介绍 函数计算 的控制面安全保障类型。权限控制通过阿里云访问控制（RAM）服务保障安全 事件源触发：用户需要为事件源...
Tableau
Tableau是一款操作简单且功能强大的报表分析工具，支持连接 AnalyticDB MySQL 数据源。在Tableau中连接 AnalyticDB MySQL 后，可以通过拖放或单击的方式快速创建智能视图和仪表板。前提条件 安装 Alibaba AnalyticDB for MySQL connector。...
CREATE EXTERNAL DATABASE
AnalyticDB MySQL 湖仓版（3.0）和 数仓版（3.0）支持通过 CREATE EXTERNAL DATABASE 创建外部数据库。注意事项 湖仓版（3.0）Spark引擎不支持通过 CREATE EXTERNAL DATABASE 创建外部数据库，请使用XIHE引擎。外部数据库中只能创建外表。...
优化建议
分布式数据库的高性能依赖于底层数据库的高性能，而对底层数据库性能来说，建立需要的索引是重要的环节；确保语句能正确使用到索引，例如查询条件能被索引完全覆盖到，保证分区键上有索引等；查询尽量在单机完成，最为简单的方式就是在分区...
通过元数据发现导入至湖仓版
目标元数据配置 Schema名称 设置Schema名称，映射到 AnalyticDB MySQL 的数据库名称（默认每个发现任务会创建一个新的Schema）。数据库名称填写，需要注意如下两点：不能是 AnalyticDB MySQL 中已有的库名。不能与其他元数据任务的库名相同...
支持的数据源
湖仓版（3.0）Oracle数据导入 自建MySQL 外表 数仓版（3.0）自建MySQL数据导入 自建HBase DTS 数仓版（3.0）自建HBase数据导入 AnalyticDB for MySQL 2.0版 迁移工具 数仓版（3.0）AnalyticDB MySQL 2.0数据导入 存储 OSS 外表 数仓版（3.0...
AnalyticDB MySQL 2.0数据导入
方式二：通过外表方式进行数据迁移 具体操作，请参见 通过外表导入RDS MySQL数据至数仓版。SQL回归测试 由于 数仓版（3.0）全面兼容MySQL，摒弃了 AnalyticDB for MySQL 2.0的部分函数，如果 AnalyticDB for MySQL 2.0的SQL语句使用了这些...
控制面安全性
控制面流程包括函数权限控制、代码及配置的增删改查，主要包括函数元数据、代码、层和镜像缓存等安全传输及存储。本文介绍 函数计算 的控制面安全保障类型。权限控制通过阿里云访问控制（RAM）服务保障安全 事件源触发：用户需要为事件源...
通过Spark SQL读写Hudi外表
Apache Hudi（简称Hudi）是基于OSS对象存储的一种表格式，支持UPDATE、DELETE和INSERT操作。AnalyticDB for MySQL 湖仓版（3.0）和Hudi做了深度整合，您可以通过Spark SQL读写Hudi外表。本文主要介绍如何通过Spark SQL读写Hudi外表。前提...
通过Spark SQL读写OSS外表
创建外表时选择的OSS路径需比创建数据库时选择的OSS路径至少多一层目录，且外表的路径需在数据库路径下。可以在tblproperties中配置 'auto.create.location'='true' 自动创建OSS路径。如果未指定该参数并且OSS中不存在该路径，请先创建对应...
- 产品推荐
- 这些文档可能帮助您