购买、变配与升级
本文介绍 AnalyticDB MySQL 中新购与升级的常见问题及解决方法。说明 当常见问题场景中未明确产品系列时，表明该问题仅适用于 AnalyticDB MySQL 数仓版（3.0）。常见问题概览 AnalyticDB for MySQL数仓版（3.0）和湖仓版（3.0）的区别是...
JSON
AnalyticDB for MySQL 支持JSON数据类型。本文主要介绍JSON数据的格式、注意事项及使用示例。注意事项 AnalyticDB MySQL版 支持标准JSON格式，写入JSON串时必须严格符合标准JSON格式规范。JSON类型的数据列，不支持设置Default值。JSON格式...
导入与导出
由于 AnalyticDB MySQL 中不允许数据库名、表名或者列名中含有划线（-），为保证数据同步成功，系统会将中划线（-）映射为下划线（_）。如果在数据同步过程中遇到其他因数据库名、表名或者列名造成的同步失败（例如表名中含有空格、中文等...
Hive数据导入
E-MapReduce集群业务场景为 新版数据湖，元数据类型为 自建 RDS 或 内置 MySQL，具有Hive服务，且 Hive 存储模式 为HDFS（即去勾选 数据湖存储）。具体操作，请参见 创建集群。重要 元数据类型为 DLF 统一元数据 的E-MapReduce集群，暂不...
导入数据并查询
前提条件 通过以下步骤在OSS中创建存储 AnalyticDB for MySQL 数据的目录。开通OSS服务。详情请参见 开通OSS服务。创建存储空间。详情请参见 控制台创建存储空间。重要 OSS的存储空间与 AnalyticDB for MySQL 所属地域相同。创建目录。详情...
DML差异
MySQL 云原生数据仓库AnalyticDB MySQL 定义 CALL 不支持 调用存储过程。DELETE 支持，详情请参见 DELETE。从表中删除行。DO 不支持 执行表达式，但不返回任何结果。HANDLER 不支持 直接访问表存储引擎接口。INSERT 支持，详情请参见 ...
访问OSS-HDFS数据源
将welcome字符串存入指定的hdfs目录 sparkSession.sparkContext.parallelize(Seq(welcome)).saveAsTextFile(hdfsPath)/从指定的hdfs目录中读取内容，并打印 sparkSession.sparkContext.textFile(hdfsPath).collect.foreach(println)} } 将 ...
MySQL函数支持
HybridDB for MySQL支持几乎全部的MySQL函数，详细的用户请参考MySQL官方文档，下面列出的是目前支持的函数。操作符（包括比较函数）+,-,*,/,%,DIV,MOD,>,<,,!NOT&,~,^,>>,,&,XOR GREATEST,LEAST IN,NOT IN LIKE,NOT LIKE SIMILAR TO...
从OSS导入JSON数据文件
HybridDB for MySQL可以方便地通过外部表将存储在OSS中的JSON数据导入到HybridDB for MySQL数据库中。前提条件 资源和环境准备，执行操作前需提前准备OSS和HybridDB for MySQL的相关资源。包括：阿里云RAM账户，提前获取RAM账户的...
概述
高性能版（推荐使用）：基于基础版Spark全密态引擎提供的数据加密能力，高性能版的Spark全密态计算引擎结合Gluten和Velox，提供了向量化计算的能力，在保证数据传输与存储过程安全的同时，提升了数据处理效率。基础版和高性能版Spark全密态...
C#（Mac）
根据 AnalyticDB MySQL使用流程，在 AnalyticDB MySQL 数据库中准备测试数据。create table t1(a int,s1 varchar)DISTRIBUTE BY HASH(`a`)ENGINE='CSTORE';insert into t1 values(11,'test1'),(22,'test2'),(33,'test3'),(44,'test4');...
通过数据同步功能同步SLS数据至湖仓版
通过 AnalyticDB for MySQL 的数据同步功能，您可以将SLS中指定时间点之后产生的数据实时同步至 湖仓版（3.0）集群，以满足日志数据实时分析的需求。前提条件 湖仓版（3.0）集群与日志服务SLS的 Project和 Logstore位于同一地域。具体操作...
通过元数据发现导入至湖仓版
目标元数据配置 Schema名称 设置Schema名称，映射到 AnalyticDB MySQL 的数据库名称（默认每个发现任务会创建一个新的Schema）。数据库名称填写，需要注意如下两点：不能是 AnalyticDB MySQL 中已有的库名。不能与其他元数据任务的库名相同...
DescribeTableAccessCount-查询表访问统计信息
格式为 JSON 字符串，例如[{"Field":"TableSchema","Type":"Asc"}]。其中：Field 表示排序字段。支持如下取值：TableSchema：表所属的数据库名。TableName：表名。AccessCount：表被访问的次数。Type 表示排序方式。支持如下取值：Asc：升...
高性能版Spark全密态计算引擎使用示例
AnalyticDB MySQL 湖仓版（3.0）高性能版的Spark全密态计算引擎，在基础版Spark全密态引擎能力的基础上，支持Parquet模块化加密功能，且兼容社区版Spark、Hadoop、Hive等计算引擎，在保证数据传输与存储过程安全的同时，提升了数据处理效率...
DescribeDiagnosisRecords-查询诊断记录
说明 您可以调用 DescribeDiagnosisDimensions 接口查看符合指定检索条件的 SQL 语句所属的资源组、数据库名、用户名以及访问源地址信息。user_default UserName string 否 执行 SQL 语句的用户名。说明 您可以调用 ...
弹性计算层
云原生数据仓库AnalyticDB MySQL版 全面拥抱云平台的弹性能力。在 数仓版（3.0）预留模式和弹性模式的基础上，全面拥抱云原生Serverless技术，推出运行在Serverless计算资源上，支持按使用量计费的 湖仓版（3.0）产品形态。AnalyticDB ...
数据类型支持
varchar 变长字符串类型，存储字节数可最大到1MB，而且无需指定存储长度，最大存储长度为16 MB。date 日期类型，取值范围：'1000-01-01'到'9999-12-31'，支持的数据格式为'YYYY-MM-DD'，存储长度为4字节。time 时间类型，取值范围：'1000-...
监控
AnalyticDB for MySQL 集群中包含多个存储节点，磁盘数据使用量是指单个读写节点的最大磁盘使用量，热数据使用量是指所有读写节点的磁盘数据使用量之和。预留模式跨规格变配为弹性模式后，监控界面看到 CPU平均使用率增大，是什么原因？...
新功能发布记录
Spark应用访问公网配置说明 通过Spark SQL访问MySQL数据 湖仓版（3.0）支持通过Spark SQL访问自建MySQL数据库或阿里云MySQL系列的数据库。通过Spark SQL访问MySQL数据 通过Spark SQL读Lindorm数据 湖仓版（3.0）支持通过Spark SQL访问...
元数据库数据字典
云原生数据仓库AnalyticDB MySQL版 的元数据库为INFORMATION_SCHEMA库，兼容MySQL的元数据库。查询元数据库可以直接在JDBC连接中使用SQL语句进行查询。查询test库下的所有表，示例如下：select*from TABLES where table_schema='test' ...
数仓版（3.0）计费项
计费公式：存储空间费用=热数据存储费用+冷数据存储费用 热数据存储空间费用=热数据存储空间单价×热数据存储量×时长 冷数据存储空间费用=冷数据存储空间单价×冷数据存储量×时长 查询用量：您可以在 云原生数据仓库AnalyticDB MySQL控制...
系统运算符（2.0版）
字符串运算符 运算符|完成字符串连接操作。数学运算符 运算符 描述+加-减*乘/除（整形除法会截断）%模数（余数）日期时间运算符 运算符 示例 结果+date‘2012-08-08’+interval‘2’day 2012-08-10 time‘01:00’+interval‘3’hour 04:00:...
调优集群性能
如下图所示，某个大表分布不均，存储节点0上的Shard_0和Shard_1中数据量较大，而在存储节点1上的Shard_2和Shard_3中数据量较小，那么当您查询这个大表时，较大概率会出现存储节点0需要处理的数据多，存储节点1上需要处理的数据少的情况，...
存储层高可用
AnalyticDB的存储层是基于Raft协议构建了一套分布式强一致、高可用、高可靠的存储系统，相比较于传统RDBMS的主备协议、常见的分布式中间件分库分表的系统，实现了更好的读写高可用。读写高可用 AnalyticDB使用Multi-Raft方式管理数据分片，...
数据建模诊断
在倾斜表中，您可以查看某个数据库中已经存在倾斜的表，重新进行分布字段的选择。具体方法，请参见 表结构设计。复制表合理性诊断 AnalyticDB MySQL版 在创建表时可以指定数据的分布方式为复制方式（DISTRIBUTED BY BROADCAST），复制表会...
写入与查询
AnalyticDB MySQL版 是分布式数据库，查询在多个节点多线程执行，如果某些线程返回了满足LIMIT的行数，查询即终止，所以没有排序的LIMIT的查询结果是一个随机的过程，内部无法保证固定的线程返回结果。带分组的聚合查询，如果SELECT字段中...
通过数据同步功能同步Kafka至湖仓版（推荐）
AnalyticDB for MySQL 湖仓版（3.0）支持新建Kafka同步链路，通过同步链路从指定时间位点，实时同步Kafka中的数据入湖，以满足近实时产出、全量历史归档、弹性分析等需求。本文主要介绍如何添加Kafka数据源，新建Kafka同步链路并启动任务，...
查看资源组监控
云原生数据仓库 AnalyticDB MySQL 版 湖仓版（3.0）的资源管理既可以展示集群级别的计算和存储资源用量，也展示资源组和作业级别的计算资源使用情况。本文介绍如何通过资源管理查看集群、资源组、作业的资源用量，包括预留资源用量和弹性...
从MaxCompute批量导入导出
导出HybridDB for MySQL数据到MaxCompute非分区表 insert[overwrite]into odps_nopart_export_test_external_table select*from hybriddb_nopart_export_test#导出HybridDB for MySQL数据到MaxCompute分区表某个分区 insert[overwrite]into...
通过数据同步功能同步SLS至湖仓版（推荐）
AnalyticDB for MySQL 湖仓版（3.0）支持新建SLS同步链路，通过同步链路从指定时间位点将日志服务LogStore中的数据实时同步至 湖仓版（3.0），以满足近实时产出、全量历史归档、弹性分析等需求。本文介绍如何添加SLS数据源，新建SLS同步...
MongoDB数据导入
返回结果：+-+-+-+|id|city|name|+-+-+-+|1|hangzhou|jack|+-+-+-+说明 如果要将MongoDB嵌套文档导入到 AnalyticDB for MySQL 中，需要先创建用于存储MongoDB嵌套文档的数据库和数据表，具体操作，请参见 导入MongoDB非嵌套文档 中的步骤5~...
Hudi存储
同时Apache Hudi还支持多版本的⽂件管理协议，提供⼊湖和分析过程中的增量数据实时写⼊、ACID事务、小⽂件⾃动合并优化、元信息校验和Schema演进、⾼效的列式分析格式、⾼效的索引优化、超⼤分区表存储等能⼒。AnalyticDB MySQL 团队基于...
登录数据库
HybridDB for MySQL数据库兼容MySQL协议，您可以通过MySQL客户端或程序访问HybridDB for MySQL数据库，也可以使用阿里云的DMS登录数据库。前提条件 已通过HybridDB for MySQL管理控制台创建实例及数据库，待状态显示为 运行中，则数据库...
DescribeDiagnosisMonitorPerformance-查询智能运维的...
cn-beijing QueryCondition string 是 指定 SQL 的查询条件，格式为 JSON 字符串，包含 Type、Value、Min 或 Max 等字段。其中 Type 表示查询维度（当前仅支持 3 个取值：maxCost、status 和 cost），Value、Min 或 Max 表示该维度下的查询...
使用数据集成迁移数据到AnalyticDB MySQL 2.0
支持的数据源类型 数据集成提供丰富的数据源支持，如下所示：文本存储（FTP/SFTP/OSS/多媒体文件等）数据库（RDS/DRDS/MySQL/PostgreSQL等）NoSQL（Memcache/Redis/MongoDB/HBase等）大数据（MaxCompute/云原生数据仓库AnalyticDB MySQL版 ...
通过日志服务导入至数仓版
左边文本框为日志字段名称，右边为AnalyticDB MySQL数据库表中的字段。说明 Timestamp类型的字段映射精确到秒级别。例如日志时间为2022-01-05 10:12:13.145，投递到AnalyticDB MySQL后，投递结果为2022-01-05 10:12:13。投递开始时间 配置...
数据导入性能优化
当索引数据量超过表数据量时，需要检查表中是否有较长的字符串列，这种索引列不仅构建耗时，还占用存储空间，可以删除索引，请参见 删除索引。说明 主键索引无法删除。需要重建表。增加Hint加速导入 在导入任务前增加Hint（direct_batch_...
数据导入优化建议
批量导入适合数据仓库语义，即导入过程中旧数据可查询，导入完成一键切换新数据。如果导入失败，新数据会回滚，不影响旧数据的查询。从RDS、MySQL、HybridDB for MySQL等导入HybridDB for MySQL，需要根据导入的数据量选择不同的方法：数据...
数据导入性能优化
当索引数据量超过表数据量时，需要检查表中是否有较长的字符串列，这种索引列不仅构建耗时，还占用存储空间，可以删除索引，请参见 删除索引。说明 主键索引无法删除。需要重建表。增加Hint加速导入 在导入任务前增加Hint（direct_batch_...
- 产品推荐
- 这些文档可能帮助您