管理运维事件
配置周期时间 周期时间对 AnalyticDB MySQL 数仓版（3.0）所有集群生效，不影响其他数据库产品运维事件的切换时间。配置周期时间后，会在指定周期时间点，对计划内所有未执行且未设置计划切换时间的事件执行切换。例如配置周期时间为周二00...
整体架构
云原生数据仓库AnalyticDB MySQL版 是阿里巴巴自主研发、经过超大规模以及核心业务验证的PB级实时数据仓库。概述 自2012年第一次在集团发布上线以来，AnalyticDB MySQL版 至今已累计迭代发布近百个版本，支撑起集团内的电商、广告、物流、...
PHP
AnalyticDB MySQL 集群的数据库名称。ads_database="db_name;AnalyticDB MySQL 集群的连接端口号。ads_port=3306;连接 AnalyticDB MySQL。ads_conn=mysqli_connect($ads_server_name,$ads_username,$ads_password,$ads_database,$ads_port)...
通过数据同步功能同步SLS数据至湖仓版
目标库表配置 的参数说明如下：参数名称 参数说明 库名 AnalyticDB for MySQL 集群 的数据库名称。表名 AnalyticDB for MySQL 集群的数据表名称。源端数据预览 单击 点击查看最近10条LogStore数据，可以查看源端SLS的10条数据。Schema字段...
通过数据同步功能同步SLS数据至数仓版
目标库表配置 的参数说明如下：参数名称 参数说明 库名 AnalyticDB for MySQL 集群 的数据库名称。表名 AnalyticDB for MySQL 集群的数据表名称。源端数据预览 单击 点击查看最近10条LogStore数据，可以查看源端SLS的10条数据。Schema字段...
账号与权限管理
登录分析型数据库MySQL版控制台。在集群列表页面，找到目标集群，单击右侧的登录数据库。在DMS for AnalyticDB中，单击主子账号授权，按照下图所示进行 analyticdb_support 账号授权。注意：授权 analyticdb_support 的只读（SELECT、SHOW...
通过元数据发现导入至湖仓版
企业的业务服务所产生的一些标准化表单、日志等数据文件，会被周期性地上传到OSS。但是这些存储在OSS的数据文件缺少元数据管理，导致数据难以分析和计算。AnalyticDB MySQL 元数据发现任务具备自动映射OSS路径、自动对OSS文件分组、自动...
从OSS导入JSON数据文件
HybridDB for MySQL可以方便地通过外部表将存储在OSS中的JSON数据导入到HybridDB for MySQL数据库中。前提条件 资源和环境准备，执行操作前需提前准备OSS和HybridDB for MySQL的相关资源。包括：阿里云RAM账户，提前获取RAM账户的...
Golang访问（2.0版）
nil { panic(err.Error())} fmt.Println(tableName)} } 开启客户端的PrepareStatement 目前AnalyticDB MySQL 2.0不支持服务端预编译，只支持在客户端使用Prepared Statement。在Go MySQL driver中开启PrepareStatement时，需要配置 ...
Spark计算引擎
AnalyticDB MySQL Serverless Spark是 AnalyticDB MySQL 团队基于Apache Spark打造的服务化的大数据分析与计算服务，开通 AnalyticDB MySQL 服务后只需简单的配置，就可以提交Spark作业，无需关心Spark集群部署。方案架构图如下所示：...
DescribeSchemas-枚举实例的库列表
查询指定实例的数据库列表信息。接口说明 地域的公网接入地址：adb.<region-id>.aliyuncs.com 。示例：adb.cn-hangzhou.aliyuncs.com 。地域的 VPC 接入地址：adb-vpc.<region-id>.aliyuncs.com 。示例：adb-vpc.cn-hangzhou.aliyuncs.com ...
Golang
port=3306/database是 AnalyticDB MySQL版 集群中的数据库名称。database="database_name"/数据库连接的超时时间。connectTimeout="10s")func main(){/打开数据库连接。url:=fmt.Sprintf("%s:%s@tcp(%s:%d)/s?timeout=s",user,password,...
DescribeTables-枚举数据库的表列表
查询指定数据库的表列表信息。接口说明 地域的公网接入地址：adb.<region-id>.aliyuncs.com 。示例：adb.cn-hangzhou.aliyuncs.com 。地域的 VPC 接入地址：adb-vpc.<region-id>.aliyuncs.com 。示例：adb-vpc.cn-hangzhou.aliyuncs.com 。...
自动同步PolarDB-X元数据
PolarDB-X是 高性能云原生分布式数据库，可支撑千万级并发规模及百PB级海量存储。PolarDB-X 2.0实例 开通列存引擎，绑定 湖仓版（3.0）集群后，湖仓版（3.0）集群 会自动 创建元数据发现任务，PolarDB-X 2.0实例列存表的元数据信息会自动...
Spark SQL执行方式
AnalyticDB for MySQL 湖仓版（3.0）支持使用批处理和交互式两种方法执行Spark SQL，两种执行方式都直接与 AnalyticDB for MySQL 的元数据服务连通，可以读写 AnalyticDB for MySQL 的库表。本文介绍批处理和交互式两种执行方式的注意事项...
DescribeAllDataSource-枚举数据库列表
枚举实例下所有数据库列表、表列表和列列表。接口说明 地域的公网接入地址：adb.<region-id>.aliyuncs.com 。示例：adb.cn-hangzhou.aliyuncs.com 。地域的 VPC 接入地址：adb-vpc.<region-id>.aliyuncs.com 。示例：adb-vpc....
Hudi存储
开通 AnalyticDB MySQL 服务后只需简单配置即可基于OSS存储和Hudi构建Lakehouse，如通过APS服务将Kafka/SLS日志型数据准实时入湖，或利用 AnalyticDB MySQL Serverless Spark引擎将RDS/Parquet离线数据批量入湖。方案架构图如下所示：...
通过一键建仓同步至数仓版
已创建PolarDB MySQL数据库。更多信息，请参见 数据库管理。PolarDB MySQL数据库中已存在表数据。计费 一键创建PolarDB MySQL数据仓库时，系统自动通过DTS同步数据，DTS计费规则，请参见 计费概述。注意事项 数据同步过程中，若在源实例...
Quick BI
Quick BI是一款专为云上用户和企业量身打造的新一代自助式智能BI服务平台，其简单易用的可视化操作和灵活高效的多维分析能力，让精细化数据洞察为商业决策保驾护航。您可以在Quick BI中添加 AnalyticDB MySQL版 数据源并通过Quick BI构建BI...
账号授权
前提条件 已创建 湖仓版（3.0）集群。详情请参见 创建集群。Spark作业权限说明 提交Spark作业，需要具备以下三种权限。AliyunADBFullAccess：管理 AnalyticDB MySQL 集群的权限。...相关文档 访问RDS MySQL数据源 访问OSS数据源
监控
本文汇总了 AnalyticDB for MySQL 中监控的常见问题及解决方法。说明 当常见问题场景中未明确产品系列时，表明该问题仅适用于 AnalyticDB MySQL 数仓版（3.0）。常见问题概览 如何监控数仓版（3.0）预留集群的磁盘水位？如何查看热数据和冷...
功能优势
分析型数据库MySQL版向量分析功能在通用性、性能优化和产品化上与普通向量检索系统相比有以下优势。高维向量数据的高准度和高性能 以典型的人脸512维向量为例，分析型数据库MySQL版向量分析提供百亿向量100 QPS、50毫秒响应时间（RT）约束...
新功能发布记录
Spark应用访问公网配置说明 通过Spark SQL访问MySQL数据 湖仓版（3.0）支持通过Spark SQL访问自建MySQL数据库或阿里云MySQL系列的数据库。通过Spark SQL访问MySQL数据 通过Spark SQL读Lindorm数据 湖仓版（3.0）支持通过Spark SQL访问...
通过Spark Distribution SQL Engine开发Spark SQL作业
} } } 重要 启动Spark Distribution SQL Engine时，若设置了 spark.sql.hive.metastore.version=adb，则连接地址中的数据库必须为 AnalyticDB for MySQL 中已存在的数据库，否则会默认使用 default 数据库，造成连接失败。ThriftServer ...
访问RDS MySQL数据源
已开通OSS服务，并创建与 AnalyticDB MySQL 湖仓版（3.0）集群位于相同地域的存储空间。具体操作，请参见 开通OSS服务 和 创建存储空间。已完成授权操作。具体操作，请参见 账号授权。重要 同账号访问时，需具备...
CREATE EXTERNAL TABLE
AnalyticDB MySQL 湖仓版（3.0）支持创建多种外表，包括：OSS外表、RDS MySQL外表、MongoDB外表、Tablestore外表、MaxCompute外表。前提条件 集群的产品系列为 湖仓版（3.0）。集群的内核版本为3.1.8.0及以上版本。说明 如何查看集群内核...
设置报警规则
您可以为 AnalyticDB MySQL版 集群设置报警规则，实时监控集群CPU使用率、磁盘使用率、IOPS使用率、查询耗时以及数据库连接数。系统在监控数据满足条件时，会通知报警联系组中的所有联系人。背景信息 云原生数据仓库AnalyticDB MySQL版 ...
授权服务账号
当您在使用 云原生数据仓库AnalyticDB MySQL版 集群过程中需要阿里云技术支持时，如果技术支持过程中需要对您的集群进行操作，您需要授权 AnalyticDB MySQL 集群的服务账号，技术支持人员才可以通过服务账号提供技术支持服务。在授权有效期...
Hive数据导入
E-MapReduce集群业务场景为 新版数据湖，元数据类型为 自建 RDS 或 内置 MySQL，具有Hive服务，且 Hive 存储模式 为HDFS（即去勾选 数据湖存储）。具体操作，请参见 创建集群。重要 元数据类型为 DLF 统一元数据 的E-MapReduce集群，暂不...
DescribeColumns-枚举表的列列表
amv-bp1xxxxxxxx47 SchemaName string 否 数据库名称。adb_demo TableName string 否 查询表名。test 返回参数 名称 类型 描述 示例值 object 返回结果。RequestId string 请求 ID。1AD222E9-E606-4A42-BF6D-XXX442913CEF Items object[]列...
计算层弹性
云原生数据仓库AnalyticDB MySQL版 的计算层具备良好的弹性，提供分时弹性和按需弹性两种功能。AnalyticDB MySQL 的存储计算分离架构，让计算节点与有状态的存储节点解耦，成为无状态的节点。从而计算节点的扩缩不再涉及数据状态的迁移，再...
通过一键建仓同步至数仓版
已创建RDS MySQL数据库。更多信息，请参见 创建数据库。RDS MySQL数据库中已存在表数据。计费 一键创建RDS MySQL数据仓库时，系统自动通过DTS同步数据。DTS计费规则，请参见 计费概述。注意事项 数据同步过程中，若在源实例RDS MySQL中新增...
Serverless存储层
此外，AnalyticDB MySQL 存储支持一份数据同时满足高性能的在线分析以及低成本的离线处理两种场景，助力企业降本增效。存储层的整体架构如下图所示：存储层与其他组件的交互如下图所示：AnalyticDB MySQL 的存储层构建在云原生基础设施之上...
通过数据同步功能同步SLS至湖仓版（推荐）
AnalyticDB for MySQL 湖仓版（3.0）支持新建SLS同步链路，通过同步链路从指定时间位点将日志服务LogStore中的数据实时同步至 湖仓版（3.0），以满足近实时产出、全量历史归档、弹性分析等需求。本文介绍如何添加SLS数据源，新建SLS同步...
通过PySpark开发Spark应用
本文介绍了如何开发 AnalyticDB MySQL Spark Python作业，以及如何通过VirtualEnv技术打包Python作业的运行环境。前提条件 已创建 AnalyticDB MySQL 湖仓版（3.0）。具体操作，请参见 创建集群。已创建Job型资源组。具体操作，请参见 新建...
GrantOperatorPermission-为集群服务账号授权
对于不支持资源级授权的操作，用 全部资源 表示。条件关键字：是指云产品自身定义的条件关键字。关联操作：是指成功执行操作所需要的其他权限。操作者必须同时具备关联操作的权限，操作才能成功。操作 访问级别 资源类型 条件关键字 关联...
自定义Spark镜像
spark.adb.acr.instanceId cri-jim1hhv0vxqy*容器镜像服务企业版实例ID，您可以在容器镜像服务控制台中获取。该参数仅企业版镜像服务实例需配置。spark.adb.eni.enabled true 是否开启ENI访问开关，此处必须为 true，取值：true：开启 ...
通过外表导入至湖仓版
返回结果如下：+-+-+-+-+|id|name|age|dt|+-+-+-+-+|1|james|10|2023-06-15|2|bond|20|2023-06-15|3|jack|30|2023-06-15|4|lucy|40|2023-06-15|+-+-+-+-+4 rows in set(0.35 sec)在 AnalyticDB MySQL 中创建数据库。如果有已创建的数据库，...
Jupyter交互式作业开发
AnalyticDB for MySQL Spark支持使用Docker镜像快速启动Jupyter交互式开发环境，帮助您使用本地Jupyter Lab连接 AnalyticDB for MySQL Spark，从而利用 AnalyticDB for MySQL 的弹性资源进行交互测试和计算。前提条件 已创建 AnalyticDB ...
Navicat
Navicat是一套快速、可靠且价格相宜的数据库管理工具，专为简化数据库的管理及降低系统管理成本而设。Navicat提供图形化用户界面，您可以简单、方便地创建本机到 AnalyticDB MySQL版 集群的远程连接，然后使用Navicat进行数据管理。前提...
- 产品推荐
- 这些文档可能帮助您