MongoDB数据导入
本文介绍如何通过 AnalyticDB for MySQL 湖仓版（3.0）外表查询MongoDB数据，以及如何将MongoDB中的数据导入至 AnalyticDB for MySQL 湖仓版（3.0）。前提条件 已在MongoDB实例所在的同一VPC中创建 AnalyticDB for MySQL 湖仓版（3.0）集群...
设置可维护时间段
操作步骤 登录 云原生数据仓库AnalyticDB MySQL控制台。在页面左上角，选择集群所在地域。在左侧导航栏，单击 集群列表。根据您的集群类型，选择 湖仓版（3.0）或 数仓版（3.0）。单击目标 集群ID。在 集群信息 页面的 配置信息 区域，单击...
通过MySQL分析实例同步至数仓版
您可以登录 AnalyticDB MySQL版 控制台，查看实例的运行状态以及RDS MySQL数据的同步状态。登录 云原生数据仓库AnalyticDB MySQL控制台。在页面左上角，选择集群所在地域。在左侧导航栏，单击 集群列表。在 数仓版（3.0）中，单击 集群类型...
通过一键建仓同步至数仓版
已创建PolarDB MySQL数据库。更多信息，请参见 数据库管理。PolarDB MySQL数据库中已存在表数据。计费 一键创建PolarDB MySQL数据仓库时，系统自动通过DTS同步数据，DTS计费规则，请参见 计费概述。注意事项 数据同步过程中，若在源实例...
概述
TPC-H由TPC委员会制定发布，用于评测数据库的分析查询能力。TPC-H查询包含八张数据表和二十二条复杂SQL查询，大多数查询包含多表Join、子查询和Group By等。更多信息，请参见 TPC-H测试集。说明 本文的TPC-H的实现基于TPC-H的基准测试，并...
服务关联角色
本文为您介绍 云原生数据仓库 AnalyticDB MySQL 版（AnalyticDB for MySQL）（简称 AnalyticDB for MySQL）服务关联角色（AliyunServiceRoleForAnalyticDBForMySQL）的应用场景以及如何删除服务关联角色。背景信息 云原生数据仓库...
访问MongoDB数据源
本文介绍如何使用 AnalyticDB MySQL版 湖仓版（3.0）Spark访问云数据库MongoDB数据。前提条件 已创建AnalyticDB MySQL湖仓版（3.0）集群。具体操作，请参见 创建湖仓版（3.0）集群。已创建数据库账号。如果您是通过阿里云账号访问，只需...
常见问题
通过 云原生数据仓库AnalyticDB MySQL控制台 湖仓版集群的数据同步和数据迁移功能实现数据入湖，会产生以下费用：AnalyticDB for MySQL 的ACU弹性资源费用，计费项详情，请参见 湖仓版（3.0）计费项。OSS 的存储费用、GET类请求次数以及PUT...
Spark应用性能诊断
AnalyticDB for MySQL 湖仓版（3.0）推出Spark应用诊断功能，若您提交的Spark应用存在性能问题，您可以根据诊断信息快速定位和分析性能瓶颈问题，优化Spark应用，提高问题解决效率。本文主要介绍如何进行Spark应用性能诊断以及性能诊断的...
通过一键建仓同步至数仓版
已创建RDS MySQL数据库。更多信息，请参见 创建数据库。RDS MySQL数据库中已存在表数据。计费 一键创建RDS MySQL数据仓库时，系统自动通过DTS同步数据。DTS计费规则，请参见 计费概述。注意事项 数据同步过程中，若在源实例RDS MySQL中新增...
SQL诊断功能介绍
例如，AnalyticDB MySQL版 集群中有3个数据库：db1、db2、db3，而符合整体检索条件的查询仅涉及 db1 和 db2。此时查询列表右上角高级搜索中的 数据库 选择范围仅为 db1 和 db2。结果展示：高级检索的筛选结果仅在 SQL列表 中展示，而不会...
基于向量分析的个性化推荐系统
然后，利用分析型数据库MySQL版向量内置的文本转换为向量函数，将从新闻标题和新闻内容中提取出的关键词转换为新闻向量导入分析型数据库MySQL版向量数据库中，用于用户新闻推荐，具体实现流程如下图所示。整个新闻推荐系统由以下两个步骤...
账号类型
例如登录阿里云产品控制台、设置白名单、创建数据库账号、申请和释放公网地址、设置可维护时间段、扩容集群、恢复新集群以及 删除集群 等。RAM用户从属于阿里云账号，并且这些子账号下不能拥有实际的任何资源，所有资源都属于阿里云账号。...
Spark开发编辑器
前提条件 已创建 AnalyticDB MySQL 湖仓版（3.0）集群，详情请参见 创建集群。已创建Job型资源组，且计算预留资源需大于等于8 ACU。创建资源组，详情请参见 新建资源组。已为RAM用户授权。具体操作，请参见 为RAM用户授权。已将RAM用户（子...
FineReport
方式二：在设计器中进行连接，mysql5.x版本可参考 MySQL数据连接，mysql8.x版本可参考 MySQL8数据连接插件。如果您需要通过外网连接 AnalyticDB MySQL版 集群，请参见 申请和释放公网地址。连接AnalyticDB 打开FineReport，在菜单栏中单击 ...
支持的数据源
数据入仓 类别 数据源 导入方式 产品系列 文档链接 数据库 RDS MySQL 外表 数仓版（3.0）通过外表导入至数仓版 湖仓版（3.0）通过外表导入至湖仓版 DTS 数仓版（3.0）通过DTS导入数据 湖仓版（3.0）通过DTS导入数据 DataWorks 数仓版（3.0...
通过元数据发现导入至湖仓版
目标元数据配置 Schema名称 设置Schema名称，映射到 AnalyticDB MySQL 的数据库名称（默认每个发现任务会创建一个新的Schema）。数据库名称填写，需要注意如下两点：不能是 AnalyticDB MySQL 中已有的库名。不能与其他元数据任务的库名相同...
通过Spark SQL读写Hudi外表
创建外表时选择的OSS路径需比创建数据库时选择的OSS路径至少多一层目录，且外表的路径需在数据库路径下。建表时必须定义primaryKey主键。preCombineField预聚合字段为可选，如未定义preCombineField在UPDATE场景会报错。步骤三：写入Hudi...
存储空间分析
指标 说明 数据库 数据库名称。表名 表名称。空间占比 表数据量占集群总数据量的比例。计算方法：空间占比=(表的总数据量/集群总数据量)*100%。总数据量 表的总数据量。计算方法如下：方法一：总数据量=热数据量+冷数据量。方法二：总数据...
库表结构优化
要做好库表结构设计和优化，用户通常需要关注以下信息：数据库引擎架构 用户需要了解数据库引擎的存储和计算架构特点，才能结合业务的数据分布特征与业务场景特征，进行数据建模，从而设计出符合引擎架构特点的数据表结构。SQL特征差异 ...
SQL审计
SQL审计功能可以实时记录数据库DML和DDL操作信息，并提供数据库操作信息的检索功能。使用限制 SQL审计日志不记录以下操作：INSERT INTO VALUES REPLACE INTO VALUES UPSERT INTO VALUES 开启/关闭SQL审计 登录 云原生数据仓库AnalyticDB ...
设置白名单
为保障 云原生数据仓库 AnalyticDB MySQL 版 集群的安全稳定，系统默认禁止所有地址访问 AnalyticDB for MySQL 集群，因此，在使用 AnalyticDB for MySQL 集群前，需为集群设置白名单，以允许外部设备访问该集群。背景信息 集群默认的白...
有数BI
您可以在 云原生数据仓库AnalyticDB MySQL控制台 的 集群管理 页面，复制公网地址。端口 3306 用户名 AnalyticDB MySQL版 集群中创建的账号：高权限账号 普通账号 您可以在 云原生数据仓库AnalyticDB MySQL控制台 的 账号管理 页面，查看...
申请和释放公网地址
云原生数据仓库AnalyticDB MySQL版 集群支持VPC地址和公网地址两种类型的地址，如果需要通过公网连接集群，您需要先申请公网地址。公网和VPC网络 网络类型 说明 VPC网络 一个VPC就是一个隔离的网络环境。VPC的安全性较高，推荐您使用VPC...
同步数据
分析型数据库MySQL版支持多种数据加载方式，包括但不限于：通过阿里云数据传输服务DTS将MySQL/DRDS中的数据导入分析型数据库MySQL版，其中MySQL可为RDS for MySQL、其他云厂商或线上IDC的自建MySQL以及ECS自建MySQL。详细操作步骤请参见 ...
通过Spark SQL读写OSS外表
创建外表时选择的OSS路径需比创建数据库时选择的OSS路径至少多一层目录，且外表的路径需在数据库路径下。可以在tblproperties中配置 'auto.create.location'='true' 自动创建OSS路径。如果未指定该参数并且OSS中不存在该路径，请先创建对应...
设置白名单
为保障 云原生数据仓库 AnalyticDB MySQL 版 集群的安全稳定，系统默认禁止所有地址访问 AnalyticDB for MySQL 集群，因此，在使用 AnalyticDB for MySQL 集群前，需为集群设置白名单，以允许外部设备访问该集群。背景信息 集群默认的白...
访问OSS数据源
云原生数据仓库AnalyticDB MySQL版 数据库产品 编写Python程序，将Python程序上传至OSS。本文示例的Python程序名为 example.py，用于读取文本文件readme.txt的第一行内容。import sys from pyspark.sql import SparkSession#初始Spark ...
删除标签
操作步骤 登录 云原生数据仓库AnalyticDB MySQL控制台。在页面左上角，选择集群所在地域。在左侧导航栏，单击 集群列表。在 数仓版（3.0）页签下，单击目标 集群ID。在 集群信息 页面的 集群属性 区域，单击 编辑标签。单击要删除的标签后...
通过Spark SQL访问MySQL数据
AnalyticDB MySQL 湖仓版（3.0）支持提交Spark SQL作业，您可以通过View或Catalog两种方式访问自建MySQL数据库或云数据库RDS MySQL、云原生数据库 PolarDB MySQL。本文以RDS MySQL为例，介绍如何通过Spark SQL访问RDS MySQL数据。前提条件 ...
概述
创建PolarDB for MySQL数据库集群 设置集群白名单 创建数据库账号 创建数据库 连接数据库 创建数据表 本示例在-PolarDB中创建 test_ads 数据库和 login_info 表，login_info 表存储5条数据。CREATE TABLE `login_info`(`id` int(11)NOT ...
通过spark-submit命令行工具开发Spark应用
本文以ECS连接 AnalyticDB MySQL 为例，介绍如何通过 AnalyticDB MySQL Spark-Submit命令行工具进行Spark作业开发。背景信息 当您使用客户端连接 湖仓版（3.0）集群时，在进行Spark开发时，需要通过 AnalyticDB MySQL Spark-Submit命令行...
通过Spark SQL读写Delta外表
如果已有数据库，可跳过本步骤。CREATE DATABASE if not exists external_delta_db location"oss:/<bucket_name>/test/;用于在该路径中创建表，请替换为自己的OSS路径。执行以下语句，创建Delta外表。CREATE TABLE if not exists external_...
创建资源组
AnalyticDB MySQL 湖仓版（3.0）支持使用XIHE BSP SQL、XIHE MPP SQL、Spark SQL等不同方式进行作业开发。Job型资源组运行XIHE BSP SQL和Spark SQL，Interactive型资源组运行XIHE MPP SQL。开始作业开发前，需要先创建一个Job型和...
续费说明
AnalyticDB MySQL版 控制台手动续费 登录 云原生数据仓库AnalyticDB MySQL控制台。在页面左上角，选择集群所在地域。在左侧导航栏，单击 集群列表。在 湖仓版（3.0）或 数仓版（3.0）页签中，单击目标集群右侧的 续费。选择购买时长，阅读...
Tableau
本文测试了Tableau与 AnalyticDB MySQL 在列举数据库、查看表表等方面的兼容性，并给出测试结果图。测试环境 MySQL Tableau mysql Ver5.6.46 for osx10.13 on x86_64(Homebrew)Tableau Desktop 2019.4 测试范围 列举数据库 列举所有表 查看...
通过联邦分析功能同步至湖仓版
联邦分析使用 AnalyticDB MySQL 的免费高速数据管道服务（APS）将 PolarDB MySQL中的 数据实时同步至 AnalyticDB MySQL 湖仓版（3.0）集群中，帮助您一站式完成数据同步与管理。本文介绍如何通过联邦分析将 PolarDB MySQL中的数据同步至 ...
创建标签
操作步骤 登录 云原生数据仓库AnalyticDB MySQL控制台。在页面左上角，选择集群所在地域。在左侧导航栏，单击 集群列表。在 数仓版（3.0）页签下，单击目标 集群ID。在 集群信息 页面的 集群属性 区域，单击 编辑标签。在 编辑标签 页面，...
自动同步PolarDB-X元数据
数据准备 本示例的PolarDB-X 2.0数据库名为 test_adb，并在该库中创建了一张名为 person 的表，示例如下：CREATE DATABASE test_adb MODE='AUTO' CREATE TABLE person(`id` bigint NOT NULL AUTO_INCREMENT,`age` int(11)NOT NULL DEFAULT ...
数据迁移方案概览
“数据传输”导入 事务引擎/分析引擎 使用数据传输（Data Transmission Service）将自建MySQL数据库或者RDS for MySQL数据库迁移到HybridDB for MySQL中。从MySQL批量导入导出 分析引擎 HybridDB for MySQL支持从自建MySQL中全量导入和导出...
- 产品推荐
- 这些文档可能帮助您