导入/导出任务

数据库 提交导入或导出任务相关SQL的数据库用户名。任务状态 任务状态,取值说明:init:任务初始化。running:任务运行中。finish:任务执行成功。failed:任务执行失败。若任务执行失败,您可以在SQL诊断页面,通过任务ID查询该任务,并...

常见问题

通过 云原生数据仓库AnalyticDB MySQL控制台 湖仓版集群的数据同步和数据迁移功能实现数据入湖,会产生以下费用:AnalyticDB for MySQL 的ACU弹性资源费用,计费项详情,请参见 湖仓版(3.0)计费项。OSS 的存储费用、GET类请求次数以及PUT...

Spark应用性能诊断

AnalyticDB for MySQL 湖仓版(3.0)推出Spark应用诊断功能,若您提交的Spark应用存在性能问题,您可以根据诊断信息快速定位和分析性能瓶颈问题,优化Spark应用,提高问题解决效率。本文主要介绍如何进行Spark应用性能诊断以及性能诊断的...

SQL诊断功能介绍

其中用户名、数据库名、资源组的可选取值是整体检索结果中已有的取值,而不是当前 AnalyticDB MySQL版 集群中的所有取值。例如,AnalyticDB MySQL版 集群中有3个数据库:db1、db2、db3,而符合整体检索条件的查询仅涉及 db1 和 db2。此时...

Spark开发编辑器

前提条件 已创建 AnalyticDB MySQL 湖仓版(3.0)集群,详情请参见 创建集群。已创建Job型资源组,且计算预留资源需大于等于8 ACU。创建资源组,详情请参见 新建资源组。已为RAM用户授权。具体操作,请参见 为RAM用户授权。已将RAM用户(子...

支持的数据

数据入仓 类别 数据源 导入方式 产品系列 文档链接 数据库 RDS MySQL 外表 数仓版(3.0)通过外表导入至数仓版 湖仓版(3.0)通过外表导入至湖仓版 DTS 数仓版(3.0)通过DTS导入数据 湖仓版(3.0)通过DTS导入数据 DataWorks 数仓版(3.0...

申请和释放公网地址

云原生数据仓库AnalyticDB MySQL版 集群支持VPC地址和公网地址两种类型的地址,如果需要通过公网连接集群,您需要先申请公网地址。公网和VPC网络 网络类型 说明 VPC网络 一个VPC就是一个隔离的网络环境。VPC的安全性较高,推荐您使用VPC...

通过Spark SQL读写Hudi外表

创建外表时选择的OSS路径需比创建数据库时选择的OSS路径至少多一层目录,且外表的路径需在数据库路径下。建表时必须定义primaryKey主键。preCombineField预聚合字段为可选,如未定义preCombineField在UPDATE场景会报错。步骤三:写入Hudi...

删除标签

操作步骤 登录 云原生数据仓库AnalyticDB MySQL控制台。在页面左上角,选择集群所在地域。在左侧导航栏,单击 集群列表。在 数仓版(3.0)页签下,单击目标 集群ID。在 集群信息 页面的 集群属性 区域,单击 编辑标签。单击要删除的标签后...

存储空间分析

指标 说明 数据库 数据库名称。表名 表名称。空间占比 表数据量占集群总数据量的比例。计算方法:空间占比=(表的总数据量/集群总数据量)*100%。总数据量 表的总数据量。计算方法如下:方法一:总数据量=热数据量+冷数据量。方法二:总数据...

通过Spark SQL读写OSS外表

创建外表时选择的OSS路径需比创建数据库时选择的OSS路径至少多一层目录,且外表的路径需在数据库路径下。可以在tblproperties中配置 'auto.create.location'='true' 自动创建OSS路径。如果未指定该参数并且OSS中不存在该路径,请先创建对应...

访问OSS数据

云原生数据仓库AnalyticDB MySQL版 数据库产品 编写Python程序,将Python程序上传至OSS。本文示例的Python程序名为 example.py,用于读取文本文件readme.txt的第一行内容。import sys from pyspark.sql import SparkSession#初始Spark ...

Flink数据导入

步骤三:数据验证 登录 AnalyticDB MySQL 目标数据库,来查看并验证源数据是否成功导入。步骤一:数据准备 在其中一个Flink节点的root目录下,执行 vim/root/data.csv 命令来创建一个名为data.csv的CSV文件。文件中包含的数据如下(您可以...

HybridDB for MySQL 是分布式数据库的架构吗?

是的。HybridDB for MySQL是采用分布式架构的数据库系统

同步数据

分析型数据库MySQL版支持多种数据加载方式,包括但不限于:通过阿里云数据传输服务DTS将MySQL/DRDS中的数据导入分析型数据库MySQL版,其中MySQL可为RDS for MySQL、其他云厂商或线上IDC的自建MySQL以及ECS自建MySQL。详细操作步骤请参见 ...

通过Spark SQL读写Delta外表

如果已有数据库,可跳过本步骤。CREATE DATABASE if not exists external_delta_db location"oss:/<bucket_name>/test/;用于在该路径中创建表,请替换为自己的OSS路径。执行以下语句,创建Delta外表。CREATE TABLE if not exists external_...

访问OSS-HDFS数据

AnalyticDB for MySQL 湖仓版(3.0)Spark支持访问OSS-HDFS数据源,本文介绍如何使用Spark来操作OSS-HDFS数据。前提条件 AnalyticDB MySQL 湖仓版(3.0)集群与OSS存储空间位于相同地域。已在湖仓版(3.0)集群中创建Job型资源组。具体操作...

通过Spark SQL读写C-Store表数据

AnalyticDB MySQL 湖仓版(3.0)集群支持通过Spark SQL在线或离线读写C-Store表数据。本文主要介绍通过Spark SQL在线或离线读写C-Store表数据的具体方法。前提条件 湖仓版(3.0)集群的存储预留资源需大于0 ACU。详情请参见 创建湖仓版集群...

管理内置数据

AnalyticDB for MySQL 湖仓版(3.0)支持加载内置数据集,方便您快速体验或测试 AnalyticDB for MySQL 集群。您可以在创建集群时自动加载内置数据集,或通过控制台手动加载内置数据集。本文介绍如何加载和删除内置数据集。注意事项 仅 湖仓...

数据建模诊断

在倾斜表中,您可以查看某个数据库中已经存在倾斜的表,重新进行分布字段的选择。具体方法,请参见 表结构设计。复制表合理性诊断 AnalyticDB MySQL版 在创建表时可以指定数据的分布方式为复制方式(DISTRIBUTED BY BROADCAST),复制表会...

通过Spark Distribution SQL Engine开发Spark SQL作业

} } } 重要 启动Spark Distribution SQL Engine时,若设置了 spark.sql.hive.metastore.version=adb,则连接地址中的数据库必须为 AnalyticDB for MySQL 中已存在的数据库,否则会默认使用 default 数据库,造成连接失败。ThriftServer ...

功能特性

PolarDB MySQL数据导入 PolarDB-X数据导入 自建MySQL数据源 AnalyticDB for MySQL支持通过外表将ECS自建MySQL数据库中的数据导入至数仓版集群,同时也支持将数仓版集群中的数据导出至自建的MySQL数据库。自建MySQL数据导入 导出至自建MySQL...

湖仓版扩缩容

扩容 登录 云原生数据仓库AnalyticDB MySQL控制台,在页面左上角选择集群所在地域。在左侧导航栏,单击 集群列表,在 湖仓版(3.0)页签下,单击目标集群右侧的 扩容。在 变配 页面,设置 计算预留资源 和 存储预留资源。扩容会增加剩余可...

SQL Pattern

同时,SQL Pattern的聚合结果能作为数据库优化的有效依据。针对导致实例压力过大的Bad SQL,用户还可以通过拦截功能,对其进行拦截,快速恢复实例,详情请参见 Persist plan and Query-Blocker。功能说明 SQL Pattern具备以下功能。Pattern...

Power BI

在 Server 和 Database 中分别填写 AnalyticDB MySQL版 的连接地址和数据库名称,然后单击 OK。在 User Name 和 Password 中分别填写 AnalyticDB MySQL版 的数据库账号和密码,然后单击 Connect。系统弹出 Encryption Support 提示框,单击...

Tableau

本文测试了Tableau与 AnalyticDB MySQL 在列举数据库、查看表表等方面的兼容性,并给出测试结果图。测试环境 MySQL Tableau mysql Ver5.6.46 for osx10.13 on x86_64(Homebrew)Tableau Desktop 2019.4 测试范围 列举数据库 列举所有表 查看...

通过DataWorks导入数据

本文介绍如何通过DataWorks将RDS MySQL数据导入至 AnalyticDB MySQL版 湖仓版(3.0)或 数仓版(3.0)。前提条件 已购买合适规格的独享数据集成资源组。详情请参见:新增和使用独享数据集成资源组。已完成数据集成资源组与数据源的网络连通...

XUANWU_V2引擎介绍(邀测中)

本文为您介绍 云原生数据仓库 AnalyticDB MySQL 版 表引擎(XUANWU_V2)和相关组件(Compaction Service)的使用方法。前提条件 满足以下两个条件的集群支持XUANWU_V2引擎:产品系列为 湖仓版(3.0)。内核为3.2.0及以上版本。说明 如何...

访问Redis数据

本文介绍如何使用AnalyticDB MySQL湖仓版(3.0)Spark通过ENI网络访问Redis数据。前提条件 已创建AnalyticDB MySQL湖仓版(3.0)集群。具体操作,请参见 创建湖仓版(3.0)集群。已创建数据库账号。如果您是通过阿里云账号访问,只需创建高...

配置AnalyticDB MySQL 2.0数据

准备工作 在分析型数据库MySQL版中创建数据库、表组和表。详情请参见 快速入门-开通分析型数据库MySQL版服务、创建表组 和 创建表。重要 分析型数据库MySQL版中的表需要创建成实时表(普通表),通过实时导入效率高而且流程简单。操作步骤 ...

管理备份

为确保数据误操作后,AnalyticDB MySQL版 具备数据快速恢复的能力,集群创建成功后,AnalyticDB MySQL版 会自动在后台开启数据备份功能,实现集群级别的数据备份。您可以在 AnalyticDB MySQL版 控制台查看集群的备份集或修改备份设置。注意...

使用XIHE BSP SQL进行作业开发

示例数据文件内容如下:001,Anna,99,London 002,Bob,67,USA 003,Cindy,78,Spain 004,Dan,100,China 步骤一:创建OSS外表 登录 云原生数据仓库AnalyticDB MySQL控制台。在页面左上角,选择集群所在地域。在左侧导航栏,单击 集群列表。在 湖...

AnalyticDB MySQL助力Flowerplus业务高速发展

数据兼容性 Flowerplus原有系统中主要使用RDS MySQL、PolarDB MySQL、DRDS等MySQL生态数据库,Flowerplus的研发团队希望分析存储产品能兼容MySQL数据库语法,降低研发团队的使用成本。弹性扩展存储空间 Flowerplus当前部分报表业务量数据已...

永洪BI

完成上述参数配置后,单击 测试连接 进行连通性测试,系统提示测试成功后,即可连接至指定的 AnalyticDB MySQL 数据库。使用永洪BI 通过永洪BI连接 AnalyticDB MySQL 集群后,您就可以获取 AnalyticDB MySQL 中的数据,然后通过永洪BI制作...

升级版本

随着 AnalyticDB for MySQL 集群内核版本的迭代,新的内核版本能够为您提供更多的新功能,以及更好的使用体验。您 可以参考本文档自助升级集群内核版本。前提条件 集群为 数仓版(3.0)集群。重要 湖仓版(3.0)集群升级内核版本请 提交工...

Job型资源组的优先级队列

本文介绍设置 湖仓版(3.0)Job型资源组的作业优先级和查看优先级的方法。...查看Spark Batch作业优先级 登录 云原生数据仓库AnalyticDB MySQL控制台,在 作业开发>Spark Jar开发 页面的 应用列表 页签中查看作业的优先级。

有数BI

您可以在 云原生数据仓库AnalyticDB MySQL控制台 的 集群管理 页面,复制公网地址。端口 3306 用户名 AnalyticDB MySQL版 集群中创建的账号:高权限账号 普通账号 您可以在 云原生数据仓库AnalyticDB MySQL控制台 的 账号管理 页面,查看...

为什么HybridDB for MySQL 数据库刚创建时就有磁盘...

HybridDB for MySQL 数据库在初创时,会初始化一些系统文件,也会为表空间预分配一些空白磁盘页面,因此会使用一定的磁盘空间,这些磁盘空间在用户有真实数据写入时,会被重新利用起来。

到期或欠费的影响(2.0版)

数据库类型 数据库状态 包年包月数据库 数据库到期后第1天到第7天,数据库处于锁定状态,无法被访问。数据库到期后第8天,数据库的计算资源被释放,数据不再保留。按量付费数据库 阿里云账号欠费后,该账号下所有按量付费数据库将会变成...

通过外表导入至湖仓版

返回结果如下:+-+-+-+-+|id|name|age|dt|+-+-+-+-+|1|james|10|2023-06-15|2|bond|20|2023-06-15|3|jack|30|2023-06-15|4|lucy|40|2023-06-15|+-+-+-+-+4 rows in set(0.35 sec)在 AnalyticDB MySQL 中创建数据库。如果有已创建的数据库,...
共有200条 < 1 2 3 4 ... 200 >
跳转至: GO
产品推荐
云服务器 安全管家服务 安全中心
这些文档可能帮助您
云原生数据仓库AnalyticDB MySQL版 云数据库 RDS 云安全中心 商标服务 弹性公网IP 短信服务
新人特惠 爆款特惠 最新活动 免费试用