导入数据并查询

前提条件 通过以下步骤在OSS中创建存储 AnalyticDB for MySQL 数据目录。开通OSS服务。详情请参见 开通OSS服务。创建存储空间。详情请参见 控制台创建存储空间。重要 OSS的存储空间与 AnalyticDB for MySQL 所属地域相同。创建目录。详情...

使用Spark SQL进行作业开发

输入以下语句,并单击 执行SQL(F8),创建一个名为 spark_external_db 的外,用于存储Hudi数据。本文以 oss:/testBucketName/adb-test-1/路径为例。CREATE DATABASE spark_external_db LOCATION 'oss:/testBucketName/adb-test-1/';在弹...

访问OSS数据

云原生数据仓库AnalyticDB MySQL版 数据库产品 编写Python程序,将Python程序上传至OSS。本文示例的Python程序名为 example.py,用于读取文本文件readme.txt的第一行内容。import sys from pyspark.sql import SparkSession#初始Spark ...

导出至OSS

操作步骤 本示例将 AnalyticDB MySQL版 数仓版(3.0)的 adb_demo 库中的 source_table 表数据导出至OSS的 adb_data 文件夹下。连接目标集群,进入源数据库。在 adb_demo 数据库中创建外表,详情请参见 不带分区的数据文件创建OSS外表。...

创建数据库账号

登录 云原生数据仓库AnalyticDB MySQL控制台。在页面左上角,选择集群所在地域。在左侧导航栏,单击 集群列表。在 湖仓版(3.0)页签,单击目标集群ID。在左侧导航栏,单击 账号管理。单击 创建账号。在 创建账号 面板,设置相关参数。参数...

管理内置数据

AnalyticDB for MySQL 湖仓版(3.0)支持加载内置数据集,方便您快速体验或测试 AnalyticDB for MySQL 集群。您可以在创建集群时自动加载内置数据集,或通过控制台手动加载内置数据集。本文介绍如何加载和删除内置数据集。注意事项 仅 湖仓...

数据导入方式介绍

通过外表常规导入MaxCompute数据 通过外表常规导入HDFS数据 通过外表常规导入OSS数据 通过外表常规导入RDS MySQL数据 弹性导入 仅内核版本3.1.10.0及以上且已创建Job型资源组的 湖仓版(3.0)集群支持弹性导入数据。弹性导入可以大幅减少...

准备工作

您可以在AnalyticDB MySQL中进行完整的TPC-DS基准测试,了解AnalyticDB MySQL的分析性能。说明 本文的TPC-DS的实现基于TPC-DS的基准测试,并不能与已发布的TPC-DS基准测试结果相比较,本文中的测试并不符合TPC-DS基准测试的所有要求。在云...

数据资产管理

说明 若首次通过DMS(新版)登录 AnalyticDB MySQL版 集群数据库来使用数据资产管理功能,您需要先完成数据库登录信息录入,登录数据库方法,请参见 登录数据库。若之前已登录过 AnalyticDB MySQL版 集群数据库且集群管控模式为 自由操作 ...

写入与查询

本文介绍 AnalyticDB MySQL 中写入与查询的常见问题及解决方法。说明 当常见问题场景中未明确产品系列时,表明该问题仅适用于 AnalyticDB MySQL 数仓版(3.0)。常见问题概览 湖仓版(3.0)集群是否支持通过JDBC方式查询Hudi表的数据?湖仓...

其他SQL功能差异

AnalyticDB MySQL不支持的MySQL 5.6功能 数据库管理(Database Administration)插件和自定义函数(Plugin and User-Defined Function)SET 复合查询(Compound)数据备份(Replication)存储对象(Stored Objects)事务和锁定...

SQL开发编辑器

查看表结构 在 SQL开发 页面的 表 页签查看系统表INFORMATION_SCHEMA、自动创建的表(例如,通过实时数据接入同步到 AnalyticDB MySQL表)及手动创建的表,并可以通过下拉按钮切换。选择引擎和资源组 通过选择不同的引擎...

Jupyter交互式作业开发

AnalyticDB for MySQL Spark支持使用Docker镜像快速启动Jupyter交互式开发环境,帮助您使用本地Jupyter Lab连接 AnalyticDB for MySQL Spark,从而利用 AnalyticDB for MySQL 的弹性资源进行交互测试和计算。前提条件 已创建 AnalyticDB ...

聚合支付方案

解决方案 阿里云通过多款云数据库产品为利楚扫呗制定以下解决方案:方案解读:使用DRDS分库分表将数据库进行水平拆分,有效解决订单的存储上限及业务高峰时的高并发压力,借助了DRDS对MySQL语法的高度兼容能力,轻松从原来单体数据库升级到...

AnalyticDB MySQL 是分布式数据库,数据需要根据分布字段均匀地分布在各个后台节点才能保证尽可能高的利用资源。分布字段选择不合理,会导致写入时存在热点,降低写入性能。分区字段合理性。AnalyticDB MySQL 后台以分区为粒度进行数据存储...

工作负载管理介绍

AnalyticDB MySQL 集群在数据库系统中提供了工作负载管理模块,通过工作负载管对工作负载的控制,可以提高集群的整体运行状态,满足集群更精细化控制的目的。前提条件 AnalyticDB MySQL 集群需要同时满足以下条件:集群系列需为数仓版(3.0...

数据管理

数据库列表 展示了 所属库、表名、表类型、存储大小、描述、创建时间 和 更新时间,且支持根据 表名、存储大小、创建时间 或 更新时间 进行排序。单击目标 表名,还支持查看表的详细信息。序号 区域 说明 ① 表信息 展示了 所属库、表名...

自动续费(2.0版)

续费是指延长包年包月集群的使用时间,续费的费用和新购集群费用相同。...云原生数据仓库...在 续费管理 页面,单击 自动续费 页签,找到目标数据库,单击右侧的 修改自动续费。在 修改自动续费 页面,设置自动续费时长,然后单击 确定。

通过DataWorks导入

HDFS是一个分布式文件系统,为您提供读取和写入HDFS双向通道的功能,本文为您介绍如何通过DataWorks将HDFS数据导入至 AnalyticDB MySQL版 湖仓版(3.0)或 数仓版(3.0)。前提条件 已完成数据源配置。您需要在数据集成同步任务配置前,...

使用SQL开发编辑器执行内置测试脚本

通过 云原生数据仓库AnalyticDB MySQL版 湖仓版(3.0)的内置数据集可以快速体验或测试 AnalyticDB MySQL 集群。本文介绍如何使用内置数据集分析数据。前提条件 创建集群时已加载内置数据集。详情请参见 创建湖仓版集群。已创建数据库普通...

转换计费方式

按量付费的 云原生数据仓库AnalyticDB MySQL版 3.0 集群可以转为包年包月集群。本文介绍按量付费转包年包月的操作说明。背景信息 按量付费变更为包年包月,需要支付包年包月费用,请确保余额充足。操作步骤 登录 云原生数据仓库AnalyticDB ...

数据库RDS MySQL版实例中实时查询慢日志slow_log的...

概述 本文主要介绍在使用云数据库RDS MySQL版实例时,实时查询慢日志slow_log的方法。用户告知 本文仅阐述实时查询slow_log的方法,文中的操作示例未通过where语句进行条件过滤,因此属于全表查询。建议您在操作时,通过where语句增加条件...

数据库权限模型

DB数据库级别。TABLE:表级别。COLUMN:列(字段)级别。如果您希望某个用户只查询某一张表的某一列数据,可以将该列的SELECT权限授予该用户,例如 GRANT select(customer_id)ON customer TO 'test321'。操作和权限关系 操作 需要的权限 ...

查询并导入Tablestore数据

以创建 adb_external_db 数据库为例,建库示例语句如下:create external database adb_external_db;创建外表。说明 AnalyticDB MySQL 外表和TableStore中表的字段名称、字段数量、字段顺序一致,字段类型兼容。数据类型映射关系,请参见 ...

HybridDB for MySQL设计和实践优化建议

当用户在使用HybridDB for MySQL进行数据库设计和实践的过程中,我们有如下建议:分区键的选择 分区键是数据库控制数据分布的维度,以该条件进行等值查询,查询范围只会限制在一个存储分区上,通常选择查询最频繁的列,或数据分布最均匀的...

根据标签筛选集群

操作步骤 登录 云原生数据仓库AnalyticDB MySQL控制台。在页面左上角,选择集群所在地域。在左侧导航栏,单击 集群列表。单击 标签,选择标签的 标签键 和 标签值 筛选集群。说明 按标签筛选集群后,如果您需要取消筛选,可以 清除 筛选...

通过外表导入至湖仓版

返回结果如下:+-+-+-+-+|id|name|age|dt|+-+-+-+-+|1|james|10|2023-06-15|2|bond|20|2023-06-15|3|jack|30|2023-06-15|4|lucy|40|2023-06-15|+-+-+-+-+4 rows in set(0.35 sec)在 AnalyticDB MySQL 中创建数据库。如果有已创建的数据库,...

导入/导出任务

数据库 提交导入或导出任务相关SQL的数据库用户名。任务状态 任务状态,取值说明:init:任务初始化。running:任务运行中。finish:任务执行成功。failed:任务执行失败。若任务执行失败,您可以在SQL诊断页面,通过任务ID查询该任务,并...

通过MySQL分析实例同步至数仓版

您可以登录 AnalyticDB MySQL版 控制台,查看实例的运行状态以及RDS MySQL数据的同步状态。登录 云原生数据仓库AnalyticDB MySQL控制台。在页面左上角,选择集群所在地域。在左侧导航栏,单击 集群列表。在 数仓版(3.0)中,单击 集群类型...

通过外表导入至数仓版

本文介绍如何通过外表查询OSS数据文件,并将OSS中的数据文件导入 AnalyticDB MySQL 数仓版(3.0)。目前支持的OSS数据文件格式有Parquet、CSV和ORC。前提条件 已开通OSS服务并创建存储空间和项目。具体操作,请参见 开通OSS服务、控制台...

访问OSS-HDFS数据

AnalyticDB for MySQL 湖仓版(3.0)Spark支持访问OSS-HDFS数据源,本文介绍如何使用Spark来操作OSS-HDFS数据。前提条件 AnalyticDB MySQL 湖仓版(3.0)集群与OSS存储空间位于相同地域。已在湖仓版(3.0)集群中创建Job型资源组。具体操作...

DML差异

MySQL 云原生数据仓库AnalyticDB MySQL 定义 CALL 不支持 调用存储过程。DELETE 支持,详情请参见 DELETE。从表中删除行。DO 不支持 执行表达式,但不返回任何结果。HANDLER 不支持 直接访问表存储引擎接口。INSERT 支持,详情请参见 ...

MongoDB数据导入

本文介绍如何通过 AnalyticDB for MySQL 湖仓版(3.0)外表查询MongoDB数据,以及如何将MongoDB中的数据导入至 AnalyticDB for MySQL 湖仓版(3.0)。前提条件 已在MongoDB实例所在的同一VPC中创建 AnalyticDB for MySQL 湖仓版(3.0)集群...

概述

TPC-H由TPC委员会制定发布,用于评测数据库的分析查询能力。TPC-H查询包含八张数据表和二十二条复杂SQL查询,大多数查询包含多表Join、子查询和Group By等。更多信息,请参见 TPC-H测试集。说明 本文的TPC-H的实现基于TPC-H的基准测试,并...

设置可维护时间段

操作步骤 登录 云原生数据仓库AnalyticDB MySQL控制台。在页面左上角,选择集群所在地域。在左侧导航栏,单击 集群列表。根据您的集群类型,选择 湖仓版(3.0)或 数仓版(3.0)。单击目标 集群ID。在 集群信息 页面的 配置信息 区域,单击...

访问MongoDB数据

本文介绍如何使用 AnalyticDB MySQL版 湖仓版(3.0)Spark访问云数据库MongoDB数据。前提条件 已创建AnalyticDB MySQL湖仓版(3.0)集群。具体操作,请参见 创建湖仓版(3.0)集群。已创建数据库账号。如果您是通过阿里云账号访问,只需...

服务关联角色

本文为您介绍 云原生数据仓库 AnalyticDB MySQL 版(AnalyticDB for MySQL)(简称 AnalyticDB for MySQL)服务关联角色(AliyunServiceRoleForAnalyticDBForMySQL)的应用场景以及如何删除服务关联角色。背景信息 云原生数据仓库...

通过PySpark开发Spark应用

本文介绍了如何开发 AnalyticDB MySQL Spark Python作业,以及如何通过VirtualEnv技术打包Python作业的运行环境。前提条件 已创建 AnalyticDB MySQL 湖仓版(3.0)。具体操作,请参见 创建集群。已创建Job型资源组。具体操作,请参见 新建...

通过Spark SQL读写OSS外表

创建外表时选择的OSS路径需比创建数据库时选择的OSS路径至少多一层目录,且外表的路径需在数据库路径下。可以在tblproperties中配置 'auto.create.location'='true' 自动创建OSS路径。如果未指定该参数并且OSS中不存在该路径,请先创建对应...

常见问题

通过 云原生数据仓库AnalyticDB MySQL控制台 湖仓版集群的数据同步和数据迁移功能实现数据入湖,会产生以下费用:AnalyticDB for MySQL 的ACU弹性资源费用,计费项详情,请参见 湖仓版(3.0)计费项。OSS 的存储费用、GET类请求次数以及PUT...
共有200条 < 1 2 3 4 ... 200 >
跳转至: GO
产品推荐
云服务器 安全管家服务 安全中心
这些文档可能帮助您
云原生数据仓库AnalyticDB MySQL版 云数据库 RDS 云数据库 Redis 版 数据库备份 弹性公网IP 短信服务
新人特惠 爆款特惠 最新活动 免费试用