通过Spark SQL读写OSS外表

创建外表时选择的OSS路径需比创建数据库时选择的OSS路径至少多一层目录,且外表的路径需在数据库路径下。可以在tblproperties中配置 'auto.create.location'='true' 自动创建OSS路径。如果未指定该参数并且OSS中不存在该路径,请先创建对应...

节点/数据库/表/分区/二级分区

数据库 在HybridDB for MySQL中,数据库是用户的逻辑概念,用户通过阿里云控制台购买实例后会自动建好指定名称的逻辑库(Database),该逻辑库在后端是会被切分成多个物理分库(Shard),这些物理分库对于用户是不可见的。这就是通常说的分...

Spark

本文汇总了使用 AnalyticDB MySQL Spark的常见问题及解决方案。常见问题概览 如何查看Spark应用信息?如何解决提交Spark应用时,出现User%s do not have right permission[*]to resource[*]报错?如何解决运行Spark应用时,出现No space ...

概述

TPC-H由TPC委员会制定发布,用于评测数据库的分析查询能力。TPC-H查询包含八张数据表和二十二条复杂SQL查询,大多数查询包含多表Join、子查询和Group By等。更多信息,请参见 TPC-H测试集。说明 本文的TPC-H的实现基于TPC-H的基准测试,并...

绑定或解绑数据库账号

背景信息 AnalyticDB MySQL版 数仓版(3.0)弹性模式集群版(新版)支持不同数据库账号绑定到不同的资源组,通过资源组隔离实现计算任务的优先级调度,保障核心业务不受复杂计算和突发状况影响,同时将不同的查询分类,合理分配资源使集群...

新建实例

HybridDB for MySQL数据库初始化需要一定时间,一般不超过20分钟,待管理控制台首页上实例运行状态显示为 运行中,即可进行后续操作。补充 如果新建实例长时间处于 创建中,一般是由于后端资源不足导致的,请您更换其他可用区尝试购买。

通过Spark SQL读写Delta外表

如果已有数据库,可跳过本步骤。CREATE DATABASE if not exists external_delta_db location"oss:/<bucket_name>/test/;用于在该路径中创建表,请替换为自己的OSS路径。执行以下语句,创建Delta外表。CREATE TABLE if not exists external_...

创建资源组

操作步骤 登录 云原生数据仓库AnalyticDB MySQL控制台,在左上角选择集群所在地域。在左侧导航栏,单击 集群列表,在 湖仓版(3.0)页签,单击目标集群ID。在左侧导航栏,单击 集群管理>资源管理。单击 资源组管理,在资源组列表的右上角...

创建实例

HybridDB for MySQL数据库初始化需要一定时间,一般不超过20分钟,待管理控制台首页上实例运行状态显示为 运行中,即可进行后续操作。补充 如果新建实例长时间处于 创建中,一般是由于后端资源不足导致的,请您更换其他可用区尝试购买。

同步数据

分析型数据库MySQL版支持多种数据加载方式,包括但不限于:通过阿里云数据传输服务DTS将MySQL/DRDS中的数据导入分析型数据库MySQL版,其中MySQL可为RDS for MySQL、其他云厂商或线上IDC的自建MySQL以及ECS自建MySQL。详细操作步骤请参见 ...

续费说明

AnalyticDB MySQL版 控制台手动续费 登录 云原生数据仓库AnalyticDB MySQL控制台。在页面左上角,选择集群所在地域。在左侧导航栏,单击 集群列表。在 湖仓版(3.0)或 数仓版(3.0)页签中,单击目标集群右侧的 续费。选择购买时长,阅读...

绑定或解绑数据库账号

AnalyticDB for MySQL 湖仓版(3.0)集群支持将不同的数据库账号绑定到不同的资源组,实现不同数据库账号查询的资源隔离。绑定资源组后,SQL查询会根据绑定关系路由至对应的资源组执行。本文介绍如何为 湖仓版(3.0)集群的资源组绑定数据...

Tableau

本文测试了Tableau与 AnalyticDB MySQL 在列举数据库、查看表表等方面的兼容性,并给出测试结果图。测试环境 MySQL Tableau mysql Ver5.6.46 for osx10.13 on x86_64(Homebrew)Tableau Desktop 2019.4 测试范围 列举数据库 列举所有表 查看...

创建标签

操作步骤 登录 云原生数据仓库AnalyticDB MySQL控制台。在页面左上角,选择集群所在地域。在左侧导航栏,单击 集群列表。在 数仓版(3.0)页签下,单击目标 集群ID。在 集群信息 页面的 集群属性 区域,单击 编辑标签。在 编辑标签 页面,...

连接

本文介绍 AnalyticDB MySQL 中连接的常见问题及解决方法。说明 当常见问题场景中未明确产品系列时,表明该问题仅适用于 AnalyticDB MySQL 数仓版(3.0)。常见问题概览 如何解决白名单设置问题导致的连接失败?当查询过程中关闭了JDBC连接...

作业投递

AnalyticDB MySQL 数仓版(3.0)的作业投递功能支持将资源组中满足一定条件的查询作业(通常为资源消耗大、耗时久的大查询)投递至指定一资源组中,避免影响资源组中其他查询作业。本文介绍如何开启并使用作业投递功能。前提条件 ...

FineBI

配置外接数据库MySQL 说明 如果在此之前您已经安装并使用过FineBI,则可跳过如下步骤直接连接 AnalyticDB MySQL版 集群。详细步骤,请参见 连接AnalyticDB。打开FineBI。单击服务器地址,按照系统提示进行 账号设置。单击 下一步,选择数据...

删除或退订集群

删除按量付费集群 登录 云原生数据仓库AnalyticDB MySQL控制台。在页面左上角,选择集群所在地域。在左侧导航栏,单击 集群列表。根据需要删除的集群版本,选择 数仓版(3.0)或 湖仓版(3.0)页签。单击目标集群右侧的 更多>删除。在 删除...

通过Spark SQL读写C-Store表数据

AnalyticDB MySQL 湖仓版(3.0)集群支持通过Spark SQL在线或离线读写C-Store表数据。本文主要介绍通过Spark SQL在线或离线读写C-Store表数据的具体方法。前提条件 湖仓版(3.0)集群的存储预留资源需大于0 ACU。详情请参见 创建湖仓版集群...

数据建模诊断

在倾斜表中,您可以查看某个数据库中已经存在倾斜的表,重新进行分布字段的选择。具体方法,请参见 表结构设计。复制表合理性诊断 AnalyticDB MySQL版 在创建表时可以指定数据的分布方式为复制方式(DISTRIBUTED BY BROADCAST),复制表会...

查看资源弹性计划执行日志

操作步骤 登录 云原生数据仓库AnalyticDB MySQL控制台。在页面左上角,选择集群所在地域。在左侧导航栏,单击 集群列表。在 数仓版(3.0)或 湖仓版(3.0)页签下,单击目标集群ID。数仓版(3.0)集群,在左侧导航栏,单击 资源弹性扩容。...

基于AnalyticDB实现城市公交系统智能化

解决方案 针对接近PB级乘车数据和物联网平台数据的存储、计算、分析与查询需求,启迪公交通过多款阿里云数据库产品实现北京市公交系统的智能化。方案解读:启迪公交采用分布式关系型数据库DRDS(Distributed Relational Database Service)...

产品和业务限制

限制项 描述 例外申请方式 购买分析型数据库MySQL版的限制 账户余额大于等于500元现金 请联系技术支持 开通分析型数据库MySQL版的用户限制 用户需实名认证 无 可创建的最大分析型数据库MySQL版数 3个 联系技术支持申请更多 单个分析型数据...

通过Spark Distribution SQL Engine开发Spark SQL作业

} } } 重要 启动Spark Distribution SQL Engine时,若设置了 spark.sql.hive.metastore.version=adb,则连接地址中的数据库必须为 AnalyticDB for MySQL 中已存在的数据库,否则会默认使用 default 数据库,造成连接失败。ThriftServer ...

创建湖仓版集群

重要 如果您同时在使用阿里云上的其他云服务,例如云服务器ECS、云数据库RDS等,请确保AnalyticDB MySQL与其他云服务位于同一个VPC,否则它们无法通过内网互通,无法发挥最佳性能。计算预留资源 计算预留资源用于数据计算。增加计算资源...

使用DTS同步RDS MySQL数据到AnalyticDB MySQL 2.0

本文以RDS MySQL数据源为例,介绍如何通过DTS将RDS MySQL数据实时同步至 AnalyticDB MySQL版 2.0 中。前提条件 根据 RDS MySQL快速入门,准备好测试数据。根据 AnalyticDB MySQL版2.0快速入门 完成数据库创建、表组创建等准备工作。背景...

Hive数据导入

前提条件 已创建 AnalyticDB MySQL 湖仓版(3.0)集群。具体操作,请参见 创建湖仓版(3.0)集群。已创建Job型资源组。具体操作,请参见 新建资源组。已创建数据库账号。如果您是通过阿里云账号访问,只需创建高权限账号。具体操作,请参见...

通过联邦分析功能同步至湖仓版

联邦分析使用 AnalyticDB MySQL 的免费高速数据管道服务(APS)将 PolarDB MySQL中的 数据实时同步至 AnalyticDB MySQL 湖仓版(3.0)集群中,帮助您一站式完成数据同步与管理。本文介绍如何通过联邦分析将 PolarDB MySQL中的数据同步至 ...

账号类型

例如登录阿里云产品控制台、设置白名单、创建数据库账号、申请和释放公网地址、设置可维护时间段、扩容集群、恢复新集群以及 删除集群 等。RAM用户属于阿里云账号,并且这些子账号下不能拥有实际的任何资源,所有资源都属于阿里云账号。...

管理资源弹性计划

操作步骤 登录 云原生数据仓库AnalyticDB MySQL控制台。在页面左上角,选择集群所在地域。在左侧导航栏,单击 集群列表。在 数仓版(3.0)或 湖仓版(3.0)页签下,单击目标集群ID。数仓版(3.0)集群,在左侧导航栏,单击 资源弹性扩容。...

监控

本文汇总了 AnalyticDB for MySQL 中监控的常见问题及解决方法。说明 当常见问题场景中未明确产品系列时,表明该问题仅适用于 AnalyticDB MySQL 数仓版(3.0)。常见问题概览 如何监控数仓版(3.0)预留集群的磁盘水位?如何查看热数据和冷...

MongoDB数据导入

返回结果:+-+-+-+|id|name|age|+-+-+-+|1|james|10|2|bond|20|3|jack|30|4|lock|40|+-+-+-+4 rows in set(0.35 sec)在 AnalyticDB for MySQL 湖仓版(3.0)集群中创建数据库和表,用于存储MongoDB中导入的数据。创建名为 adb_demo 的...

SQL Pattern

同时,SQL Pattern的聚合结果能作为数据库优化的有效依据。针对导致实例压力过大的Bad SQL,用户还可以通过拦截功能,对其进行拦截,快速恢复实例,详情请参见 Persist plan and Query-Blocker。功能说明 SQL Pattern具备以下功能。Pattern...

实施步骤

通过DTS实时同步PolarDB for MySQL数据到分析型数据库MySQL版需要以下几个步骤:步骤一:创建DTS同步作业 步骤二:配置同步链路 步骤三:查看同步数据 步骤一:创建DTS同步作业 创建DTS同步作业需要用户支付一定的费用,DTS支持两种付费...

查看资源组监控

云原生数据仓库 AnalyticDB MySQL 版 湖仓版(3.0)的资源管理既可以展示集群级别的计算和存储资源用量,也展示资源组和作业级别的计算资源使用情况。本文介绍如何通过资源管理查看集群、资源组、作业的资源用量,包括预留资源用量和弹性...

导出至自建MySQL

TABLE_PROPERTIES AnalyticDB MySQL 访问自建MySQL数据库的访问方式。url ECS实例的 私网IP(即VPC地址)和目标库名(本文示例中为 test_adb)。查看步骤如下:登录 ECS管理控制台 并找到目标实例。在 实例详情 页签的 网络信息 区域,...

启停ThriftServer

AnalyticDB for MySQL 湖仓版(3.0)Job型资源组默认使用批处理方式执行Spark SQL,如果您想要使用Job型资源组执行交互式查询,则需要启动ThriftServer。启动ThriftServer后,可以在同一资源组内并发执行多个交互式查询,提升查询效率。...

DDL差异

MySQL 云原生数据仓库AnalyticDB MySQL 定义 ALTER DATABASE 不支持 修改数据库属性。ALTER EVENT 不支持 修改现有事件的一个或多个特征。ALTER FUNCTION 不支持 修改函数的定义。ALTER LOGFILE GROUP 不支持 修改日志文件组。ALTER ...

数据库权限模型

DB:数据库级别。TABLE:表级别。COLUMN:列(字段)级别。如果您希望某个用户只查询某一张表的某一列数据,可以将该列的SELECT权限授予该用户,例如 GRANT select(customer_id)ON customer TO 'test321'。操作和权限关系 操作 需要的权限 ...

通过Spark SQL读Lindorm数据

AnalyticDB MySQL 湖仓版(3.0)支持通过Spark SQL访问Lindorm数据库。本文主要介绍如何通过Spark SQL访问Lindorm中的Hive表和宽表的数据。前提条件 已创建Lindorm单可用区实例。具体操作,请参见 创建实例。重要 Lindorm实例需开通宽表...
共有200条 < 1 2 3 4 ... 200 >
跳转至: GO
产品推荐
云服务器 安全管家服务 安全中心
这些文档可能帮助您
云原生数据仓库AnalyticDB MySQL版 弹性公网IP 云数据库 RDS 云虚拟主机 短信服务 人工智能平台 PAI
新人特惠 爆款特惠 最新活动 免费试用