通过Spark SQL读写OSS外表

创建外表时选择的OSS路径需比创建数据库时选择的OSS路径至少多一层目录,且外表的路径需在数据库路径下。可以在tblproperties中配置 'auto.create.location'='true' 自动创建OSS路径。如果未指定该参数并且OSS中不存在该路径,请先创建对应...

删除标签

操作步骤 登录 云原生数据仓库AnalyticDB MySQL控制台。在页面左上角,选择集群所在地域。在左侧导航栏,单击 集群列表。在 数仓版(3.0)页签下,单击目标 集群ID。在 集群信息 页面的 集群属性 区域,单击 编辑标签。单击要删除的标签后...

访问OSS数据

云原生数据仓库AnalyticDB MySQL版 数据库产品 编写Python程序,将Python程序上传至OSS。本文示例的Python程序名为 example.py,用于读取文本文件readme.txt的第一行内容。import sys from pyspark.sql import SparkSession#初始Spark ...

查询场景

业务背景 交互式分析指的是业务人员通过BI工具或自助式查询平台进行自由的数据探索查询场景,查询语句的主要特点是支持多维度组合、支持多表Join、包含聚合查询、包含子查询、包含过滤条件。交互式分析性能测试标准为TPC-H测试集,更多...

同步数据

分析型数据库MySQL版支持多种数据加载方式,包括但不限于:通过阿里云数据传输服务DTS将MySQL/DRDS中的数据导入分析型数据库MySQL版,其中MySQL可为RDS for MySQL、其他云厂商或线上IDC的自建MySQL以及ECS自建MySQL。详细操作步骤请参见 ...

创建资源组

操作步骤 登录 云原生数据仓库AnalyticDB MySQL控制台,在左上角选择集群所在地域。在左侧导航栏,单击 集群列表,在 湖仓版(3.0)页签,单击目标集群ID。在左侧导航栏,单击 集群管理>资源管理。单击 资源组管理,在资源组列表的右上角...

续费说明

AnalyticDB MySQL版 控制台手动续费 登录 云原生数据仓库AnalyticDB MySQL控制台。在页面左上角,选择集群所在地域。在左侧导航栏,单击 集群列表。在 湖仓版(3.0)或 数仓版(3.0)页签中,单击目标集群右侧的 续费。选择购买时长,阅读...

创建标签

操作步骤 登录 云原生数据仓库AnalyticDB MySQL控制台。在页面左上角,选择集群所在地域。在左侧导航栏,单击 集群列表。在 数仓版(3.0)页签下,单击目标 集群ID。在 集群信息 页面的 集群属性 区域,单击 编辑标签。在 编辑标签 页面,...

连接

本文介绍 AnalyticDB MySQL 中连接的常见问题及解决方法。说明 当常见问题场景中未明确产品系列时,表明该问题仅适用于 AnalyticDB MySQL 数仓版(3.0)。常见问题概览 如何解决白名单设置问题导致的连接失败?当查询过程中关闭了JDBC连接...

访问OSS-HDFS数据

AnalyticDB for MySQL 湖仓版(3.0)Spark支持访问OSS-HDFS数据源,本文介绍如何使用Spark来操作OSS-HDFS数据。前提条件 AnalyticDB MySQL 湖仓版(3.0)集群与OSS存储空间位于相同地域。已在湖仓版(3.0)集群中创建Job型资源组。具体操作...

删除或退订集群

删除按量付费集群 登录 云原生数据仓库AnalyticDB MySQL控制台。在页面左上角,选择集群所在地域。在左侧导航栏,单击 集群列表。根据需要删除的集群版本,选择 数仓版(3.0)或 湖仓版(3.0)页签。单击目标集群右侧的 更多>删除。在 删除...

DataWorks调度XIHE SQL

DataWorks出于安全考虑,对建立连接的服务进行了安全控制,您需要将 AnalyticDB MySQL 数据库的连接地址和端口加添加到白名单中。步骤二:在DataWorks中创建AnalyticDB MySQL节点 具体操作,请参见 创建AnalyticDB for MySQL节点。步骤三:...

通过Spark SQL访问MySQL数据

AnalyticDB MySQL 湖仓版(3.0)支持提交Spark SQL作业,您可以通过View或Catalog两种方式访问自建MySQL数据库或云数据库RDS MySQL、云原生数据库 PolarDB MySQL。本文以RDS MySQL为例,介绍如何通过Spark SQL访问RDS MySQL数据。前提条件 ...

Smartbi

本文列出了Smartbi与 AnalyticDB MySQL版 在连通、列举数据库、查询表数据等方面的兼容。测试环境 Smartbi试用地址为 登录Smartbi。如何通过Smartbi连接 AnalyticDB MySQL版 集群,请参见 Smartbi。测试范围 连接 AnalyticDB MySQL版 ...

调优集群性能

语义错误 SQL符合 云原生数据仓库 AnalyticDB MySQL 版 官方对SQL语法的定义,但在语义检查时,发现数据库对象错误,在语义分析阶段报错。例如,表名错误、列不存在、GROUP BY字段缺失、函数参数类型错误等。集群内部问题导致查询失败 查询...

通过DataWorks使用Spark Distribution SQL Engine

重要 域名地址中的 {database name} 需替换为实际的数据库名。Metastore Hive Metastore地址。请填写步骤二中启动Spark Distribution SQL Engine后获取的域名连接地址。详情请参见 步骤二:获取域名连接地址。重要 域名地址中的 {database ...

通过DataWorks导入数据

本文介绍如何通过DataWorks将RDS MySQL数据导入至 AnalyticDB MySQL版 湖仓版(3.0)或 数仓版(3.0)。前提条件 已购买合适规格的独享数据集成资源组。详情请参见:新增和使用独享数据集成资源组。已完成数据集成资源组与数据源的网络连通...

资源模型相关

分析型数据库MySQL版扩容/缩容是否需要停业务?分析型数据库MySQL版支持弹性扩缩容和升降配,可以做到用户无感知和业务无影响。可否只对内存进行扩容 分析型数据库MySQL版的实例规格有多种,C4、C8、S2n和S8n,不同的资源规格对应的实例在...

FineReport 10.0

本文测试了FineReport 10.0与 AnalyticDB MySQL 在连通、列举表、查看表数据等方面的兼容,并给出测试结果图。测试环境 FineReport 10.0官网地址为 FineReport 10.0。测试范围 连接FineReport 10.0 列举数据库 列举表 查看表结构 查看...

FineBI

配置外接数据库MySQL 说明 如果在此之前您已经安装并使用过FineBI,则可跳过如下步骤直接连接 AnalyticDB MySQL版 集群。详细步骤,请参见 连接AnalyticDB。打开FineBI。单击服务器地址,按照系统提示进行 账号设置。单击 下一步,选择数据...

通过PySpark开发Spark应用

本文介绍了如何开发 AnalyticDB MySQL Spark Python作业,以及如何通过VirtualEnv技术打包Python作业的运行环境。前提条件 已创建 AnalyticDB MySQL 湖仓版。具体操作,请参见 创建集群。已创建Job型资源组。具体操作,请参见 新建资源组。...

访问MaxCompute数据

本文介绍如何使用AnalyticDB MySQL湖仓版(3.0)Spark SQL读写MaxCompute数据。背景信息 大数据计算服务MaxCompute是一种快速、完全托管的TB/PB级数据仓库解决方案。您可以通过AnalyticDB MySQL湖仓版(3.0)Spark SQL读写MaxCompute数据。...

配置AnalyticDB MySQL 2.0数据

准备工作 在分析型数据库MySQL版中创建数据库、表组和表。详情请参见 快速入门-开通分析型数据库MySQL版服务、创建表组 和 创建表。重要 分析型数据库MySQL版中的表需要创建成实时表(普通表),通过实时导入效率高而且流程简单。操作步骤 ...

AnalyticDB MySQL 是分布式数据库,数据需要根据分布字段均匀地分布在各个后台节点才能保证尽可能高的利用资源。分布字段选择不合理,会导致写入时存在热点,降低写入性能。分区字段合理。AnalyticDB MySQL 后台以分区为粒度进行数据存储...

使用XIHE BSP SQL进行作业开发

示例数据文件内容如下:001,Anna,99,London 002,Bob,67,USA 003,Cindy,78,Spain 004,Dan,100,China 步骤一:创建OSS外表 登录 云原生数据仓库AnalyticDB MySQL控制台。在页面左上角,选择集群所在地域。在左侧导航栏,单击 集群列表。在 湖...

账号类型

例如登录阿里云产品控制台、设置白名单、创建数据库账号、申请和释放公网地址、设置可维护时间段、扩容集群、恢复新集群以及 删除集群 等。RAM用户从属于阿里云账号,并且这些子账号下不能拥有实际的任何资源,所有资源都属于阿里云账号。...

升级版本

随着 AnalyticDB for MySQL 集群内核版本的迭代,新的内核版本能够为您提供更多的新功能,以及更好的使用体验。您 可以参考本文档自助升级集群内核版本。前提条件 集群为 数仓版(3.0)集群。重要 湖仓版(3.0)集群升级内核版本请 提交工...

Job型资源组的优先级队列

本文介绍设置 湖仓版(3.0)Job型资源组的作业优先级和查看优先级的方法。...查看Spark Batch作业优先级 登录 云原生数据仓库AnalyticDB MySQL控制台,在 作业开发>Spark Jar开发 页面的 应用列表 页签中查看作业的优先级。

通过联邦分析功能同步至湖仓版

AnalyticDB MySQL 每个集群最多可创建2048个数据库。更多信息,请参见 使用限制。大表分区键设置 为了提高数据的写入和查询性能,建议您设置分区键。如何设置分区键,请参见 表结构设计。支持设置的分区格式如下:value:按值进行分区。...

导入数据并查询

前提条件 通过以下步骤在OSS中创建存储 AnalyticDB for MySQL 数据的目录。开通OSS服务。详情请参见 开通OSS服务。创建存储空间。详情请参见 控制台创建存储空间。重要 OSS的存储空间与 AnalyticDB for MySQL 所属地域相同。创建目录。详情...

DDL差异

MySQL 云原生数据仓库AnalyticDB MySQL 定义 ALTER DATABASE 不支持 修改数据库属性。ALTER EVENT 不支持 修改现有事件的一个或多个特征。ALTER FUNCTION 不支持 修改函数的定义。ALTER LOGFILE GROUP 不支持 修改日志文件组。ALTER ...

小查询自动识别与加速

操作步骤 登录 云原生数据仓库AnalyticDB MySQL控制台,在左上角选择集群所在地域。在左侧导航栏,单击 集群列表,在 数仓版(3.0)页签,单击目标集群ID。在左侧导航栏,单击 工作负载管理。单击 小查询加速 页签,打开 自动小查询加速 ...

Tableau

Tableau是一款操作简单且功能强大的报表分析工具,支持连接 AnalyticDB MySQL 数据源。在Tableau中连接 AnalyticDB MySQL 后,可以通过拖放或单击的方式快速创建智能视图和仪表板。前提条件 安装 Alibaba AnalyticDB for MySQL connector。...

GrantOperatorPermission-为集群服务账号授权

访问级别 资源类型 条件关键字 关联操作 adb:GrantOperatorPermission Write DBCluster acs:adb:{#regionId}:{#accountId}:dbcluster/{#dbclusterId} 无 无 请求参数 名称 类型 必填 描述 示例值 DBClusterId string 是 AnalyticDB MySQL ...

新用户必读

完成入门操作后,您可以通过下列资源快速使用其他各项功能:连接数据库:介绍在应用开发中连接 AnalyticDB MySQL 的方法。数据导入:如果您需要将已有数据源中的数据迁移到 AnalyticDB MySQL,阿里云为此提供了完善的数据同步解决方案。...

创建表

AnalyticDB的表分为维度表和普通表,详细介绍请参见 名词解释。您可以通过DMS页面或者DDL语句创建表。通过DMS页面创建维度表 登录 分析型数据管理控制台。...相关文档 AnalyticDB系统保留字 列的最佳实践 AnalyticDB与MySQL数据类型对比

使用DTS同步RDS MySQL数据到AnalyticDB MySQL 2.0

本文以RDS MySQL数据源为例,介绍如何通过DTS将RDS MySQL数据实时同步至 AnalyticDB MySQL版 2.0 中。前提条件 根据 RDS MySQL快速入门,准备好测试数据。根据 AnalyticDB MySQL版2.0快速入门 完成数据库创建、表组创建等准备工作。背景...

访问Tablestore数据

已授权 AnalyticDB MySQL 扮演AliyunADBSparkProcessingDataRole角色来访问其他云资源。具体操作,请参见 同账号快速授权。操作步骤 下载 AnalyticDB MySQL版 Spark访问Tablestore依赖的Jar包。下载链接 emr-tablestore-2.3.0-SNAPSHOT.jar...

常见问题

通过 云原生数据仓库AnalyticDB MySQL控制台 湖仓版集群的数据同步和数据迁移功能实现数据入湖,会产生以下费用:AnalyticDB for MySQL 的ACU弹性资源费用,计费项详情,请参见 湖仓版(3.0)计费项。OSS 的存储费用、GET类请求次数以及PUT...

湖仓版作业调度

如果通过RAM用户(子账号)登录,使用作业调度功能需要满足以下三个条件:已配置 AnalyticDB MySQL 的AliyunServiceRoleForAnalyticDBForMySQL角色。配置方法,请参见 AliyunServiceRoleForAnalyticDBForMySQL介绍。已创建 AnalyticDB ...
共有200条 < 1 2 3 4 ... 200 >
跳转至: GO
产品推荐
云服务器 安全管家服务 安全中心
这些文档可能帮助您
数字证书管理服务(原SSL证书) 云服务器 ECS 云安全中心 云数据库 RDS 弹性公网IP 短信服务
新人特惠 爆款特惠 最新活动 免费试用