使用XIHE BSP SQL进行作业开发

步骤四:查询ADS层表数据 AnalyticDB MySQL 湖仓版(3.0)支持通过Spark SQL或XIHE BSP SQL离线方式查询数据,也支持通过XIHE MPP SQL在线实时查询数据。为保证数据的实时性,本教程以XIHE MPP SQL在线方式查询ADS层表数据为例。在 ...

根据标签筛选集群

操作步骤 登录 云原生数据仓库AnalyticDB MySQL控制台。在页面左上角,选择集群所在地域。在左侧导航栏,单击 集群列表。单击 标签,选择标签的 标签键 和 标签值 筛选集群。说明 按标签筛选集群后,如果您需要取消筛选,可以 清除 筛选...

使用Spark SQL进行作业开发

步骤四:查询ADS层表数据 AnalyticDB MySQL 湖仓版(3.0)既支持通过Spark SQL或XIHE BSP SQL离线方式查询数据,也支持通过XIHE MPP SQL在线实时查询数据。为保证数据的实时性,本教程以XIHE MPP SQL在线方式查询ADS层表数据为例。在 ...

JSON索引(2.0版)

查询数据 从查询数据时,分析型数据库MySQL版支持使用函数 json_extract 进行查询。语法:json_extract(json_col,'json-path')参数:json_col,JSON列的列名。json-path,通过点号(.)进行分割的JSON属性键 key 的路径,其中$表示最...

服务关联角色

本文为您介绍 云原生数据仓库 AnalyticDB MySQL 版(AnalyticDB for MySQL)(简称 AnalyticDB for MySQL)服务关联角色(AliyunServiceRoleForAnalyticDBForMySQL)的应用场景以及如何删除服务关联角色。背景信息 云原生数据仓库...

电子商务

的逻辑设计 客户信息表(t_fact_customers)数据量:约有五亿客户。字段名 数据类型 说明 customer_id varchar 客户编号 customer_name varchar 客户姓名 phone_number varchar 电话 address varchar 地址 last_login_time timestamp ...

常见问题

通过 云原生数据仓库AnalyticDB MySQL控制台 湖仓版集群的数据同步和数据迁移功能实现数据入湖,会产生以下费用:AnalyticDB for MySQL 的ACU弹性资源费用,计费项详情,请参见 湖仓版(3.0)计费项。OSS 的存储费用、GET类请求次数以及PUT...

Spark应用性能诊断

AnalyticDB for MySQL 湖仓版(3.0)推出Spark应用诊断功能,若您提交的Spark应用存在性能问题,您可以根据诊断信息快速定位和分析性能瓶颈问题,优化Spark应用,提高问题解决效率。本文主要介绍如何进行Spark应用性能诊断以及性能诊断的...

支持的数据

数据入仓 类别 数据源 导入方式 产品系列 文档链接 数据库 RDS MySQL 外表 数仓版(3.0)通过外表导入至数仓版 湖仓版(3.0)通过外表导入至湖仓版 DTS 数仓版(3.0)通过DTS导入数据 湖仓版(3.0)通过DTS导入数据 DataWorks 数仓版(3.0...

Spark开发编辑器

前提条件 已创建 AnalyticDB MySQL 湖仓版(3.0)集群,详情请参见 创建集群。已创建Job型资源组,且计算预留资源需大于等于8 ACU。创建资源组,详情请参见 新建资源组。已为RAM用户授权。具体操作,请参见 为RAM用户授权。已将RAM用户(子...

查询

以下示例查询门票销量排名前10的卖家,WHERE 子句中包含一个查询,子查询生成多个行,每行包含一列数据。说明 查询可以包含多个列和行。select firstname,lastname,cityname,max(qtysold)as maxsold from users join sales on ...

申请和释放公网地址

云原生数据仓库AnalyticDB MySQL版 集群支持VPC地址和公网地址两种类型的地址,如果需要通过公网连接集群,您需要先申请公网地址。公网和VPC网络 网络类型 说明 VPC网络 一个VPC就是一个隔离的网络环境。VPC的安全性较高,推荐您使用VPC...

数据导入性能优化

单进程无法完全利用系统资源,且一般客户端需要处理数据、攒批等操作,难以跟上数据库的导入速度,通过多并发导入可以加快导入速度。导入并发受攒批、数据源、客户端机器负载等影响,没有最合适的数值,建议通过测试逐步计算合适的并发能力...

通过视图管控数据权限

查询结果验证 使用 user1 账号连接 AnalyticDB MySQL版 集群的 adb_demo 数据库后,user1 仅能查询到视图 v1 数据,查询语句如下:SELECT*FROM v1;查询结果如下:+-+-+-+|ID|PROVINCE_ID|USER_INFO|+-+-+-+|1369417242420617216|1|Tom|...

手动调整Join顺序

customer Join表 orders,输出57069行数据至临时结果集 tmp1。临时结果集 tmp1 Join表 lineitem,输出114705行数据至另一个临时结果集 tmp2。临时结果集 tmp2 Join表 nation,输出114705行数据作为最终结果。3次Join累积输出结果行数为...

删除标签

操作步骤 登录 云原生数据仓库AnalyticDB MySQL控制台。在页面左上角,选择集群所在地域。在左侧导航栏,单击 集群列表。在 数仓版(3.0)页签下,单击目标 集群ID。在 集群信息 页面的 集群属性 区域,单击 编辑标签。单击要删除的标签后...

访问OSS数据

云原生数据仓库AnalyticDB MySQL版 数据库产品 编写Python程序,将Python程序上传至OSS。本文示例的Python程序名为 example.py,用于读取文本文件readme.txt的第一行内容。import sys from pyspark.sql import SparkSession#初始Spark ...

数据导入性能优化

单进程无法完全利用系统资源,且一般客户端需要处理数据、攒批等操作,难以跟上数据库的导入速度,通过多并发导入可以加快导入速度。导入并发受攒批、数据源、客户端机器负载等影响,没有最合适的数值,建议通过测试逐步计算合适的并发能力...

查询

以下示例在WHERE子句中包含一个查询,该子查询生成多个行。在本示例中,行只包含一列,但查询可以包含多个列和行,就像任何其他一样。以下查询查找门票销量排名前10位的卖家。select firstname,lastname,cityname,max(qtysold)as...

DescribeDBClusterStatus-查看集群的运行状态

调用DescribeDBClusterStatus接口查询AnalyticDB MySQL湖仓版(3.0)集群的状态列表。接口说明 当前服务的接入地址请参见 服务接入点。调试 您可以在OpenAPI Explorer中直接运行该接口,免去您计算签名的困扰。运行成功后,OpenAPI ...

创建

组是一系列可发生关联的数据的集合,分析型数据库MySQL版(AnalyticDB MySQL版)为管理相关联的数据,引入组的概念。说明 创建 AnalyticDB MySQL版 数据库时,系统自动创建维度组。注意事项 组名以字母开头,字母或数字结尾...

创建资源组

AnalyticDB MySQL 湖仓版(3.0)支持使用XIHE BSP SQL、XIHE MPP SQL、Spark SQL等不同方式进行作业开发。Job型资源组运行XIHE BSP SQL和Spark SQL,Interactive型资源组运行XIHE MPP SQL。开始作业开发前,需要先创建一个Job型和...

DescribeRegions-查询地域和可用区

查询AnalyticDB MySQL湖仓版支持的地域和可用区。接口说明 当前服务的接入地址请参见 服务接入点。调试 您可以在OpenAPI Explorer中直接运行该接口,免去您计算签名的困扰。运行成功后,OpenAPI Explorer可以自动生成SDK代码示例。调试 ...

创建标签

操作步骤 登录 云原生数据仓库AnalyticDB MySQL控制台。在页面左上角,选择集群所在地域。在左侧导航栏,单击 集群列表。在 数仓版(3.0)页签下,单击目标 集群ID。在 集群信息 页面的 集群属性 区域,单击 编辑标签。在 编辑标签 页面,...

数据导出到Redis

insert overwrite into export_redis_test_external_table select*from hybrid_export_redis_test 注意事项 要求两张的DDL定义完全一致(HybridDB for MySQL数据表、HybridDB for MySQL外表)。请谨慎使用OVERWRITE导出,会清空整个db,...

续费说明

AnalyticDB MySQL版 控制台手动续费 登录 云原生数据仓库AnalyticDB MySQL控制台。在页面左上角,选择集群所在地域。在左侧导航栏,单击 集群列表。在 湖仓版(3.0)或 数仓版(3.0)页签中,单击目标集群右侧的 续费。选择购买时长,阅读...

数据传输”导入

源库与目标库 源库的实例类型可以是RDS实例,或者是您自建的MySQL数据库。以RDS实例为例,选择待迁移实例的ID,输入对应的数据库账号及密码。说明 DTS现已支持RDS/MySQL向HybridDB for MySQL的 全量及增量数据同步。目标库选择 PetaData,...

DescribeDBClusterStatus-查看集群的运行状态

调用DescribeDBClusterStatus接口查询AnalyticDB MySQL数仓版(3.0)集群的状态列表。调试 您可以在OpenAPI Explorer中直接运行该接口,免去您计算签名的困扰。运行成功后,OpenAPI Explorer可以自动生成SDK代码示例。调试 授权信息 当前...

表格存储(Tablestore)数据导入

以创建 adb_external_db 数据库为例,建库示例语句如下:create external database adb_external_db;创建外表。说明 AnalyticDB MySQL 外表和TableStore中的字段名称、字段数量、字段顺序一致,字段类型兼容。数据类型映射关系,请参见 ...

DBeaver(2.0版)

本文介绍如何通过DBeaver连接和管理 云原生数据仓库AnalyticDB MySQL版 2.0集群。开始使用DBeaver之前,您需要先完成以下准备...成功连接至AnalyticDB for MySQL 2.0数据库后,您就可以通过DBeaver对AnalyticDB for MySQL 2.0数据库进行管理。

删除或退订集群

删除按量付费集群 登录 云原生数据仓库AnalyticDB MySQL控制台。在页面左上角,选择集群所在地域。在左侧导航栏,单击 集群列表。根据需要删除的集群版本,选择 数仓版(3.0)或 湖仓版(3.0)页签。单击目标集群右侧的 更多>删除。在 删除...

Navicat(2.0版)

本文介绍如何通过Navicat连接和管理 云原生数据仓库AnalyticDB MySQL版 2.0集群。前提条件 开始使用Navicat for MySQL之前,需要先安装Navicat ...右键单击数据库名 打开数据库,打开数据库后,您就可以利用Navicat for MySQL进行数据管理。

通过DataWorks导入数据

本文介绍如何通过DataWorks将RDS MySQL数据导入至 AnalyticDB MySQL版 湖仓版(3.0)或 数仓版(3.0)。前提条件 已购买合适规格的独享数据集成资源组。详情请参见:新增和使用独享数据集成资源组。已完成数据集成资源组与数据源的网络连通...

使用OpenAPI示例

本文介绍如何使用阿里云Python语言SDK开发包,调用 云原生数据仓库AnalyticDB MySQL版 的DescribeDBClusters接口(查询实例列表)。查看OpenAPI文档 在调用OpenAPI前,建议您先阅读对应接口文档,了解、学习调用该接口所需要的参数及权限等...

聚合支付方案

解决方案 阿里云通过多款云数据库产品为利楚扫呗制定以下解决方案:方案解读:使用DRDS分库分表将数据库进行水平拆分,有效解决订单的存储上限及业务高峰时的高并发压力,借助了DRDS对MySQL语法的高度兼容能力,轻松从原来单体数据库升级到...

AnalyticDB MySQL数仓版(3.0)使用流程

云原生数据仓库AnalyticDB MySQL版(简称ADB,原分析型数据库MySQL版)是云端托管的PB级高并发实时数据仓库,是专注于服务OLAP领域的数据仓库。本指南将指引您完成一次 AnalyticDB MySQL版 集群创建及使用。数仓版(3.0)快速入门视频指导 ...

ListSparkTemplateFileIds-列出集群中的Spark模板文件...

查询AnalyticDB MySQL湖仓版(3.0)集群所有保存的Spark模板文件ID。接口说明 地域的公网接入地址:adb.<region-id>.aliyuncs.com 。示例:adb.cn-hangzhou.aliyuncs.com 。地域的 VPC 接入地址:adb-vpc.<region-id>.aliyuncs.com 。示例...

湖仓版扩缩容

扩容 登录 云原生数据仓库AnalyticDB MySQL控制台,在页面左上角选择集群所在地域。在左侧导航栏,单击 集群列表,在 湖仓版(3.0)页签下,单击目标集群右侧的 扩容。在 变配 页面,设置 计算预留资源 和 存储预留资源。扩容会增加剩余可...

DescribeApsActionLogs-查询实时数据接入任务的日志

查询AnalyticDB MySQL湖仓版(3.0)集群实时数据接入任务的日志详细信息。调试 您可以在OpenAPI Explorer中直接运行该接口,免去您计算签名的困扰。运行成功后,OpenAPI Explorer可以自动生成SDK代码示例。调试 授权信息 当前API暂无授权...

过滤条件不下推

filter_not_pushdown_columns=[test01.table01:id|product]*/示例2:以3.1.4及以上的内核版本为例,当前查询,包含数据库 test01 的 table01 中字段 id、product,数据库 test02 的 table03 中字段 key 的过滤条件不会下推。...
共有200条 < 1 2 3 4 ... 200 >
跳转至: GO
产品推荐
云服务器 安全管家服务 安全中心
这些文档可能帮助您
云数据库 RDS 云原生数据仓库AnalyticDB MySQL版 数据库备份 DBS 云数据库 Redis 版 弹性公网IP 短信服务
新人特惠 爆款特惠 最新活动 免费试用