表结构优化

要做好库表结构设计和优化,用户通常需要关注以下信息:数据库引擎架构 用户需要了解数据库引擎的存储和计算架构特点,才能结合业务的数据分布特征与业务场景特征,进行数据建模,从而设计出符合引擎架构特点的数据表结构。SQL特征差异 ...

管理运维事件

配置周期时间 周期时间对 AnalyticDB MySQL 数仓版(3.0)所有集群生效,不影响其他数据库产品运维事件的切换时间。配置周期时间后,会在指定周期时间点,对计划内所有未执行且未设置计划切换时间的事件执行切换。例如配置周期时间为周二00...

存储空间分析

指标 说明 数据库 数据库名称。表名 表名称。空间占比 表数据量占集群总数据量的比例。计算方法:空间占比=(表的总数据量/集群总数据量)*100%。总数据量 表的总数据量。计算方法如下:方法一:总数据量=热数据量+冷数据量。方法二:总数据...

通过Spark SQL读写OSS外表

创建外表时选择的OSS路径需比创建数据库时选择的OSS路径至少多一层目录,且外表的路径需在数据库路径下。可以在tblproperties中配置 'auto.create.location'='true' 自动创建OSS路径。如果未指定该参数并且OSS中不存在该路径,请先创建对应...

API概览

DescribeAdbMySqlTables 查询数据库下所有表信息 枚举AnalyticDB MySQL湖仓版(3.0)集群指定数据库下所有表信息。DescribeAdbMySqlSchemas 查询所有数据库列表 枚举指定AnalyticDB MySQL湖仓版(3.0)集群下所有数据库列表。GetViewDDL ...

删除标签

操作步骤 登录 云原生数据仓库AnalyticDB MySQL控制台。在页面左上角,选择集群所在地域。在左侧导航栏,单击 集群列表。在 数仓版(3.0)页签下,单击目标 集群ID。在 集群信息 页面的 集群属性 区域,单击 编辑标签。单击要删除的标签后...

访问OSS数据

云原生数据仓库AnalyticDB MySQL版 数据库产品 编写Python程序,将Python程序上传至OSS。本文示例的Python程序名为 example.py,用于读取文本文件readme.txt的第一行内容。import sys from pyspark.sql import SparkSession#初始Spark ...

同步数据

分析型数据库MySQL版支持多种数据加载方式,包括但不限于:通过阿里云数据传输服务DTS将MySQL/DRDS中的数据导入分析型数据库MySQL版,其中MySQL可为RDS for MySQL、其他云厂商或线上IDC的自建MySQL以及ECS自建MySQL。详细操作步骤请参见 ...

使用限制

操作 时间限制(ms)超时说明 创建集群 600000 无 删除集群 300000 无 扩容集群 600000 无 创建数据库 10000 无 删除数据库 10000 无 创建表或视图 10000 无 删除表或视图 10000 无 清空表(TRUNCATE TABLE)60000 无 新增列 10000 无 删除...

通过Spark SQL读写Delta外表

如果已有数据库,可跳过本步骤。CREATE DATABASE if not exists external_delta_db location"oss:/<bucket_name>/test/;用于在该路径中创建表,请替换为自己的OSS路径。执行以下语句,创建Delta外表。CREATE TABLE if not exists external_...

创建资源组

操作步骤 登录 云原生数据仓库AnalyticDB MySQL控制台,在左上角选择集群所在地域。在左侧导航栏,单击 集群列表,在 湖仓版(3.0)页签,单击目标集群ID。在左侧导航栏,单击 集群管理>资源管理。单击 资源组管理,在资源组列表的右上角...

续费说明

AnalyticDB MySQL版 控制台手动续费 登录 云原生数据仓库AnalyticDB MySQL控制台。在页面左上角,选择集群所在地域。在左侧导航栏,单击 集群列表。在 湖仓版(3.0)或 数仓版(3.0)页签中,单击目标集群右侧的 续费。选择购买时长,阅读...

创建标签

操作步骤 登录 云原生数据仓库AnalyticDB MySQL控制台。在页面左上角,选择集群所在地域。在左侧导航栏,单击 集群列表。在 数仓版(3.0)页签下,单击目标 集群ID。在 集群信息 页面的 集群属性 区域,单击 编辑标签。在 编辑标签 页面,...

PHP

AnalyticDB MySQL 集群的数据库名称。ads_database="db_name;AnalyticDB MySQL 集群的连接端口号。ads_port=3306;连接 AnalyticDB MySQL。ads_conn=mysqli_connect($ads_server_name,$ads_username,$ads_password,$ads_database,$ads_port)...

作业投递

AnalyticDB MySQL 数仓版(3.0)的作业投递功能支持将资源组中满足一定条件的查询作业(通常为资源消耗大、耗时久的大查询)投递至指定一资源组中,避免影响资源组中其他查询作业。本文介绍如何开启并使用作业投递功能。前提条件 ...

自动同步PolarDB-X元数据

数据准备 本示例的PolarDB-X 2.0数据库名为 test_adb,并在该库中创建了一张名为 person 的表,示例如下:CREATE DATABASE test_adb MODE='AUTO' CREATE TABLE person(`id` bigint NOT NULL AUTO_INCREMENT,`age` int(11)NOT NULL DEFAULT ...

访问OSS-HDFS数据

AnalyticDB for MySQL 湖仓版(3.0)Spark支持访问OSS-HDFS数据源,本文介绍如何使用Spark来操作OSS-HDFS数据。前提条件 AnalyticDB MySQL 湖仓版(3.0)集群与OSS存储空间位于相同地域。已在湖仓版(3.0)集群中创建Job型资源组。具体操作...

删除或退订集群

删除按量付费集群 登录 云原生数据仓库AnalyticDB MySQL控制台。在页面左上角,选择集群所在地域。在左侧导航栏,单击 集群列表。根据需要删除的集群版本,选择 数仓版(3.0)或 湖仓版(3.0)页签。单击目标集群右侧的 更多>删除。在 删除...

数据建模诊断

在倾斜表中,您可以查看某个数据库中已经存在倾斜的表,重新进行分布字段的选择。具体方法,请参见 表结构设计。复制表合理性诊断 AnalyticDB MySQL版 在创建表时可以指定数据的分布方式为复制方式(DISTRIBUTED BY BROADCAST),复制表会...

通过Spark Distribution SQL Engine开发Spark SQL作业

} } } 重要 启动Spark Distribution SQL Engine时,若设置了 spark.sql.hive.metastore.version=adb,则连接地址中的数据库必须为 AnalyticDB for MySQL 中已存在的数据库,否则会默认使用 default 数据库,造成连接失败。ThriftServer ...

查看资源弹性计划执行日志

操作步骤 登录 云原生数据仓库AnalyticDB MySQL控制台。在页面左上角,选择集群所在地域。在左侧导航栏,单击 集群列表。在 数仓版(3.0)或 湖仓版(3.0)页签下,单击目标集群ID。数仓版(3.0)集群,在左侧导航栏,单击 资源弹性扩容。...

调优集群性能

语义错误 SQL符合 云原生数据仓库 AnalyticDB MySQL 版 官方对SQL语法的定义,但在语义检查时,发现数据库对象错误,在语义分析阶段报错。例如,表名错误、列不存在、GROUP BY字段缺失、函数参数类型错误等。集群内部问题导致查询失败 查询...

永洪BI

完成上述参数配置后,单击 测试连接 进行连通性测试,系统提示测试成功后,即可连接至指定的 AnalyticDB MySQL 数据库。使用永洪BI 通过永洪BI连接 AnalyticDB MySQL 集群后,您就可以获取 AnalyticDB MySQL 中的数据,然后通过永洪BI制作...

查看资源组监控

云原生数据仓库 AnalyticDB MySQL 版 湖仓版(3.0)的资源管理既可以展示集群级别的计算和存储资源用量,也展示资源组和作业级别的计算资源使用情况。本文介绍如何通过资源管理查看集群、资源组、作业的资源用量,包括预留资源用量和弹性...

管理资源弹性计划

操作步骤 登录 云原生数据仓库AnalyticDB MySQL控制台。在页面左上角,选择集群所在地域。在左侧导航栏,单击 集群列表。在 数仓版(3.0)或 湖仓版(3.0)页签下,单击目标集群ID。数仓版(3.0)集群,在左侧导航栏,单击 资源弹性扩容。...

通过DataWorks使用Spark Distribution SQL Engine

重要 域名地址中的 {database name} 需替换为实际的数据库名。Metastore Hive Metastore地址。请填写步骤二中启动Spark Distribution SQL Engine后获取的域名连接地址。详情请参见 步骤二:获取域名连接地址。重要 域名地址中的 {database ...

通过数据同步功能同步Kafka至湖仓版(推荐)

目标库表配置 参数说明如下:参数名称 参数说明 库名 同步到 AnalyticDB MySQL数据库名称。如果不存在同名数据库,将新建库;如果已存在同名数据库,数据会同步到已存在的数据库中。库名命名规则,详见 使用限制。表名 同步到 ...

湖仓版扩缩容

您可以根据业务需要对 云原生数据仓库AnalyticDB MySQL版 湖仓版(3.0)集群的计算预留资源和存储预留资源进行扩容或缩容。前提条件 您的阿里云账号没有未支付的续费订单。湖仓版(3.0)集群的状态为运行中。注意事项 扩缩容期间,会禁止 ...

通过DataWorks导入数据

本文介绍如何通过DataWorks将RDS MySQL数据导入至 AnalyticDB MySQL版 湖仓版(3.0)或 数仓版(3.0)。前提条件 已购买合适规格的独享数据集成资源组。详情请参见:新增和使用独享数据集成资源组。已完成数据集成资源组与数据源的网络连通...

Tableau

本文测试了Tableau与 AnalyticDB MySQL 在列举数据库、查看表表等方面的兼容性,并给出测试结果图。测试环境 MySQL Tableau mysql Ver5.6.46 for osx10.13 on x86_64(Homebrew)Tableau Desktop 2019.4 测试范围 列举数据库 列举所有表 查看...

查看当天资源弹性计划

操作步骤 登录 云原生数据仓库AnalyticDB MySQL控制台。在页面左上角,选择集群所在地域。在左侧导航栏,单击 集群列表。在 数仓版(3.0)或 湖仓版(3.0)页签下,单击目标集群ID。数仓版(3.0)集群,在左侧导航栏,单击 资源弹性扩容。...

通过数据同步功能同步SLS至湖仓版(推荐)

如果已存在同名数据库,数据会同步到已存在的数据库中。库名命名规则,详见 使用限制。表名 同步到 湖仓版(3.0)的表名称。如果库中不存在同名表,将新建表;如果库中已存在同名表,数据同步会失败。表名命名规则,详见 使用限制。Schema...

启停ThriftServer

AnalyticDB for MySQL 湖仓版(3.0)Job型资源组默认使用批处理方式执行Spark SQL,如果您想要使用Job型资源组执行交互式查询,则需要启动ThriftServer。启动ThriftServer后,可以在同一资源组内并发执行多个交互式查询,提升查询效率。...

XUANWU_V2引擎介绍(邀测中)

本文为您介绍 云原生数据仓库 AnalyticDB MySQL 版 表引擎(XUANWU_V2)和相关组件(Compaction Service)的使用方法。前提条件 满足以下两个条件的集群支持XUANWU_V2引擎:产品系列为 湖仓版(3.0)。内核为3.2.0及以上版本。说明 如何...

QlikView

完成上述参数配置后,单击 Test 测试连通性,测试通过后,单击 OK 添加 AnalyticDB MySQL 数据源。打开QlikView,单击 文件>编辑j脚本,选择步骤1中设置的数据库名称,进行连通性测试。说明 您也可以通过 ODBC CONNECT TO DATABASE_NAME;...

通过PySpark开发Spark应用

本文介绍了如何开发 AnalyticDB MySQL Spark Python作业,以及如何通过VirtualEnv技术打包Python作业的运行环境。前提条件 已创建 AnalyticDB MySQL 湖仓版(3.0)。具体操作,请参见 创建集群。已创建Job型资源组。具体操作,请参见 新建...

访问MaxCompute数据

本文介绍如何使用AnalyticDB MySQL湖仓版(3.0)Spark SQL读写MaxCompute数据。背景信息 大数据计算服务MaxCompute是一种快速、完全托管的TB/PB级数据仓库解决方案。您可以通过AnalyticDB MySQL湖仓版(3.0)Spark SQL读写MaxCompute数据。...

湖仓版(3.0)计费项

计费公式:存储空间费用=热数据存储费用+冷数据存储费用 冷数据存储空间费用=冷数据存储空间单价×冷数据存储量×时长 热数据存储空间费用=热数据存储空间单价×热数据存储量×时长 查询用量:您可以在 云原生数据仓库AnalyticDB MySQL控制...

配置AnalyticDB MySQL 2.0数据

准备工作 在分析型数据库MySQL版中创建数据库、表组和表。详情请参见 快速入门-开通分析型数据库MySQL版服务、创建表组 和 创建表。重要 分析型数据库MySQL版中的表需要创建成实时表(普通表),通过实时导入效率高而且流程简单。操作步骤 ...

使用XIHE BSP SQL进行作业开发

示例数据文件内容如下:001,Anna,99,London 002,Bob,67,USA 003,Cindy,78,Spain 004,Dan,100,China 步骤一:创建OSS外表 登录 云原生数据仓库AnalyticDB MySQL控制台。在页面左上角,选择集群所在地域。在左侧导航栏,单击 集群列表。在 湖...
共有200条 < 1 2 3 4 ... 200 >
跳转至: GO
产品推荐
云服务器 安全管家服务 安全中心
这些文档可能帮助您
阿里邮箱 弹性公网IP 云数据库 RDS 商标服务 短信服务 人工智能平台 PAI
新人特惠 爆款特惠 最新活动 免费试用