高性能版Spark全密态计算引擎使用示例

AnalyticDB MySQL 湖仓版(3.0)高性能版的Spark全密态计算引擎,在基础版Spark全密态引擎能力的基础上,支持Parquet模块化加密功能,且兼容社区版Spark、Hadoop、Hive等计算引擎,在保证数据传输与存储过程安全的同时,提升了数据处理效率...

SQL WorkBench/J(2.0版)

本文介绍如何通过SQL WorkBench/J工具连接和管理 云原生数据仓库AnalyticDB MySQL版 2.0集群。前提条件 开始使用SQL WorkBench/J之前,您需要先完成以下准备工作。...成功连接AnalyticDB for MySQL 2.0数据库后,您就可以对数据库进行管理

导入/导出任务

数据库 提交导入或导出任务相关SQL的数据库用户名。任务状态 任务状态,取值说明:init:任务初始化。running:任务运行中。finish:任务执行成功。failed:任务执行失败。若任务执行失败,您可以在SQL诊断页面,通过任务ID查询该任务,并...

使用HybridDB for MySQL需要有ECS吗?

初始默认状态下,HybridDB for MySQL仅...用户也可以在管理控制台上开通公网IP,就可以从公网访问HybridDB for MySQL数据库。但需注意,由于公网的网络情况较复杂且不属于阿里云的管理访问之内,通过公网IP地址访问数据库的网络性能会有损失。

使用DTS同步RDS MySQL数据到AnalyticDB MySQL 2.0

本文以RDS MySQL数据源为例,介绍如何通过DTS将RDS MySQL数据实时同步至 AnalyticDB MySQL版 2.0 中。前提条件 根据 RDS MySQL快速入门,准备好测试数据。根据 AnalyticDB MySQL版2.0快速入门 完成数据库创建、组创建等准备工作。背景...

Tableau(2.0版)

Tableau是一款操作简单且功能强大的报表分析工具,支持连接 云原生数据仓库AnalyticDB MySQL版 2.0集群。在Tableau中连接成功后,...选择数据库后,便可选取数据表以及预览数据进行可视化报表制作。如何使用Tableau请参见 如何使用Tableau。

DBVisualizer(2.0版)

本文介绍如何通过DBVisualizer连接和管理 云原生数据仓库AnalyticDB MySQL版 2.0集群。准备工作 开始使用DBVisualizer之前,需要先完成以下准备工作。...成功连接AnalyticDB for MySQL 2.0数据库后,您就可以通过DBVisualizer进行数据管理

为什么HybridDB for MySQL 数据库刚创建时就有磁盘...

HybridDB for MySQL 数据库在初创时,会初始化一些系统文件,也会为空间预分配一些空白磁盘页面,因此会使用一定的磁盘空间,这些磁盘空间在用户有真实数据写入时,会被重新利用起来。

常见问题

通过 云原生数据仓库AnalyticDB MySQL控制台 湖仓版集群的数据同步和数据迁移功能实现数据入湖,会产生以下费用:AnalyticDB for MySQL 的ACU弹性资源费用,计费项详情,请参见 湖仓版(3.0)计费项。OSS 的存储费用、GET类请求次数以及PUT...

存储层高可用

AnalyticDB的存储层是基于Raft协议构建了一套分布式强一致、高可用、高可靠的存储...三副本的多数派存活是保证数据读写高可用的关键,优势在于可允许1个副本所在节点发生宕机或重启,即少数派failover的情况下,数据库仍然能提供读写服务。

表格存储(Tablestore)数据导入

在 adb_external_db 数据库中,创建 person ,建表示例语句如下:CREATE EXTERNAL TABLE IF NOT EXISTS adb_external_db.person(id int,name string,age int)ENGINE='OTS' TABLE_PROPERTIES='{"mapped_name":"person","location":...

SQL WorkBench/J

本文测试了SQL WorkBench/J与 AnalyticDB MySQL版 在连通性、列举数据库、创建等方面的兼容性,并给出测试结果图。测试环境 MySQL JDBC Driver SQL WorkBench/J MySQL JDBC Driver 5.1.48(Platform Independent),下载地址为 MySQL JDBC ...

Spark应用性能诊断

AnalyticDB for MySQL 湖仓版(3.0)推出Spark应用诊断功能,若您提交的Spark应用存在性能问题,您可以根据诊断信息快速定位和分析性能瓶颈问题,优化Spark应用,提高问题解决效率。本文主要介绍如何进行Spark应用性能诊断以及性能诊断的...

通过LOAD DATA导入至数仓版

连接AnalyticDB for MySQL集群,通过 CREATE DATABASE 和 CREATE TABLE,在 adb_demo 数据库下创建 test ,从本地文件导入的数据将存储在 test 中。CREATE TABLE test(a int NOT NULL DEFAULT '0',b varchar NOT NULL,PRIMARY KEY(a)...

Tableau

本文测试了Tableau与 AnalyticDB MySQL 在列举数据库、查看表表等...测试环境 MySQL Tableau mysql Ver5.6.46 for osx10.13 on x86_64(Homebrew)Tableau Desktop 2019.4 测试范围 列举数据库 列举所有 查看数据 突出显示 文本 折线图

Serverless存储层

云原生数据仓库AnalyticDB MySQL版 采用计算存储分离的架构,通过云原生技术实现了池化,提供了Serverless存储的能力。Serverless架构下的存储资源支持独立弹性伸缩,同时提供了按需横向弹性(扩展存储节点数)和按需纵向弹性(升配存储...

自建MySQL数据导入

本文介绍如何通过 AnalyticDB MySQL 的外表将ECS自建MySQL数据库的数据导入至 AnalyticDB MySQL 数仓版(3.0)。前提条件 已创建与 AnalyticDB MySQL 集群相同地域、相同VPC的ECS实例。已在ECS实例中安装自建MySQL。已在ECS实例的安全组中...

DataGrip

本文测试了DataGrip与 云原生数据仓库AnalyticDB MySQL版 在连通性、列举数据库、创建等方面的兼容性,并给出测试结果图。测试环境 MySQL JDBC Driver DataGrip mysql-connector-java-8.0.15 下载地址为 DataGrip。测试范围 连通性 列举...

SQL诊断功能介绍

其中用户名、数据库名、资源组的可选取值是整体检索结果中已有的取值,而不是当前 AnalyticDB MySQL版 集群中的所有取值。例如,AnalyticDB MySQL版 集群中有3个数据库:db1、db2、db3,而符合整体检索条件的查询仅涉及 db1 和 db2。此时...

Spark开发编辑器

前提条件 已创建 AnalyticDB MySQL 湖仓版(3.0)集群,详情请参见 创建集群。已创建Job型资源组,且计算预留资源需大于等于8 ACU。创建资源组,详情请参见 新建资源组。已为RAM用户授权。具体操作,请参见 为RAM用户授权。已将RAM用户(子...

调优集群性能

以下原因可能导致Hash占用较多内存:Build本身较大:云原生数据仓库 AnalyticDB MySQL 版 会根据统计信息评估Join操作两边的的大小,以较小的作为Build,但不排除Build仍然较大。统计信息过期或者统计信息评估不准 当Join操作...

UPDATE

AnalyticDB MySQL 支持单更新和多更新。注意事项 执行 UPDATE 命令时,要求中存在主键。暂不支持更新主键列。仅单更新支持ORDER BY和LIMIT子句。单更新 语法 UPDATE table_name SET assignment_list[WHERE where_condition]...

访问OSS数据

云原生数据仓库AnalyticDB MySQL版 数据库产品 编写Python程序,将Python程序上传至OSS。本文示例的Python程序名为 example.py,用于读取文本文件readme.txt的第一行内容。import sys from pyspark.sql import SparkSession#初始Spark ...

通过日志服务同步ECS日志数据到AnalyticDB MySQL 2.0

数据库名称 目标AnalyticDB for MySQL数据库的名字。组名 目标AnalyticDB for MySQL中的组。名 目标AnalyticDB for MySQL中的名,投递过来的日志数据将存储在该中。AccessKey ID 当前阿里云账号的AccessKey ID,请参见 获取阿里...

典型慢查询

如果没有指定Join条件,AnalyticDB MySQL 会对左右两执行笛卡尔积运算,产生的数据量行数是左右两表数据行数的乘积,该类操作会导致消耗较大的CPU资源。消耗磁盘I/O的慢查询 查询的扫描行数(Scanned Rows)和扫描量(Amount of Scanned ...

申请和释放公网地址

云原生数据仓库AnalyticDB MySQL版 集群支持VPC地址和公网地址两种类型的地址,如果需要通过公网连接集群,您需要先申请公网地址。公网和VPC网络 网络类型 说明 VPC网络 一个VPC就是一个隔离的网络环境。VPC的安全性较高,推荐您使用VPC...

删除标签

操作步骤 登录 云原生数据仓库AnalyticDB MySQL控制台。在页面左上角,选择集群所在地域。在左侧导航栏,单击 集群列表。在 数仓版(3.0)页签下,单击目标 集群ID。在 集群信息 页面的 集群属性 区域,单击 编辑标签。单击要删除的标签后...

设置白名单

为保障 云原生数据仓库 AnalyticDB MySQL 版 集群的安全稳定,系统默认禁止所有地址访问 AnalyticDB for MySQL 集群,因此,在使用 AnalyticDB for MySQL 集群前,需为集群设置白名单,以允许外部设备访问该集群。背景信息 集群默认的白...

同步数据

分析型数据库MySQL版支持多种数据加载方式,包括但不限于:通过阿里云数据传输服务DTS将MySQL/DRDS中的数据导入分析型数据库MySQL版,其中MySQL可为RDS for MySQL、其他云厂商或线上IDC的自建MySQL以及ECS自建MySQL。详细操作步骤请参见 ...

FineBI

您可以通过FineBI连接 云原生数据仓库AnalyticDB MySQL版,以可视化的形式帮助您进行多样数据管理,例如过滤、分组汇总、新增列、字段设置、排序等,极大的提升了数据整合的便利性和效率。前提条件 了解FineBI与 AnalyticDB MySQL版 之间的...

兼容性概览

以下列出了 AnalyticDB MySQL版 支持的客户端或ETL工具,以及这些客户端或工具与 AnalyticDB MySQL版 在数据库连通性、列举数据库、建、查询数据等方面的兼容性。客户端与 AnalyticDB MySQL版 兼容性 客户端 连接数据库 列举数据库 建...

使用kettle将本地数据导入AnalyticDB MySQL 2.0

本文以Excel为例,介绍如何通过kettle将本地Excel数据迁移...相关信息 使用DTS同步RDS MySQL数据 使用数据集成迁移数据至分析型数据库MySQL版 使用kettle将本地数据导入分析型数据库MySQL版 在程序中通过AnalyticDB MySQL版Client高效写入数据

聚集列(2.0版)

在分析型数据库MySQL版中,数据存储支持按一列或多列进行排序(先按第一列排序,第一列相同情况下使用第二列排序),以保证该列中值相同或相近的数据保存在磁盘同一位置,这样的列我们称之为聚集列。当以聚集列为查询条件时,由于查询结果...

自动续费(2.0版)

续费是指延长包年包月集群的使用时间,续费的...在 续费管理 页面的左侧,选择 分析型数据库。在 续费管理 页面,单击 自动续费 页签,找到目标数据库,单击右侧的 修改自动续费。在 修改自动续费 页面,设置自动续费时长,然后单击 确定。

Cache Table

云原生数据仓库AnalyticDB MySQL版 3.0 提供了Cache功能,用于临时存储查询结果,能够实现快速检索和数据管理。本文介绍Cache的相关功能说明以及使用示例。前提条件 AnalyticDB for MySQL 集群为V3.2.0及以上版本。说明 如何查看集群...

快速入门综述

快速使用AnalyticDB MySQL版2.0服务 AnalyticDB MySQL版 2.0 全面兼容MySQL协议和SQL 2003,成功购买 AnalyticDB MySQL版 2.0 后,您就可以像使用MySQL数据库一样快速使用 AnalyticDB MySQL版 2.0。创建表组 表组是一系列可发生关联的数据...

导出至自建MySQL

TABLE_PROPERTIES AnalyticDB MySQL 访问自建MySQL数据库的访问方式。url ECS实例的 主私网IP(即VPC地址)和目标库名(本文示例中为 test_adb)。查看步骤如下:登录 ECS管理控制台 并找到目标实例。在 实例详情 页签的 网络信息 区域,...

INSERT OVERWRITE SELECT

本文介绍 云原生数据仓库AnalyticDB MySQL版 表数据的高性能写入方式 INSERT OVERWRITE SELECT,包括应用场景、功能原理、注意事项、语法和异步写入应用。功能原理 INSERT OVERWRITE SELECT 会先清空分区中的旧数据,再将新数据批量写入到...

监控

HybridDB for MySQL提供实例的监控信息。您可以通过实例的各项性能指标分析实例的使用情况、统计业务趋势,及时发现以及诊断实例的相关问题。监控数据的采集频率为每5分钟采集一次。您可查询到30天内的监控数据。登录 HybridDB for MySQL ...

数据建模诊断

在倾斜中,您可以查看某个数据库中已经存在倾斜的,重新进行分布字段的选择。具体方法,请参见 结构设计。复制合理性诊断 AnalyticDB MySQL版 在创建时可以指定数据的分布方式为复制方式(DISTRIBUTED BY BROADCAST),复制会...
共有200条 < 1 2 3 4 ... 200 >
跳转至: GO
产品推荐
云服务器 安全管家服务 安全中心
这些文档可能帮助您
数据管理 云原生数据仓库AnalyticDB MySQL版 云数据库 RDS 数据库备份 DBS 弹性公网IP 短信服务
新人特惠 爆款特惠 最新活动 免费试用