通过Spark Distribution SQL Engine开发Spark SQL作业

} } } 重要 启动Spark Distribution SQL Engine时,若设置了 spark.sql.hive.metastore.version=adb,则连接地址中的数据库必须为 AnalyticDB for MySQL 中已存在的数据库,否则会默认使用 default 数据库,造成连接失败。ThriftServer ...

计算层弹性

云原生数据仓库AnalyticDB MySQL版 的计算层具备良好的弹性,提供分时弹性和按需弹性两种功能。AnalyticDB MySQL 的存储计算分离架构,让计算节点与有状态的存储节点解耦,成为无状态的节点。从而计算节点的扩缩不再涉及数据状态的迁移,再...

Serverless存储层

云原生数据仓库AnalyticDB MySQL版 采用计算存储分离的架构,通过云原生技术实现了池化,提供了Serverless存储的能力。Serverless架构下的存储资源支持独立弹性伸缩,同时提供了按需横向弹性(扩展存储节点数)和按需纵向弹性(升配存储...

Jupyter交互式作业开发

AnalyticDB MySQL Spark支持使用Docker镜像快速启动Jupyter交互式开发环境,帮助您使用本地Jupyter Lab连接 AnalyticDB MySQL Spark,从而利用 AnalyticDB MySQL 的弹性资源进行交互测试和计算。前提条件 已创建 AnalyticDB MySQL 湖仓版...

应用场景

该场景可实现:在离线一体化 支持数据实时增删改、具备在线分析和ETL计算一体化,实现大数据与数据库的融合。通过资源组隔离让在离线计算任务不相互影响,保证业务稳定运行。计算存储资源弹性 采用计算存储分离架构,计算资源和存储资源按...

通过LOAD DATA导入至数仓版

连接AnalyticDB for MySQL集群,通过 CREATE DATABASE 和 CREATE TABLE,在 adb_demo 数据库下创建表 test 表,从本地文件导入的数据将存储在 test 表中。CREATE TABLE test(a int NOT NULL DEFAULT '0',b varchar NOT NULL,PRIMARY KEY(a)...

通过数据同步功能同步SLS至湖仓版(推荐)

AnalyticDB for MySQL 湖仓版(3.0)支持新建SLS同步链路,通过同步链路从指定时间位点将日志服务LogStore中的数据实时同步至 湖仓版(3.0),以满足近实时产出、全量历史归档、弹性分析等需求。本文介绍如何添加SLS数据源,新建SLS同步...

Navicat(2.0版)

本文介绍如何通过Navicat连接和管理 云原生数据仓库AnalyticDB MySQL版 2.0集群。前提条件 开始使用Navicat for MySQL之前,需要先安装Navicat ...右键单击数据库名 打开数据库,打开数据库后,您就可以利用Navicat for MySQL进行数据管理。

基于代价的SQL优化

在海量数据的复杂分析场景下,查询效率变得尤为重要。实现复杂查询的实时分析,是 AnalyticDB MySQL 的核心优势之一。AnalyticDB MySQL 采用基于代价的查询优化器(Cost-Based Optimizer),以获得最佳的查询执行计划,提高查询效率。...

从RDS原生实时同步

HybridDB for MySQL原生支持直接从RDS实时同步数据,用户可以快速地构建起RDS到HybridDB for MySQL的同步关系,轻松实现数据流转和复杂查询加速。前提条件 必须使用阿里云主账户执行该操作。该操作只支持阿里云RDS for MySQL(5.6版本)...

通过Logstash导入数仓版

Logstash是一个开源的服务器端数据处理管道,起初用于将日志类数据写入ES中。随着开源社区的不断发展,Logstash可以同时从多个数据源获取数据,并对其进行转换,然后将其发送到您需要的“存储端”。以日志数据为例,由于 AnalyticDB MySQL ...

存储层弹性

AnalyticDB MySQL 的存储节点除了进行数据存储,还提供数据写入、数据查找和数据扫描等能力。如果读写性能出现瓶颈需要到控制台手动扩容弹性IO资源。弹性IO资源(Elastic IO Unit,简称EIU)是弹性模式集群版(新版)衡量实例存储性能的...

元数据库数据字典

示例如下:SELECT state FROM information_schema.current_job WHERE table_schema='db_name' AND table_name='table_name' ORDER BY start_time DESC LIMIT 10 SCHEMATA SCHEMATA表提供了关于数据库的信息。FIELD TYPE ALLOW_NULL PK ...

不同编程语言中如何开启客户端的PrepareStatement

AnalyticDB MySQL 数据库自身具备强大的查询计算能力和计划缓存功能,无需依靠服务器端预处理语句获得大部分性能优势。AnalyticDB MySQL 数据库不建议使用服务器端预编译。大部分开发语言中支持通过配置开启客户端预编译(PrepareStatement...

使用XIHE BSP SQL进行作业开发

本文介绍如何使用XIHE BSP SQL作业开发方式,将ODS层表数据通过DWD层过滤后,写入ADS层。前提条件 已创建 AnalyticDB MySQL 湖仓版(3.0)集群,且集群至少有16 ACU的计算预留资源和24 ACU的存储预留资源。详情请参见 创建湖仓版集群。已...

基本SET语句

autocommit 由0转1:若用户通过 set autocommit=0 开启一个事务,稍后未进行提交而通过 set autocommit=1 提交一个事务,那么分布式数据库将隐式地帮助用户向所有分区发送一个 set autocommit=1,这条语句的特性与普通 commit 相同。...

通过外表导入至湖仓版

在 AnalyticDB MySQL 中创建数据库,示例如下:CREATE DATABASE adb_demo;在 AnalyticDB MySQL 中创建表用于存储从MaxCompute中导入的数据,示例如下:说明 新表和步骤3中创建的外表的字段顺序和字段数量需要一致,字段类型兼容。CREATE ...

通过外表导入至数仓版

AnalyticDB for MySQL 支持通过外表读取并导入MaxCompute数据。通过外表导入数据可以最大限度地利用集群资源,实现高性能数据导入。您也可以进一步选择通过Tunnel方式和Storage API两种方式访问并导入MaxCompute数据,相较于Tunnel方式,...

通过Logstash导入数仓版

Logstash是开源的服务器端数据处理管道,能够同时从多个数据源采集数据,然后对数据进行转换,并将数据写入指定的存储中。AnalyticDB MySQL 完全兼容MySQL,您可以将Logstash Input插件支持的任一数据源中的数据写入 AnalyticDB MySQL。...

DBVisualizer(2.0版)

Database Server AnalyticDB for MySQL 2.0数据库的连接地址。Database Port 数据库对应的端口号。Database 数据库的名字。Database Userid 阿里云账号或者已授权RAM子账号的Access Key ID。Database Password 阿里云账号或者已授权RAM子...

实例规格

本文介绍HybridDB for MySQL的实例规格。HybridDB for MySQL提供两种实例规格族:高性能事务引擎:存储引擎为事务引擎TokuDB,更多内容请参见 事务引擎介绍。高性能分析引擎:存储引擎为分析引擎CStore。规格族 规格 描述 适用场景 高性能...

湖仓版作业调度

如果通过RAM用户(子账号)登录,使用作业调度功能需要满足以下三个条件:已配置 AnalyticDB MySQL 的AliyunServiceRoleForAnalyticDBForMySQL角色。配置方法,请参见 AliyunServiceRoleForAnalyticDBForMySQL介绍。已创建 AnalyticDB ...

查看监控信息

数据库监控 页面,您可以选择查询时间后单击右上角 查询。监控项说明 湖仓版(3.0)集群的监控分为集群监控和资源组监控。集群监控项说明 重要 当任一健康状态为风险或不可用时,请联系技术支持。监控项 单位 说明 实例监控 实例接入...

调优集群性能

语义错误 SQL符合 云原生数据仓库 AnalyticDB MySQL 版 官方对SQL语法的定义,但在语义检查时,发现数据库对象错误,在语义分析阶段报错。例如,表名错误、列不存在、GROUP BY字段缺失、函数参数类型错误等。集群内部问题导致查询失败 查询...

连接集群

背景信息 DMS是阿里云提供的图形化数据管理工具,可用于管理关系型数据库和NoSQL数据库,支持数据管理、SQL操作、数据方案(数据导入/导出、数据库克隆等)、性能与优化、安全审计等功能。使用DMS连接云原生数据仓库AnalyticDB MySQL版 ...

API概览

DescribeAdbMySqlTables 查询数据库下所有表信息 枚举AnalyticDB MySQL湖仓版(3.0)集群指定数据库下所有表信息。DescribeAdbMySqlSchemas 查询所有数据库列表 枚举指定AnalyticDB MySQL湖仓版(3.0)集群下所有数据库列表。GetViewDDL ...

到期或欠费的影响(2.0版)

数据库类型 数据库状态 包年包月数据库 数据库到期后第1天到第7天,数据库处于锁定状态,无法被访问。数据库到期后第8天,数据库的计算资源被释放,数据不再保留。按量付费数据库 阿里云账号欠费后,该账号下所有按量付费数据库将会变成...

Tableau

Tableau是一款操作简单且功能强大的报表分析工具,支持连接 AnalyticDB MySQL 数据源。在Tableau中连接 AnalyticDB MySQL 后,可以通过拖放或单击的方式快速创建智能视图和仪表板。前提条件 安装 Alibaba AnalyticDB for MySQL connector。...

手动续费(2.0版)

包月套餐数据库有到期时间,如果到期未续费,将导致业务中断甚至数据丢失,详情请参见 欠费或到期对数据库的影响。在包月套餐数据库未到期或者到期后7天内,您可以手动给数据库续费,延长数据库的使用时间。按量付费数据库没有到期时间,不...

登录数据库

参数 说明 数据库类型 默认为 ADB3.0-MySQL,无需选择。实例地区 默认为当前实例所在地域,无需选择。说明 若您需要登录其他地域下的 AnalyticDB MySQL 集群,从下拉列表中选择目标集群的所在地域即可。实例ID 默认为当前集群的集群ID,...

SHOW(2.0版)

查询用户的数据库列表。指定 EXTRA 参数,输出关于数据库的更多信息,例如创建者ID、数据库连接信息等。SHOW DATABASES 查询用户的数据库列表。指定 EXTRA 参数,输出关于数据库的更多信息,例如创建者ID、数据库连接信息等。SHOW ...

AnalyticDB MySQL 2.0数据导入

参数 说明 database_name AnalyticDB for MySQL 2.0集群的数据库名称。catalog_name 数仓版(3.0)外部数据目录的名称。by pangu 对于MaxCompute中已经没有原始数据的场景,从 AnalyticDB for MySQL 2.0本地同步数据,需要在命令最后指定 by...

常见问题

通过 云原生数据仓库AnalyticDB MySQL控制台 湖仓版集群的数据同步和数据迁移功能实现数据入湖,会产生以下费用:AnalyticDB for MySQL 的ACU弹性资源费用,计费项详情,请参见 湖仓版(3.0)计费项。OSS 的存储费用、GET类请求次数以及PUT...

变更配置计费规则(2.0版)

包年包月(包月套餐)合同期内变配 升级数据库配置所需费用=(升级后数据库每天的价格-升级前数据库每天的价格)×升级当天到服务到期日的剩余天数。若升级当天至服务到期日的剩余天数小于365天,则升级后数据库每天的价格为包月价格。若...

名称解释

用户需要在开通HybridDB for MySQL数据库时指定,购买实例后不支持更改。在购买HybridDB for MySQL数据库时,需要搭配阿里云服务器ECS使用,目前HybridDB for MySQL只支持阿里云内网访问,在地域选择时需要与ECS相同。可用区 可用区(AZ)...

网络类型

网络类型和访问方式 分析型数据库MySQL版支持的网络类型有两种:经典网络和 专有网络(Virtual Private Cloud 以下简称VPC)。经典网络:IP地址由阿里云统一分配,配置简便,使用方便,适用于对操作易用性要求比较高的场景。所有经典网络...

计费方式(2.0版)

包月套餐 也称为预付费,即在新建数据库时支付费用。适合长期需求,价格比按量付费更实惠,且购买时长越长,折扣越多。包年包月数据库到期后自动释放,无需手动释放。若用户在合同期内退订包年包月的数据库,需遵循 用户提前退订产品之退款...

AnalyticDB MySQL数仓版(3.0)使用流程

云原生数据仓库AnalyticDB MySQL版(简称ADB,原分析型数据库MySQL版)是云端托管的PB级高并发实时数据仓库,是专注于服务OLAP领域的数据仓库。本指南将指引您完成一次 AnalyticDB MySQL版 集群创建及使用。数仓版(3.0)快速入门视频指导 ...

按量付费转包年包月(2.0版)

用户可以根据需求将按量付费类型的数据库转变为包年包月的计费方式。登录 分析型数据库MySQL版控制台。在控制台左上方选择分析型数据库MySQL版所属地域。单击目标数据库右侧的 按量转包月。在 确认订单 页面,设置 购买时长,勾选《分析型...

有数BI

您可以在 云原生数据仓库AnalyticDB MySQL控制台 的 集群管理 页面,复制公网地址。端口 3306 用户名 AnalyticDB MySQL版 集群中创建的账号:高权限账号 普通账号 您可以在 云原生数据仓库AnalyticDB MySQL控制台 的 账号管理 页面,查看...
共有200条 < 1 2 3 4 ... 200 >
跳转至: GO
产品推荐
云服务器 安全管家服务 安全中心
这些文档可能帮助您
数据库备份 DBS 云原生数据仓库AnalyticDB MySQL版 云数据库 RDS 云数据库 Redis 版 弹性公网IP 短信服务
新人特惠 爆款特惠 最新活动 免费试用