API概览

BindDBResourceGroupWithUser 将资源组与数据库用户进行绑定 调用BindDBResourceGroupWithUser接口为AnalyticDB MySQL数仓版(3.0)集群的资源组绑定数据库账号。UnbindDBResourceGroupWithUser 解绑资源组和用户 调用...

导入与导出

客户端存在瓶颈,将无法最大化压测数据库,您可以通过以下两种方法查看客户端或其所在服务器负载是否存在瓶颈:通过登录 云原生数据仓库AnalyticDB MySQL控制台,单击左侧导航的 监控信息 和 诊断与优化 来查验客户端自身以及所在服务器...

备份数据库

用户可以为其数据库创建一个或多个数据备份,这些数据备份不占用数据库节点的硬盘空间,而是被存放在其他存储设备上,因此会产生单独的费用。具体费用,请参见 HybridDB for MySQL详细价格信息。HybridDB for MySQL提供两种数据库备份方式...

申请和释放公网地址

云原生数据仓库 AnalyticDB MySQL 版 集群支持VPC地址和公网地址两种类型的地址,如果需要通过公网连接集群,您需要先申请公网地址。公网和VPC网络 网络类型 说明 VPC网络 一个VPC就是一个隔离的网络环境。VPC的安全性较高,推荐您使用VPC...

通过日志服务导入至数仓版

左边文本框为日志字段名称,右边为AnalyticDB MySQL数据库表中的字段。说明 Timestamp类型的字段映射精确到秒级别。例如日志时间为2022-01-05 10:12:13.145,投递到AnalyticDB MySQL后,投递结果为2022-01-05 10:12:13。投递开始时间 配置...

为什么HybridDB for MySQL 数据库刚创建时就有磁盘...

HybridDB for MySQL 数据库在初创时,会初始化一些系统文件,也会为表空间预分配一些空白磁盘页面,因此会使用一定的磁盘空间,这些磁盘空间在用户有真实数据写入时,会被重新利用起来。

AnalyticDB MySQL 是分布式数据库,数据需要根据分布字段均匀地分布在各个后台节点才能保证尽可能高的利用资源。分布字段选择不合理,会导致写入时存在热点,降低写入性能。分区字段合理性。AnalyticDB MySQL 后台以分区为粒度进行数据存储...

基本概念

一个 AnalyticDB for MySQL 集群最多可创建2048个逻辑数据库。AnalyticDB for MySQL 文档中提到的数据库,都是指逻辑库。分片(Shard)根据分布键,将表数据水平分割后得到的子表,称为分片,英文名称为Shard。这些分片分散在若干个存储...

配置同步任务中的数据来源和去向

成功将数据导入分析型数据库MySQL版后,您就可以使用分析型数据库MySQL版进行数据分析。进入 DataWorks控制台,单击对应项目操作栏中的 数据开发。单击左侧菜单栏中的 数据开发,右键单击 业务流程 新建一个流程。右键单击 步骤2 中新建的...

查询流程和执行计划

Executor节点将数据处理的最终结果返回到客户端,或者写入 AnalyticDB MySQL版 集群的内部表以及其它外部存储系统(如OSS)中。执行计划相关概念 了解以下概念能帮助您更好地分析 AnalyticDB MySQL版 的执行计划(即物理执行计划):Stage ...

客户端及连接池

客户端连接 使用JDBC等连接器,必须指明连接的,否则无法执行;不支持游标访问;跨分区语句将会在每个分区上建立一条连接,可能导致分区的连接数成比例增加;COM_QUERY语句长度:当前限制用户SQL语句不得超过16 MB,间接要求用户的单行...

Druid连接池配置

AnalyticDB MySQL 前端接入节点使用SLB做负载均衡,客户端连接前端节点。为了将客户端请求较为均匀地发送到各个前端节点,建议连接池里有稍多一些连接,且连接保持的时间不宜太长。根据业务情况合理调整连接池配置,并确保配置生效。您可以...

数据导入性能优化

数据库服务器端虽然能够及时消费客户端发送的数据,但由于总发送量较小,导致写入TPS不满足预期。解决方法:调大单次导入的 批量插入条数 及增加 任务期望最大并发数,数据导入性能会随着导入压力的增加而线性增加。当导入的目标表存在数据...

客如云精准营销方案

方案解读:将原系统中分散使用Hive、HBase、kylin、TiDB处理的各类分析业务集中更换为 分析型数据库MySQL(AnalyticDB MySQL)中,确保实时输出分析报表。将业务库数据实时同步到 AnalyticDB MySQL 中,商户运营报表每5分钟更新一次。通过 ...

数据导入性能优化

数据库服务器端虽然能够及时消费客户端发送的数据,但由于总发送量较小,导致写入TPS不满足预期。解决方法:调大单次导入的 批量插入条数 及增加 任务期望最大并发数,数据导入性能会随着导入压力的增加而线性增加。当导入的目标表存在数据...

登录数据库

本文介绍在使用一站式数据管理功能前,如何通过DMS(新版)登录 AnalyticDB MySQL版 数据库。前提条件 已在目标 AnalyticDB MySQL版 集群中创建数据库账号。创建数据库账号的方法,请参见 创建数据库账号。操作步骤 登录 云原生数据仓库...

访问RDS MySQL数据

val dbtable="test.persons"/连接RDS MySQL数据库的账号。val user="mysql_username"/RDS MySQL数据库账号的密码。val password="mysql_password"val jdbcDF=sparkSession.read.format("jdbc").option("url",url).option("driver",...

查询并导入Tablestore数据

背景信息 Tablestore是阿里云研的NoSQL多模型数据库,支持多元索引查询。您可以在 AnalyticDB MySQL 中调用TableStore API进行数据查询,例如点查询、范围查询等。同时,支持智能选择主表、二级索引表和多元索引表,大大提升查询性能,...

通过Spark Distribution SQL Engine开发Spark SQL作业

} } } 重要 启动Spark Distribution SQL Engine时,若设置了 spark.sql.hive.metastore.version=adb,则连接地址中的数据库必须为 AnalyticDB for MySQL 中已存在的数据库,否则会默认使用 default 数据库,造成连接失败。ThriftServer ...

设置白名单

为保障 云原生数据仓库 AnalyticDB MySQL 版 集群的安全稳定,系统默认禁止所有地址访问 AnalyticDB for MySQL 集群,因此,在使用 AnalyticDB for MySQL 集群前,需为集群设置白名单,以允许外部设备访问该集群。背景信息 集群默认的白...

新建实例

HybridDB for MySQL数据库初始化需要一定时间,一般不超过20分钟,待管理控制台首页上实例运行状态显示为 运行中,即可进行后续操作。补充 如果新建实例长时间处于 创建中,一般是由于后资源不足导致的,请您更换其他可用区尝试购买。

写入与查询

先通过MySQL客户端进行验证,如果MySQL客户端显示正常,那么需要定位您使用的其他客户端软件对返回结果是否做过特殊处理。如何解决AES_ENCRYPT内置函数报错?执行以下语句,出现报错。SELECT CONVERT(AES_DECRYPT(AES_ENCRYPT('ABC123','...

创建实例

HybridDB for MySQL数据库初始化需要一定时间,一般不超过20分钟,待管理控制台首页上实例运行状态显示为 运行中,即可进行后续操作。补充 如果新建实例长时间处于 创建中,一般是由于后资源不足导致的,请您更换其他可用区尝试购买。

应用场景

云原生数据仓库AnalyticDB MySQL版 为千万家企业级客户提供了数据处理ETL、实时在线分析、核心报表、大屏和监控能力,为广大商家和消费者提供稳定的离线和在线数据服务。本文介绍 云原生数据仓库AnalyticDB MySQL版 的五个使用场景:实时数...

通过DBeaver使用Spark Distribution SQL Engine

步骤三:在DBeaver中连接并使用Spark Distribution SQL Engine 打开 DBeaver客户端,单击 数据库>新建数据库连接。在 连接到数据库 页面,选择 Apache Spark,单击 下一步。配置 Hadoop/Apache Spark 连接设置,参数说明如下:参数 说明 ...

Golang访问(2.0版)

nil { panic(err.Error())} fmt.Println(tableName)} } 开启客户端的PrepareStatement 目前AnalyticDB MySQL 2.0不支持服务端预编译,只支持在客户端使用Prepared Statement。在Go MySQL driver中开启PrepareStatement时,需要配置 ...

通过外表导入至湖仓版

示例数据说明 本文示例的RDS MySQL数据库名为 test_adb,并在该库中创建了一张名为 person 的表,示例如下:CREATE TABLE IF NOT EXISTS test_adb.person(id int,name varchar(1023),age int);向 person 表中插入数据,示例如下:INSERT ...

Hive数据导入

E-MapReduce集群业务场景为 新版数据湖,元数据类型为 自建 RDS 或 内置 MySQL,具有Hive服务,且 Hive 存储模式 为HDFS(即去勾选 数据湖存储)。具体操作,请参见 创建集群。重要 元数据类型为 DLF 统一元数据 的E-MapReduce集群,暂不...

DataWorks调度XIHE SQL

本教程将使用 orders 表作为测试数据,连接 AnalyticDB MySQL 数据库后,执行以下SQL创建测试数据表。CREATE TABLE orders(o_orderkey bigint NOT NULL COMMENT'',o_custkey int NOT NULL COMMENT'',o_orderstatus varchar NOT NULL ...

访问Hive数据

spark.hadoop.javax.jdo.option.ConnectionUserName 是 自建RDS或内置MySQL数据库账号名称。登录EMR on ECS控制台,在 集群服务 页面的Hive配置中查看 hivemetastore-site.xml 中的 javax.jdo.option.ConnectionUserName 对应的配置值。...

基于向量分析的个性化推荐系统

目前很多成功的手机App都引入了个性化推荐算法,例如,新闻类的有今日头条新闻客户端、网易新闻客户端、阿里UC新闻客户端等;电商类的有拼多多、淘宝、天猫等。分析型数据库MySQL版推出的向量分析可以帮助您实现上述个性化推荐系统。个性化...

Golang

nil { panic(err.Error())} fmt.Println(fmt.Sprintf("%s,%s,%s",id,name,unit))} } 开启客户端的PrepareStatement 在Go MySQL Driver中开启PrepareStatement时,需要配置参数 interpolateParams=true 开启客户端的PrepareStatement,如下...

查看连接信息

AnalyticDB for MySQL 集群的连接数没有限制,但与集群的规格相关。对于小规格的集群来说,连接数过多会导致资源不足,无法承载。您可以通过控制台或SQL语句查看 AnalyticDB for MySQL 数仓版(3.0)集群的连接数。前提条件 集群类型为 数...

应用场景

在基于 MySQL 数据库的系统架构下,存放着设备信息的库表,往往需要使用分库分表和相应的数据分发技术才能承担业务流量。分库分表的设计不仅增加了数据库运维人员的管理难度,也让系统架构的扩展受到了很大的限制。HybridDB for MySQL的...

表结构优化

要做好库表结构设计和优化,用户通常需要关注以下信息:数据库引擎架构 用户需要了解数据库引擎的存储和计算架构特点,才能结合业务的数据分布特征与业务场景特征,进行数据建模,从而设计出符合引擎架构特点的数据表结构。SQL特征差异 ...

权限管理

权限模型 HybridDB for MySQL的权限管理是参照MySQL的权限实现,控制登录的用户具备哪些数据库操作权限。具体用法请参见 MySQL官方文档 支持的权限粒度 HybridDB for MySQL支持下面四种级别的权限控制,细化数据库权限控制的粒度。例如,...

SQL Pattern

客户端IP 提交Pattern相关SQL的客户端IP地址。表名 SQL Pattern扫描的数据库表。创建时间 在查询时间范围内,Pattern相关SQL的最早提交时间。执行次数 在查询时间范围内,Pattern相关SQL的执行次数。如果实例出现资源水位突增的情况,用户...

查询监控图和SQL列表介绍

数据库 客户端建立连接的数据库名。用户可以使用高级搜索功能搜索出数据库变更的SQL。状态 SQL语句的执行状态,包括:已完成 运行中 失败 无 总耗时 SQL语句从提交到最终执行完成的总耗时。总耗时=排队耗时+执行计划耗时+执行耗时。排队...

C#(Mac)

根据 AnalyticDB MySQL使用流程,在 AnalyticDB MySQL 数据库中准备测试数据。create table t1(a int,s1 varchar)DISTRIBUTE BY HASH(`a`)ENGINE='CSTORE';insert into t1 values(11,'test1'),(22,'test2'),(33,'test3'),(44,'test4');...

存储空间分析

指标 说明 数据库 数据库名称。表名 表名称。空间占比 表数据量占集群总数据量的比例。计算方法:空间占比=(表的总数据量/集群总数据量)*100%。总数据量 表的总数据量。计算方法如下:方法一:总数据量=热数据量+冷数据量。方法二:总数据...
共有200条 < 1 2 3 4 ... 200 >
跳转至: GO
产品推荐
云服务器 安全管家服务 安全中心
这些文档可能帮助您
云原生数据仓库AnalyticDB MySQL版 数据库备份 短信服务 云数据库 RDS 弹性公网IP 人工智能平台 PAI
新人特惠 爆款特惠 最新活动 免费试用