从OSS批量导入导出

注意事项 要求三的DDL定义完全一致(MySQL源头、HybridDB for MySQL外表、HybridDB for MySQL存储表)。这里导入导出都是同步模式,发起导入的MySQL Client需要一直与数据库保持连接。如需要异步提交,请参见 异步提交导入任务。OSS...

DataWorks调度XIHE SQL

本教程将使用 orders 作为测试数据,连接 AnalyticDB MySQL 数据库后,执行以下SQL创建测试数据。CREATE TABLE orders(o_orderkey bigint NOT NULL COMMENT'',o_custkey int NOT NULL COMMENT'',o_orderstatus varchar NOT NULL ...

DTS同步数据到AnalyticDB MySQL时出现“modify ...

对于修改字段类型的报错提示,可以通过以下两种方式解决问题:如果同步任务是整个数据库的同步操作,可以在AnalyticDB MySQL中新建一张名不同于报错的结构和源结构保持一致,通过使用 Insert Into Select SQL语句将报错...

SQL开发编辑器

查看库表结构 在 SQL开发 页面的 库表 页签查看系统库表INFORMATION_SCHEMA、自动创建的库表(例如,通过实时数据接入同步到 AnalyticDB MySQL库表)及手动创建的库表,并可以通过下拉按钮切换。选择引擎和资源组 通过选择不同的引擎...

整体架构

存储引擎 存储引擎是基于Raft协议实现的分布式实时强一致高可用的引擎,通过数据分片和Multi-Raft实现并行,利用分层存储实现冷热分离降低成本,通过行列存储和智能索引达到很好的性能。在这三层架构之上,通过服务秒级恢复,支持跨可用区...

事务引擎介绍

HTAP(事务与分析一体化)HybridDB for MySQL事务引擎为HTAP(Hybrid Transaction/Analytical Processing)关系型数据库,可以基于一份数据进行事务(OLTP)与分析(OLAP)混合处理,免去了以往在线数据库(Operational Database)和数据...

赛盒广告精细化管理方案

解决方案 针对以上问题,阿里云通过 分析型数据库MySQL(AnalyticDB MySQL)和Quick BI制定了解决方案。方案中采用 AnalyticDB MySQL 存放业务数据,AnalyticDB MySQL 的配置为集群版16个C8节点,可支撑上万TPS(Transactions-per-second)...

Navicat Premium

本文测试了Navicat Premium 12.1.27版本与 AnalyticDB MySQL 在连通性、列举数据库、创建等方面的兼容性,并给出测试结果图。测试环境 Java MySQL Navicat Premium java version"1.8.0_161"Java(TM)SE Runtime Environment(build 1.8.0_...

数据管理

数据库列表 展示了 所属库、名、类型、存储大小、描述、创建时间 和 更新时间,且支持根据 名、存储大小、创建时间 或 更新时间 进行排序。单击目标 名,还支持查看的详细信息。序号 区域 说明 ① 信息 展示了 所属库、名...

永洪BI

AnalyticDB MySQL 支持通过永洪BI连接数据库、建等操作。操作方法 永洪BI试用地址,请参见 登录永洪BI。

通过MySQL分析实例同步至数仓版

您可以登录 AnalyticDB MySQL版 控制台,查看实例的运行状态以及RDS MySQL数据的同步状态。登录 云原生数据仓库AnalyticDB MySQL控制台。在页面左上角,选择集群所在地域。在左侧导航栏,单击 集群列表。在 数仓版(3.0)中,单击 集群类型...

账号授权

前提条件 已创建 湖仓版(3.0)集群。详情请参见 创建集群。Spark作业权限说明 提交Spark作业,需要具备以下三种权限。AliyunADBFullAccess:管理 AnalyticDB MySQL 集群的权限。...相关文档 访问RDS MySQL数据源 访问OSS数据源

库表结构优化

要做好库结构设计和优化,用户通常需要关注以下信息:数据库引擎架构 用户需要了解数据库引擎的存储和计算架构特点,才能结合业务的数据分布特征与业务场景特征,进行数据建模,从而设计出符合引擎架构特点的数据结构。SQL特征差异 ...

常见问题

在集群使用过程中,会发生数据存储、资源弹性变配,占用存储空间和弹性资源。存储空间和弹性资源都是按量付费,即先使用再按实际使用量收费,因此会产生后付费的费用。更多计费规则的详情,请参见 数仓版(3.0)计费项 和 湖仓版(3.0)...

工作负载管理介绍

AnalyticDB MySQL 集群在数据库系统中提供了工作负载管理模块,通过工作负载管对工作负载的控制,可以提高集群的整体运行状态,满足集群更精细化控制的目的。前提条件 AnalyticDB MySQL 集群需要同时满足以下条件:集群系列需为数仓版(3.0...

FineReport(2.0版)

配置项 说明 数据库 选择 MySQL。驱动器 选择 MySQL jdbc驱动。URL 分析型数据库MySQL版的连接地址,格式为:jdbc:mysql:/hostname:port。用户名 AccessKey ID。密码 Access Key Secret。完成上述参数配置后,单击 测试连接 测试连通性,...

API概览

数据库 API 标题 API概述 DescribeTables 获取信息列表 调用DescribeTables接口枚举实例指定数据库下所有列表。DescribeAllDataSource 枚举数据库列表 枚举实例下所有数据库列表、列表和列列表。DescribeSchemas 枚举实例下所有数据...

导入数据并查询

前提条件 通过以下步骤在OSS中创建存储 AnalyticDB for MySQL 数据的目录。开通OSS服务。详情请参见 开通OSS服务。创建存储空间。详情请参见 控制台创建存储空间。重要 OSS的存储空间与 AnalyticDB for MySQL 所属地域相同。创建目录。详情...

数据资产管理

说明 若首次通过DMS(新版)登录 AnalyticDB MySQL版 集群数据库来使用数据资产管理功能,您需要先完成数据库登录信息录入,登录数据库方法,请参见 登录数据库。若之前已登录过 AnalyticDB MySQL版 集群数据库且集群管控模式为 自由操作 ...

测试过程

本文介绍性能测试包含的主要步骤。构建数据结构 AnalyticDB MySQL Presto 数据初始化 构建数据 导入数据 TPC-H测试集 有关测试过程的更多信息可参见 附录:测试过程详解。

数据导入优化建议

批量和实时导入如何选择 从MaxCompute或者OSS导入HybridDB for MySQL,推荐使用 INSERT OVERWRITE SELECT 做批量导入:批量导入适合大数据量导入,性能较好。批量导入适合数据仓库语义,即导入过程中旧数据可查询,导入完成一键切换新数据...

监控

AnalyticDB for MySQL 集群中包含多个存储节点,磁盘数据使用量是指单个读写节点的最大磁盘使用量,热数据使用量是指所有读写节点的磁盘数据使用量之和。预留模式跨规格变配为弹性模式后,监控界面看到 CPU平均使用率增大,是什么原因?...

存储层弹性

每个EIU的存储性能指标详见下:指标项 最大值 CPU 24核 36核 支持的最大热数据存储空间 4 TB IOPS 16800~50000 吞吐量(MB/s)350MB/s 在高吞吐的写入场景和大量数据扫描的查询场景,EIU资源有可能出现IO和CPU瓶颈。您可以通过增加EIU的...

性能版Spark全密态计算引擎使用示例

AnalyticDB MySQL 湖仓版(3.0)高性能版的Spark全密态计算引擎,在基础版Spark全密态引擎能力的基础上,支持Parquet模块化加密功能,且兼容社区版Spark、Hadoop、Hive等计算引擎,在保证数据传输与存储过程安全的同时,提升了数据处理效率...

过滤条件不下推

filter_not_pushdown_columns=[test01.table01:id|product]*/示例2:以3.1.4及以上的内核版本为例,当前查询,包含数据库 test01 的 table01 中字段 id、product,数据库 test02 的 table03 中字段 key 的过滤条件不会下推。...

备份数据库

用户可以为其数据库创建一个或多个数据备份,这些数据备份不占用数据库节点的硬盘空间,而是被存放在其他存储设备上,因此会产生单独的费用。具体费用,请参见 HybridDB for MySQL详细价格信息。HybridDB for MySQL提供两种数据库备份方式...

通过Spark SQL读写Delta外表

Delta是一种可以基于OSS对象存储数据格式,支持UPDATE、DELETE和INSERT操作。AnalyticDB for MySQL 湖仓版(3.0)和Delta表格式进行了整合,您可以通过Spark SQL读写Delta外表。本文主要介绍如何通过Spark SQL读写Delta外表。前提...

什么是云原生数据仓库AnalyticDB MySQL版

无论是数据湖中的非结构化或半结构化数据,还是数据库中的结构化数据,您都可使用 AnalyticDB MySQL 构建企业的数据分析平台,同时完成高吞吐离线处理和高性能在线分析,实现降本增效。AnalyticDB MySQL视频简介 产品系列 云原生数据仓库...

概述

TPC-H由TPC委员会制定发布,用于评测数据库的分析查询能力。TPC-H查询包含八张数据和二十二条复杂SQL查询,大多数查询包含多Join、子查询和Group By等。更多信息,请参见 TPC-H测试集。说明 本文的TPC-H的实现基于TPC-H的基准测试,并...

Flink数据导入

已在目标 AnalyticDB MySQL版 集群中创建数据库和数据,用于保存需要写入的数据。数据库和数据的创建方法,请参见 CREATE DATABASE 和 CREATE TABLE。说明 本文示例中创建的数据库名称为 tpch,建库语句如下:CREATE DATABASE IF NOT ...

Spark SQL创建C-Store

AnalyticDB MySQL 支持使用Spark SQL创建C-Store,本文主要介绍使用Spark SQL创建C-Store的语法、示例以及数据类型的映射关系。背景信息 AnalyticDB MySQL Spark SQL创建C-Store的语法与开源社区Spark SQL的建表语法存在差异,...

作业开发入门概述

应用场景 当 AnalyticDB MySQL 湖仓版(3.0)集群的存储预留资源为0 ACU时,无法创建 AnalyticDB MySQL,您可以通过Spark SQL和XIHE BSP SQL方式创建外表并查询外表数据。作业开发流程概述 您可以选择Spark SQL或XIHE BSP SQL任意一种...

结构设计

本文介绍如何设计 AnalyticDB for MySQL 的表结构(包括选择表类型、分布键、分区键、主键和聚集索引键等),从而实现表性能的优化。选择表类型 AnalyticDB for MySQL 支持复制表和普通表两种类型。在选择表类型时,需要注意如下几点:复制...

应用场景

计算存储资源弹性 采用计算存储分离架构,计算资源和存储资源按需弹性扩展,实现了更精细化的资源利用和更低成本投入。精准营销 该场景通过实时的数据统计,监测不同渠道用户的增长、活跃、留存状况,让企业快速分析出投资回报率。提高营销...

XUANWU_V2引擎介绍(邀测中)

本文为您介绍 云原生数据仓库 AnalyticDB MySQL引擎(XUANWU_V2)和相关组件(Compaction Service)的使用方法。前提条件 满足以下两个条件的集群支持XUANWU_V2引擎:产品系列为 湖仓版(3.0)。内核为3.2.0及以上版本。说明 如何...

通过Logstash写入数据到AnalyticDB MySQL 2.0

但经过测试发现,在日志量非常大的情况下,通过jdbc方式写入分析型数据库MySQL版的性能较低,并且非常消耗CPU的资源(因为jdbc是单条记录写入的方式)。为此,我们优化了一个基于jdbc的Logstash output plugin插件,请参见 logstash-ouput-...

DMS调度XIHE SQL

背景信息 挑战和诉求:事件调度 传统的数据库事件调度(如MySQL的事件调度器Event Scheduler)虽然功能强大,但在使用过程中仍发现一些不足:门槛高:用户需要掌握事件定义的特殊SQL语法(CREATE EVENT、ALTER EVENT),无法通过简单的界面...

从MaxCompute批量导入导出

part_export_test_external_table select*from hybriddb_part_export_test where ds='20170101' 注意事项 要求三的DDL定义完全一致(MaxCompute源、HybridDB for MySQL外表、HybridDB for MySQL存储表)。公共云VPC网络不支持这种外表...

功能优势

分析型数据库MySQL版向量分析功能在通用性、性能优化和产品化上与普通向量检索系统相比有以下优势。高维向量数据的高准度和高性能 以典型的人脸512维向量为例,分析型数据库MySQL版向量分析提供百亿向量100 QPS、50毫秒响应时间(RT)约束...

分区设计

的数据将拆解成多个数据分区独立存储,通常的设计原则是:主键(Primary Key)单实例数据库不要求一定要有主键,但是对于分布式数据库,主键则是必须的,以保证一行数据是全局唯一的,避免迁移过程出现问题。如果用户没有特殊的性能...
共有200条 < 1 2 3 4 ... 200 >
跳转至: GO
产品推荐
云服务器 安全管家服务 安全中心
这些文档可能帮助您
对象存储 文件存储 CPFS 云原生数据仓库AnalyticDB MySQL版 云数据库 RDS 弹性公网IP 短信服务
新人特惠 爆款特惠 最新活动 免费试用