通过一键建仓同步至数仓版
数据库名称 从下拉列表中选择目标 AnalyticDB MySQL 数据库名。表名 从下拉列表中选择目标 AnalyticDB MySQL 表名。账号名称 目标 AnalyticDB MySQL 中创建的 数据库账号。账号密码 填写账号名称对应的密码。字段映射 系统自动提取日志服务...
通过DataWorks导入
操作步骤 配置同步的源端数据库读插件。具体操作，请参见 HDFS Reader。配置同步的目标端数据库写插件。具体操作，请参见 AnalyticDB for MySQL 3.0 Writer。配置同步任务。具体操作，请参见 通过向导模式配置离线同步任务。
通过DataWorks导入数据
操作步骤 配置同步的源端数据库读插件。具体操作，请参见 Kafka Reader。配置同步的目标端数据库写插件。具体操作，请参见 AnalyticDB for MySQL 3.0 Writer。配置同步任务。具体操作，请参见 通过向导模式配置离线同步任务。
通过DataWorks导入数据
操作步骤 配置同步的源端数据库读插件。具体操作，请参见 DRDS Reader。配置同步的目标端数据库写插件。具体操作，请参见 AnalyticDB for MySQL 3.0 Writer。配置同步任务。具体操作，请参见 通过向导模式配置离线同步任务。
产品和业务限制
限制项 描述 例外申请方式 购买分析型数据库MySQL版的限制 账户余额大于等于500元现金 请联系技术支持 开通分析型数据库MySQL版的用户限制 用户需实名认证 无 可创建的最大分析型数据库MySQL版数 3个 联系技术支持申请更多 单个分析型数据...
AnalyticDB MySQL 2.0数据导入
MaxCompute中已经没有原始数据，原始数据只存在于 AnalyticDB for MySQL 2.0集群的数据库中，可以使用两种数据迁移方式将 AnalyticDB for MySQL 2.0集群中的数据导入到 数仓版（3.0）。具体操作，请参见 数据迁移。准备工作 了解 ...
聚合支付方案
解决方案 阿里云通过多款云数据库产品为利楚扫呗制定以下解决方案：方案解读：使用DRDS分库分表将数据库进行水平拆分，有效解决订单的存储上限及业务高峰时的高并发压力，借助了DRDS对MySQL语法的高度兼容能力，轻松从原来单体数据库升级到...
通过外表导入至数仓版
AnalyticDB for MySQL 支持通过外表读取并导入MaxCompute数据。通过外表导入数据可以最大限度地利用集群资源，实现高性能数据导入。您也可以进一步选择通过Tunnel方式和Storage API两种方式访问并导入MaxCompute数据，相较于Tunnel方式，...
优化建议
对底层MySQL建立合适的索引，这一点看似与分布式数据库无关，但却是最重要的。分布式数据库的高性能依赖于底层数据库的高性能，而对底层数据库性能来说，建立需要的索引是重要的环节；确保语句能正确使用到索引，例如查询条件能被索引完全...
通过Spark SQL访问MySQL数据
AnalyticDB MySQL 湖仓版（3.0）支持提交Spark SQL作业，您可以通过View或Catalog两种方式访问自建MySQL数据库或云数据库RDS MySQL、云原生数据库 PolarDB MySQL。本文以RDS MySQL为例，介绍如何通过Spark SQL访问RDS MySQL数据。前提条件 ...
Spark SQL执行方式
AnalyticDB for MySQL 湖仓版（3.0）支持使用批处理和交互式两种方法执行Spark SQL，两种执行方式都直接与 AnalyticDB for MySQL 的元数据服务连通，可以读写 AnalyticDB for MySQL 的库表。本文介绍批处理和交互式两种执行方式的注意事项...
导入与导出
由于 AnalyticDB MySQL 中不允许数据库名、表名或者列名中含有划线（-），为保证数据同步成功，系统会将中划线（-）映射为下划线（_）。如果在数据同步过程中遇到其他因数据库名、表名或者列名造成的同步失败（例如表名中含有空格、中文等...
整体架构
AnalyticDB MySQL版 是基于数据库大数据一体化的理念和趋势，在工程上深度打磨出的云原生数据仓库。技术架构 AnalyticDB MySQL版 采用云原生架构，计算存储分离、冷热数据分离，支持高吞吐实时写入和数据强一致，兼顾高并发查询和大吞吐批...
设置报警规则
您可以为 AnalyticDB MySQL版 集群设置报警规则，实时监控集群CPU使用率、磁盘使用率、IOPS使用率、查询耗时以及数据库连接数。系统在监控数据满足条件时，会通知报警联系组中的所有联系人。背景信息 云原生数据仓库AnalyticDB MySQL版 ...
监控
本文汇总了 AnalyticDB for MySQL 中监控的常见问题及解决方法。说明 当常见问题场景中未明确产品系列时，表明该问题仅适用于 AnalyticDB MySQL 数仓版（3.0）。常见问题概览 如何监控数仓版（3.0）预留集群的磁盘水位？如何查看热数据和冷...
通过Spark SQL读写C-Store表数据
AnalyticDB MySQL 湖仓版（3.0）集群支持通过Spark SQL在线或离线读写C-Store表数据。本文主要介绍通过Spark SQL在线或离线读写C-Store表数据的具体方法。前提条件 湖仓版（3.0）集群的存储预留资源需大于0 ACU。详情请参见 创建湖仓版集群...
新功能发布记录
Spark应用访问公网配置说明 通过Spark SQL访问MySQL数据 湖仓版（3.0）支持通过Spark SQL访问自建MySQL数据库或阿里云MySQL系列的数据库。通过Spark SQL访问MySQL数据 通过Spark SQL读Lindorm数据 湖仓版（3.0）支持通过Spark SQL访问...
调优集群性能
语义错误 SQL符合 云原生数据仓库 AnalyticDB MySQL 版 官方对SQL语法的定义，但在语义检查时，发现数据库对象错误，在语义分析阶段报错。例如，表名错误、列不存在、GROUP BY字段缺失、函数参数类型错误等。集群内部问题导致查询失败 查询...
BUILD
在该过程中会构建索引、清理冗余数据、执行异步DDL任务等，将数据从写优化转变为读优化。注意事项 BUILD期间，不能执行 INSERT OVERWRITE SELECT 导入任务，需等待BUILD任务结束才能执行。功能说明 BUILD 命令可以对实时写入的数据及其涉及...
通过外表导入至湖仓版
在 AnalyticDB MySQL 中创建数据库，示例如下：CREATE DATABASE adb_demo;在 AnalyticDB MySQL 中创建表用于存储从MaxCompute中导入的数据，示例如下：说明 新表和步骤3中创建的外表的字段顺序和字段数量需要一致，字段类型兼容。CREATE ...
通过Spark SQL读Lindorm数据
AnalyticDB MySQL 湖仓版（3.0）支持通过Spark SQL访问Lindorm数据库。本文主要介绍如何通过Spark SQL访问Lindorm中的Hive表和宽表的数据。前提条件 已创建Lindorm单可用区实例。具体操作，请参见 创建实例。重要 Lindorm实例需开通宽表...
通过Spark Distribution SQL Engine开发Spark SQL作业
} } } 重要 启动Spark Distribution SQL Engine时，若设置了 spark.sql.hive.metastore.version=adb，则连接地址中的数据库必须为 AnalyticDB for MySQL 中已存在的数据库，否则会默认使用 default 数据库，造成连接失败。ThriftServer ...
Serverless存储层
云原生数据仓库AnalyticDB MySQL版 采用计算存储分离的架构，通过云原生技术实现了池化，提供了Serverless存储的能力。Serverless架构下的存储资源支持独立弹性伸缩，同时提供了按需横向弹性（扩展存储节点数）和按需纵向弹性（升配存储...
访问RDS MySQL数据源
您可以通过ENI和SSL链路两种方式访问RDS MySQL数据，SSL链路访问RDS MySQL数据时可以加密网络连接，保证数据的安全性，对比ENI访问方式更加安全。本文主要介绍通过ENI和SSL链路访问RDS MySQL数据的具体方法。前提条件 AnalyticDB MySQL 湖...
基础版Spark全密态计算引擎使用示例
数据准备 本文示例的RDS MySQL数据库名为 adb，并在该库中创建了一张名为 customer 的表，示例如下：CREATE DATABASE IF NOT EXIST adb;CREATE TABLE IF NOT EXISTS adb.customer(id int,name varchar(1023),address varchar(1023),age int...
绑定或解绑RAM用户与数据库账号
RAM用户与AnalyticDB MySQL数据库普通账号映射场景 SQL编辑器：使用RAM用户登录SQL编辑器，需要映射成 AnalyticDB MySQL 数据库普通账号进行库表鉴权。JDBC连接方式：使用 AnalyticDB MySQL 数据库普通账号登录，需要映射成RAM用户进行外表...
FineBI 6.0
本文测试了FineBI 6.0与 AnalyticDB MySQL 在连通性、列举表、查看表数据等方面的...测试范围 连接FineBI 说明 此处应填写MySQL数据库的连接信息，而不是AnalyticDB for MySQL数据库连接信息。新建数据库连接 列举表 查看表结构 查看表数据
绑定或解绑RAM用户与数据库账号
RAM用户与AnalyticDB MySQL数据库普通账号映射场景 SQL编辑器：使用RAM用户登录SQL编辑器，需要映射成 AnalyticDB MySQL 数据库普通账号进行库表鉴权。JDBC连接方式：使用 AnalyticDB MySQL 数据库普通账号登录，需要映射成RAM用户进行外表...
查看监控信息
磁盘IO吞吐量 MB 监控如下信息：计算写吞吐 计算读吞吐 存储写吞吐 存储读吞吐 磁盘IOPS 数值 监控如下信息：计算写磁盘IOPS 计算读磁盘IOPS 存储写磁盘IOPS 存储读磁盘IOPS 存储节点磁盘IO使用率%监控磁盘的平均IO使用率。存储节点磁盘IO...
XIHE BSP SQL开发
使用限制 不支持通过XIHE BSP方式写Hudi表。不支持通过XIHE BSP方式读写Delta表。开发XIHE BSP作业 您可以采用以下任意一种方式开发XIHE BSP作业。使用SQL开发编辑器提交XIHE BSP作业 在SQL开发页面，选择Job型资源组和XIHE引擎，可提交...
名称解释
在购买HybridDB for MySQL数据库时，需要搭配阿里云服务器ECS使用，目前HybridDB for MySQL只支持阿里云内网访问，在地域选择时需要与ECS相同。可用区 可用区（AZ）是指在同一地域下（如华东1（杭州）地域），电力、网络隔离的物理区域，...
Spark
本文汇总了使用 AnalyticDB MySQL Spark的常见问题及解决方案。常见问题概览 如何查看Spark应用信息？如何解决提交Spark应用时，出现User%s do not have right permission[*]to resource[*]报错？如何解决运行Spark应用时，出现No space ...
访问Elasticsearch数据源
本文介绍如何使用 AnalyticDB for MySQL 湖仓版（3.0）Spark通过ENI网络读取Elasticsearch数据源。前提条件 已创建 AnalyticDB MySQL 湖仓版（3.0）集群。具体操作，请参见 创建集群。已创建Job型资源组。具体操作，请参见 新建资源组。已...
通过Logstash导入数仓版
Logstash是开源的服务器端数据处理管道，能够同时从多个数据源采集数据，然后对数据进行转换，并将数据写入指定的存储中。AnalyticDB MySQL 完全兼容MySQL，您可以将Logstash Input插件支持的任一数据源中的数据写入 AnalyticDB MySQL。...
Spark应用配置参数说明
云原生数据仓库 AnalyticDB MySQL 版（AnalyticDB for MySQL）Spark配置参数跟开源Spark中的配置参数基本一致。本文介绍 AnalyticDB for MySQL 与开源Spark用法不一致的配置参数。使用说明 Spark应用配置参数用于配置和调整Spark应用程序的...
HybridDB for MySQL设计和实践优化建议
当用户在使用HybridDB for MySQL进行数据库设计和实践的过程中，我们有如下建议：分区键的选择 分区键是数据库控制数据分布的维度，以该条件进行等值查询，查询范围只会限制在一个存储分区上，通常选择查询最频繁的列，或数据分布最均匀的...
设置白名单
为了数据库的安全稳定，您应该将需要访问数据库的 IP 地址或者 IP 段加入白名单，您最多设置1000个 IP 地址。登录 HybridDB for MySQL 管理控制台。在管理控制台左上方选择实例所在 地域。找到目标实例，单击实例右侧的 管理 选项。在左侧...
永洪BI
完成上述参数配置后，单击 测试连接 进行连通性测试，系统提示测试成功后，即可连接至指定的 AnalyticDB MySQL 数据库。使用永洪BI 通过永洪BI连接 AnalyticDB MySQL 集群后，您就可以获取 AnalyticDB MySQL 中的数据，然后通过永洪BI制作...
设置白名单
为了数据库的安全稳定，您应该将需要访问数据库的 IP 地址或者 IP 段加入白名单，您最多设置1000个 IP 地址。登录 HybridDB for MySQL 管理控制台。在管理控制台左上方选择实例所在 地域。定位目标实例，单击实例右侧的 管理 选项。在左侧...
创建数据库账号
登录 云原生数据仓库AnalyticDB MySQL控制台。在页面左上角，选择集群所在地域。在左侧导航栏，单击 集群列表。在 湖仓版（3.0）页签，单击目标集群ID。在左侧导航栏，单击 账号管理。单击 创建账号。在 创建账号 面板，设置相关参数。参数...
- 产品推荐
- 这些文档可能帮助您