使用kettle将本地数据导入AnalyticDB MySQL 2.0
本文以Excel为例，介绍如何通过kettle将本地Excel数据迁移...相关信息 使用DTS同步RDS MySQL数据 使用数据集成迁移数据至分析型数据库MySQL版 使用kettle将本地数据导入分析型数据库MySQL版 在程序中通过AnalyticDB MySQL版Client高效写入数据
设置可维护时间段
在集群可维护时间段内，对数据库的访问、账号管理、数据库管理以及IP白名单设置默认不会受到影响。在集群可维护时间段内，写入和查询类操作可能会产生小概率抖动，请确保应用程序具有重试机制。在集群可维护时间段内，集群可能会发生连接闪...
创建表
AnalyticDB的表分为维度表和普通表，详细介绍请参见 名词解释。您可以通过DMS页面或者DDL语句创建表。通过DMS页面创建维度表 登录 分析型数据管理控制台。...相关文档 AnalyticDB系统保留字 列的最佳实践 AnalyticDB与MySQL数据类型对比
Spark应用性能诊断
AnalyticDB for MySQL 湖仓版（3.0）推出Spark应用诊断功能，若您提交的Spark应用存在性能问题，您可以根据诊断信息快速定位和分析性能瓶颈问题，优化Spark应用，提高问题解决效率。本文主要介绍如何进行Spark应用性能诊断以及性能诊断的...
通过数据同步功能同步SLS数据至数仓版
目标库表配置 的参数说明如下：参数名称 参数说明 库名 AnalyticDB for MySQL 集群 的数据库名称。表名 AnalyticDB for MySQL 集群的数据表名称。源端数据预览 单击 点击查看最近10条LogStore数据，可以查看源端SLS的10条数据。Schema字段...
通过数据同步功能同步SLS数据至湖仓版
目标库表配置 的参数说明如下：参数名称 参数说明 库名 AnalyticDB for MySQL 集群 的数据库名称。表名 AnalyticDB for MySQL 集群的数据表名称。源端数据预览 单击 点击查看最近10条LogStore数据，可以查看源端SLS的10条数据。Schema字段...
使用数据集成迁移数据到AnalyticDB MySQL 2.0
支持的数据源类型 数据集成提供丰富的数据源支持，如下所示：文本存储（FTP/SFTP/OSS/多媒体文件等）数据库（RDS/DRDS/MySQL/PostgreSQL等）NoSQL（Memcache/Redis/MongoDB/HBase等）大数据（MaxCompute/云原生数据仓库AnalyticDB MySQL版 ...
访问MongoDB数据源
本文介绍如何使用 AnalyticDB MySQL版 湖仓版（3.0）Spark访问云数据库MongoDB数据。前提条件 已创建AnalyticDB MySQL湖仓版（3.0）集群。具体操作，请参见 创建湖仓版（3.0）集群。已创建数据库账号。如果您是通过阿里云账号访问，只需...
支持的数据源
数据入仓 类别 数据源 导入方式 产品系列 文档链接 数据库 RDS MySQL 外表 数仓版（3.0）通过外表导入至数仓版 湖仓版（3.0）通过外表导入至湖仓版 DTS 数仓版（3.0）通过DTS导入数据 湖仓版（3.0）通过DTS导入数据 DataWorks 数仓版（3.0...
存储空间分析
指标 说明 数据库 数据库名称。表名 表名称。空间占比 表数据量占集群总数据量的比例。计算方法：空间占比=(表的总数据量/集群总数据量)*100%。总数据量 表的总数据量。计算方法如下：方法一：总数据量=热数据量+冷数据量。方法二：总数据...
SQL WorkBench/J（2.0版）
本文介绍如何通过SQL WorkBench/J工具连接和管理 云原生数据仓库AnalyticDB MySQL版 2.0集群。前提条件 开始使用SQL WorkBench/J之前，您需要先完成以下准备工作。...成功连接AnalyticDB for MySQL 2.0数据库后，您就可以对数据库进行管理。
Tableau（2.0版）
参数 说明 服务器 分析型数据库MySQL版的连接地址。端口号 连接地址对应的端口号。用户名 AccessKey ID。密码 Access Key Secret。完成上述参数配置后，单击 确定 连接分析型数据库MySQL版。使用Tableau 在Tableau Desktop上，用户可以看到...
FineReport
方式二：在设计器中进行连接，mysql5.x版本可参考 MySQL数据连接，mysql8.x版本可参考 MySQL8数据连接插件。如果您需要通过外网连接 AnalyticDB MySQL版 集群，请参见 申请和释放公网地址。连接AnalyticDB 打开FineReport，在菜单栏中单击 ...
导入与导出
由于 AnalyticDB MySQL 中不允许数据库名、表名或者列名中含有划线（-），为保证数据同步成功，系统会将中划线（-）映射为下划线（_）。如果在数据同步过程中遇到其他因数据库名、表名或者列名造成的同步失败（例如表名中含有空格、中文等...
CREATE EXTERNAL DATABASE
AnalyticDB MySQL 湖仓版（3.0）和 数仓版（3.0）支持通过 CREATE EXTERNAL DATABASE 创建外部数据库。注意事项 湖仓版（3.0）Spark引擎不支持通过 CREATE EXTERNAL DATABASE 创建外部数据库，请使用XIHE引擎。外部数据库中只能创建外表。...
AnalyticDB MySQL 2.0数据导入
方式二：通过外表方式进行数据迁移 具体操作，请参见 通过外表导入RDS MySQL数据至数仓版。SQL回归测试 由于 数仓版（3.0）全面兼容MySQL，摒弃了 AnalyticDB for MySQL 2.0的部分函数，如果 AnalyticDB for MySQL 2.0的SQL语句使用了这些...
Spark开发编辑器
前提条件 已创建 AnalyticDB MySQL 湖仓版（3.0）集群，详情请参见 创建集群。已创建Job型资源组，且计算预留资源需大于等于8 ACU。创建资源组，详情请参见 新建资源组。已为RAM用户授权。具体操作，请参见 为RAM用户授权。已将RAM用户（子...
SQL诊断功能介绍
其中用户名、数据库名、资源组的可选取值是整体检索结果中已有的取值，而不是当前 AnalyticDB MySQL版 集群中的所有取值。例如，AnalyticDB MySQL版 集群中有3个数据库：db1、db2、db3，而符合整体检索条件的查询仅涉及 db1 和 db2。此时...
ACL权限体系
AnalyticDB for MySQL 2.0支持基于数据库表的层级权限管理模型，提供类似MySQL的ACL授权模式。一个ACL授权由被授权的用户、授权对象和授予的对象权限组成。和MySQL不同的是，AnalyticDB for MySQL 2.0目前不支持针对用户在Host上授权。以下...
通过DataWorks导入
您需要在数据集成同步任务配置前，配置好您需要同步的源端和目标端数据库，以便在同步任务配置过程中，可通过选择数据源名称来控制同步任务的读取和写入数据库。同步任务支持的数据源及其配置详情请参见 支持的数据源及同步方案。说明 数据...
设置白名单
为保障 云原生数据仓库 AnalyticDB MySQL 版 集群的安全稳定，系统默认禁止所有地址访问 AnalyticDB for MySQL 集群，因此，在使用 AnalyticDB for MySQL 集群前，需为集群设置白名单，以允许外部设备访问该集群。背景信息 集群默认的白...
DBVisualizer（2.0版）
Database Server AnalyticDB for MySQL 2.0数据库的连接地址。Database Port 数据库对应的端口号。Database 数据库的名字。Database Userid 阿里云账号或者已授权RAM子账号的Access Key ID。Database Password 阿里云账号或者已授权RAM子...
设置白名单
为保障 云原生数据仓库 AnalyticDB MySQL 版 集群的安全稳定，系统默认禁止所有地址访问 AnalyticDB for MySQL 集群，因此，在使用 AnalyticDB for MySQL 集群前，需为集群设置白名单，以允许外部设备访问该集群。背景信息 集群默认的白...
申请和释放公网地址
云原生数据仓库AnalyticDB MySQL版 集群支持VPC地址和公网地址两种类型的地址，如果需要通过公网连接集群，您需要先申请公网地址。公网和VPC网络 网络类型 说明 VPC网络 一个VPC就是一个隔离的网络环境。VPC的安全性较高，推荐您使用VPC...
Navicat
Navicat是一套快速、可靠且价格相宜的数据库管理工具，专为简化数据库的管理及降低系统管理成本而设。Navicat提供图形化用户界面，您可以简单、方便地创建本机到 AnalyticDB MySQL版 集群的远程连接，然后使用Navicat进行数据管理。前提...
有数BI
您可以在 云原生数据仓库AnalyticDB MySQL控制台 的 集群管理 页面，复制公网地址。端口 3306 用户名 AnalyticDB MySQL版 集群中创建的账号：高权限账号 普通账号 您可以在 云原生数据仓库AnalyticDB MySQL控制台 的 账号管理 页面，查看...
DataGrip
本文测试了DataGrip与 云原生数据仓库AnalyticDB MySQL版 在连通性、列举数据库、创建表等方面的兼容性，并给出测试结果图。测试环境 MySQL JDBC Driver DataGrip mysql-connector-java-8.0.15 下载地址为 DataGrip。测试范围 连通性 列举...
实施步骤
通过DTS实时同步PolarDB for MySQL数据到分析型数据库MySQL版需要以下几个步骤：步骤一：创建DTS同步作业 步骤二：配置同步链路 步骤三：查看同步数据 步骤一：创建DTS同步作业 创建DTS同步作业需要用户支付一定的费用，DTS支持两种付费...
库表结构优化
要做好库表结构设计和优化，用户通常需要关注以下信息：数据库引擎架构 用户需要了解数据库引擎的存储和计算架构特点，才能结合业务的数据分布特征与业务场景特征，进行数据建模，从而设计出符合引擎架构特点的数据表结构。SQL特征差异 ...
通过Spark SQL读写Hudi外表
创建外表时选择的OSS路径需比创建数据库时选择的OSS路径至少多一层目录，且外表的路径需在数据库路径下。建表时必须定义primaryKey主键。preCombineField预聚合字段为可选，如未定义preCombineField在UPDATE场景会报错。步骤三：写入Hudi...
通过DataWorks导入数据
您需要在数据集成同步任务配置前，配置好您需要同步的源端和目标端数据库，以便在同步任务配置过程中，可通过选择数据源名称来控制同步任务的读取和写入数据库。同步任务支持的数据源及其配置详情请参见 支持的数据源及同步方案。说明 数据...
管理运维事件
配置周期时间 周期时间对 AnalyticDB MySQL 数仓版（3.0）所有集群生效，不影响其他数据库产品运维事件的切换时间。配置周期时间后，会在指定周期时间点，对计划内所有未执行且未设置计划切换时间的事件执行切换。例如配置周期时间为周二00...
删除标签
操作步骤 登录 云原生数据仓库AnalyticDB MySQL控制台。在页面左上角，选择集群所在地域。在左侧导航栏，单击 集群列表。在 数仓版（3.0）页签下，单击目标 集群ID。在 集群信息 页面的 集群属性 区域，单击 编辑标签。单击要删除的标签后...
通过联邦分析功能同步至湖仓版
AnalyticDB MySQL 每个集群最多可创建2048个数据库。更多信息，请参见 使用限制。大表分区键设置 为了提高数据的写入和查询性能，建议您设置分区键。如何设置分区键，请参见 表结构设计。支持设置的分区格式如下：value：按值进行分区。...
基于向量分析的个性化推荐系统
然后，利用分析型数据库MySQL版向量内置的文本转换为向量函数，将从新闻标题和新闻内容中提取出的关键词转换为新闻向量导入分析型数据库MySQL版向量数据库中，用于用户新闻推荐，具体实现流程如下图所示。整个新闻推荐系统由以下两个步骤...
访问OSS数据源
云原生数据仓库AnalyticDB MySQL版 数据库产品 编写Python程序，将Python程序上传至OSS。本文示例的Python程序名为 example.py，用于读取文本文件readme.txt的第一行内容。import sys from pyspark.sql import SparkSession#初始Spark ...
QlikView（2.0版）
参数 说明 Data Source Name 分析型数据库MySQL版的名字。TCP/IP Server 分析型数据库MySQL版的连接地址。Port 连接地址对应的端口号。User AccessKey ID。Password Access Key Secret。Database 分析型数据库MySQL版的名字。完成上述参数...
产品和业务限制
限制项 描述 例外申请方式 购买分析型数据库MySQL版的限制 账户余额大于等于500元现金 请联系技术支持 开通分析型数据库MySQL版的用户限制 用户需实名认证 无 可创建的最大分析型数据库MySQL版数 3个 联系技术支持申请更多 单个分析型数据...
通过Spark SQL读写OSS外表
创建外表时选择的OSS路径需比创建数据库时选择的OSS路径至少多一层目录，且外表的路径需在数据库路径下。可以在tblproperties中配置 'auto.create.location'='true' 自动创建OSS路径。如果未指定该参数并且OSS中不存在该路径，请先创建对应...
使用限制
搭建数据库复制 HybridDB for MySQL本身提供主备复制架构的双节点集群，无需用户手动搭建。其中主备复制架构集群的备（slave）实例不对用户开放，用户应用不可直接访问。用户、密码和数据库管理 HybridDB for MySQL默认需要通过管理控制台...
- 产品推荐
- 这些文档可能帮助您