通过DTS导入数据
操作方法 您可以选择数据同步或数据迁移任意一种方式，将RDS MySQL数据导入至 AnalyticDB MySQL 湖仓版（3.0）或 数仓版（3.0）。具体操作，请参见：RDS MySQL同步至AnalyticDB MySQL 3.0。RDS MySQL迁移至AnalyticDB MySQL 3.0。
同步数据
通过Kettle将关系型数据库、Hbase等NoSQL数据源，以及Excel、Access中的数据导入分析型数据库MySQL版中，详细操作步骤请参见 使用kettle将本地数据导入分析型数据库MySQL版。通过 Logstash 插件将采集到的日志等数据等实时写入分析型数据库...
自建MySQL数据导入
本文介绍如何通过 AnalyticDB MySQL 的外表将ECS自建MySQL数据库的数据导入至 AnalyticDB MySQL 数仓版（3.0）。前提条件 已创建与 AnalyticDB MySQL 集群相同地域、相同VPC的ECS实例。已在ECS实例中安装自建MySQL。已在ECS实例的安全组中...
通过外表导入至数仓版
本文介绍如何通过外表将云数据库RDS MySQL中的数据导入至 AnalyticDB MySQL。前提条件 RDS MySQL实例需与 AnalyticDB MySQL 集群位于同一个VPC，即所在专有网络的VPC ID相同。说明 登录 RDS控制台，单击实例ID，在 数据库连接 页面的 网络...
通过DataWorks导入数据
本文介绍如何通过DataWorks将RDS MySQL数据导入至 AnalyticDB MySQL版 湖仓版（3.0）或 数仓版（3.0）。前提条件 已购买合适规格的独享数据集成资源组。详情请参见：新增和使用独享数据集成资源组。已完成数据集成资源组与数据源的网络连通...
功能特性
PolarDB MySQL数据导入 PolarDB-X数据导入 自建MySQL数据源 AnalyticDB for MySQL支持通过外表将ECS自建MySQL数据库中的数据导入至数仓版集群，同时也支持将数仓版集群中的数据导出至自建的MySQL数据库。自建MySQL数据导入 导出至自建MySQL...
DataWorks调度XIHE SQL
DataWorks出于安全考虑，对建立连接的服务进行了安全控制，您需要将 AnalyticDB MySQL 数据库的连接地址和端口加添加到白名单中。步骤二：在DataWorks中创建AnalyticDB MySQL节点 具体操作，请参见 创建AnalyticDB for MySQL节点。步骤三：...
查询改写功能
完全匹配改写 AnalyticDB for MySQL 会提取查询语句的结构信息，若查询语句的结构和物化视图的结构完全相同，AnalyticDB for MySQL 会直接将查询改写为对物化视图的查询。示例 原查询语句如下：SELECT l.returnflag,l.linestatus,SUM(l....
通过一键建仓同步至数仓版
已创建PolarDB MySQL数据库。更多信息，请参见 数据库管理。PolarDB MySQL数据库中已存在表数据。计费 一键创建PolarDB MySQL数据仓库时，系统自动通过DTS同步数据，DTS计费规则，请参见 计费概述。注意事项 数据同步过程中，若在源实例...
导入数据
表名 数据条数 customer 15000000 lineitem 600037902 nation 25 orders 150000000 part 20000000 partsupp 80000000 region 5 supplier 1000000 AnalyticDB MySQL导入数据 使用LOAD DATA将dbgen生成的文件导入至 AnalyticDB MySQL 中。...
通过一键建仓同步至数仓版
已创建RDS MySQL数据库。更多信息，请参见 创建数据库。RDS MySQL数据库中已存在表数据。计费 一键创建RDS MySQL数据仓库时，系统自动通过DTS同步数据。DTS计费规则，请参见 计费概述。注意事项 数据同步过程中，若在源实例RDS MySQL中新增...
导入Amazon S3文件
您可以通过数据导入的方式将Amazon S3的日志文件导入到阿里云的日志服务，实现日志的查询分析、加工等操作。目前日志服务只支持导入5GB以内的S3文件，压缩文件大小按照压缩后的大小计算。前提条件 已上传日志文件到S3中。已创建Project和...
支持的数据源
数据入仓 类别 数据源 导入方式 产品系列 文档链接 数据库 RDS MySQL 外表 数仓版（3.0）通过外表导入至数仓版 湖仓版（3.0）通过外表导入至湖仓版 DTS 数仓版（3.0）通过DTS导入数据 湖仓版（3.0）通过DTS导入数据 DataWorks 数仓版（3.0...
通过外表导入至湖仓版
示例数据说明 本文示例的RDS MySQL数据库名为 test_adb，并在该库中创建了一张名为 person 的表，示例如下：CREATE TABLE IF NOT EXISTS test_adb.person(id int,name varchar(1023),age int);向 person 表中插入数据，示例如下：INSERT ...
使用DTS同步RDS MySQL数据到AnalyticDB MySQL 2.0
本文以RDS MySQL数据源为例，介绍如何通过DTS将RDS MySQL数据实时同步至 AnalyticDB MySQL版 2.0 中。前提条件 根据 RDS MySQL快速入门，准备好测试数据。根据 AnalyticDB MySQL版2.0快速入门 完成数据库创建、表组创建等准备工作。背景...
数据迁移方案概览
“数据传输”导入 事务引擎/分析引擎 使用数据传输（Data Transmission Service）将自建MySQL数据库或者RDS for MySQL数据库迁移到HybridDB for MySQL中。从MySQL批量导入导出 分析引擎 HybridDB for MySQL支持从自建MySQL中全量导入和导出...
导出至RDS MySQL
本文介绍如何通过 AnalyticDB MySQL 数仓版（3.0）的外表导出数据至云数据库RDS MySQL。前提条件 RDS MySQL实例需与 AnalyticDB MySQL 集群在同一个VPC下，且该VPC网段需加入RDS MySQL实例的白名单中。详细操作步骤，请参见 设置RDS的IP白...
通过DTS导入数据
通过数据传输服务DTS（Data Transmission Service），您可以将 PolarDB MySQL版 的数据导入至 AnalyticDB MySQL 湖仓版（3.0）或 数仓版（3.0），轻松实现数据的传输，用于实时数据分析。操作方法 您可以选择数据同步或数据迁移任意一种...
通过DTS导入数据
通过数据传输服务DTS（Data Transmission Service），您可以将RDS SQL Server数据导入至 AnalyticDB MySQL 湖仓版（3.0）或 数仓版（3.0），轻松实现数据的传输，用于实时数据分析。操作方法 您可以选择数据同步或数据迁移任意一种方式，将...
MongoDB数据导入
返回结果：+-+-+-+|id|city|name|+-+-+-+|1|hangzhou|jack|+-+-+-+说明 如果要将MongoDB嵌套文档导入到 AnalyticDB MySQL 中，需要先创建用于存储MongoDB嵌套文档的数据库和数据表，具体操作，请参见 导入MongoDB非嵌套文档 中的步骤5~7。...
自建HBase数据导入
本文介绍如何通过数据传输服务DTS（Data Transmission Service）将自建HBase的数据导入至 AnalyticDB MySQL 数仓版（3.0）。操作方法 通过DTS将自建HBase的数据导入至 AnalyticDB MySQL 数仓版（3.0）。具体操作，请参见 自建HBase迁移至...
系统表
字段说明：字段 说明 schema 数据库名称。last_active_time 上次活跃时间。create_time 建立连接的时间。connection_id 连接ID。ip_port AnalyticDB for MySQL 接入层节点IP和端口号。access_ip 客户端IP。user 用户名。kepler_persist_...
通过DTS导入数据
通过数据传输服务DTS（Data Transmission Service），您可以将 PolarDB分布式版（原DRDS）的数据导入至 AnalyticDB MySQL 湖仓版（3.0）或 数仓版（3.0），轻松实现数据的传输，用于实时数据分析。操作方法 您可以选择数据同步或数据迁移...
通过外表导入至数仓版
AnalyticDB for MySQL 支持通过外表读取并导入MaxCompute数据。通过外表导入数据可以最大限度地利用集群资源，实现高性能数据导入。您也可以进一步选择通过Tunnel方式和Storage API两种方式访问并导入MaxCompute数据，相较于Tunnel方式，...
通过外表导入至湖仓版
AnalyticDB for MySQL 支持通过外表读取并导入MaxCompute数据。通过外表导入数据可以最大限度地利用集群资源，实现高性能数据导入。您也可以进一步选择通过Tunnel方式和Storage API两种方式访问并导入MaxCompute数据，相较于Tunnel方式，...
AnalyticDB MySQL 2.0数据导入
MaxCompute中已经没有原始数据，原始数据只存在于 AnalyticDB for MySQL 2.0集群的数据库中，可以使用两种数据迁移方式将 AnalyticDB for MySQL 2.0集群中的数据导入到 数仓版（3.0）。具体操作，请参见 数据迁移。准备工作 了解 ...
数据导入方式介绍
通过外表常规导入MaxCompute数据 通过外表常规导入HDFS数据 通过外表常规导入OSS数据 通过外表常规导入RDS MySQL数据 弹性导入 仅内核版本3.1.10.0及以上且已创建Job型资源组的 湖仓版（3.0）集群支持弹性导入数据。弹性导入可以大幅减少...
应用场景
在基于 MySQL 数据库的系统架构下，存放着设备信息的库表，往往需要使用分库分表和相应的数据分发技术才能承担业务流量。分库分表的设计不仅增加了数据库运维人员的管理难度，也让系统架构的扩展受到了很大的限制。HybridDB for MySQL的...
Java访问（2.0版）
不带重试的JDBC连接示例 您可以在业务系统的Java代码中添加以下代码，通过MySQL JDBC连接AnalyticDB for MySQL数据库。Connection connection=null;Statement statement=null;ResultSet rs=null;try { Class.forName(...
自定义函数（邀测中）
AnalyticDB for MySQL 未开启压缩，将数据直接传输至函数计算服务，函数计算服务经过计算后，将计算结果使用GZIP格式压缩后返回给 AnalyticDB for MySQL，导致 AnalyticDB for MySQL 无法解析数据。调用 REMOTE_CALL 函数时，出现 parse ...
黑名单监控告警
直接将图片上传到OSS，获取访问URL。使用该方法时，需要提前将OSS Bucket授权给 vdb_support 账户，如何授权请参见 使用Bucket Policy授权其他用户访问OSS资源。使用OSS SDK生成包含签名的URL，详情请参见 如何在URL中包含签名。包含签名的...
从OSS导入JSON数据文件
在HybridDB for MySQL中建立导出数据的真实存储表 在HybridDB for MySQL中建立一张外表映射到JSON文件 调用 INSERT INTO SELECT 来完成数据导入 操作步骤 登录HybridDB for MySQL数据库，具体的操作请参考 登录数据库。在HybridDB for ...
导入与导出
原因：MaxCompute外表不支持嵌套类型，无法直接将类型为array的数据导入至AnalyticDB MySQL。解决方法：您可以将MaxCompute中的数据以Parquet的格式导入至OSS，再通过 AnalyticDB MySQL版 读取OSS中以Parquet格式存储的数据。如何优化...
Java
本文介绍如何在Java中通过MySQL JDBC连接 AnalyticDB for MySQL 集群。MySQL JDBC驱动版本 AnalyticDB for MySQL 支持以下版本的MySQL JDBC驱动。5.0版本系列：5.0.2，5.0.3，5.0.4，5.0.5，5.0.7，5.0.8。5.1版本系列：5.1.1，5.1.2，5.1....
访问RDS MySQL数据源
解压CA证书压缩包，并将JKS文件上传至OSS中。具体操作，请参见 上传文件。上传驱动程序及Spark作业依赖的Jar包 编写访问RDS MySQL表的示例程序，并进行编译打包。本文生成的Jar包名称为 test.jar。示例代码如下：package org.example ...
使用kettle将本地数据导入AnalyticDB MySQL 2.0
本文以Excel为例，介绍如何通过kettle将本地Excel数据迁移...相关信息 使用DTS同步RDS MySQL数据 使用数据集成迁移数据至分析型数据库MySQL版 使用kettle将本地数据导入分析型数据库MySQL版 在程序中通过AnalyticDB MySQL版Client高效写入数据
通过一键建仓同步至数仓版
数据库名称 从下拉列表中选择目标 AnalyticDB MySQL 数据库名。表名 从下拉列表中选择目标 AnalyticDB MySQL 表名。账号名称 目标 AnalyticDB MySQL 中创建的 数据库账号。账号密码 填写账号名称对应的密码。字段映射 系统自动提取日志服务...
数据导出到Redis
将数据从HybridDB for MySQL导出到Redis中需要如下三个步骤：在HybridDB for MySQL中创建一张需要导出数据到Redis的真实存储表 在HybridDB for MySQL中建立一张外表映射到Redis 调用 INSERT INTO SELECT 来完成数据导出 操作步骤 在...
数据导入优化建议
批量和实时导入如何选择 从MaxCompute或者OSS导入HybridDB for MySQL，推荐使用 INSERT OVERWRITE SELECT 做批量导入：批量导入适合大数据量导入，性能较好。批量导入适合数据仓库语义，即导入过程中旧数据可查询，导入完成一键切换新数据...
通过日志服务导入至数仓版
左边文本框为日志字段名称，右边为AnalyticDB MySQL数据库表中的字段。说明 Timestamp类型的字段映射精确到秒级别。例如日志时间为2022-01-05 10:12:13.145，投递到AnalyticDB MySQL后，投递结果为2022-01-05 10:12:13。投递开始时间 配置...
- 产品推荐
- 这些文档可能帮助您