Sqoop概述
背景信息 常见数据传输场景如下：将MySQL数据导入HDFS 将HDFS数据导入MySQL 将Hive数据导入MySQL 将MySQL数据导入Hive 将MySQL数据导入OSS 将OSS数据导入MySQL 使用SQL作为导入条件 将MySQL数据导入HDFS 在Master节点上执行如下命令。...
MySQL数据库对外键和索引等名称的长度限制导致创建时...
问题描述 RDS产品的MySQL数据库创建索引报如下错误。Identifier name 'XXXXXXXXXXXXXXXXXXXXXXXXXXXXXXXXXXXXXXXXXXXXXXXXXXXXXXXXXXXXXXXX' is too long 问题原因 因为 MySQL数据库 对外键和索引等名称的长度有限制，具体如下：Identifier...
通过DataWorks导入数据
DataWorks提供了可视化的数据导入方式，相对于通过外表导入，DataWorks导入的方式更为轻量化，适合数据量相对较小的数据导入场景。本文介绍如何通过DataWorks将RDS MySQL数据导入至 AnalyticDB MySQL版 湖仓版（3.0）或 数仓版（3.0）。...
功能特性
PolarDB MySQL数据导入 PolarDB-X数据导入 自建MySQL数据源 AnalyticDB for MySQL支持通过外表将ECS自建MySQL数据库中的数据导入至数仓版集群，同时也支持将数仓版集群中的数据导出至自建的MySQL数据库。自建MySQL数据导入 导出至自建MySQL...
支持的数据源
数据入仓 类别 数据源 导入方式 产品系列 文档链接 数据库 RDS MySQL 外表 数仓版（3.0）通过外表导入至数仓版 湖仓版（3.0）通过外表导入至湖仓版 DTS 数仓版（3.0）通过DTS导入数据 湖仓版（3.0）通过DTS导入数据 DataWorks 数仓版（3.0...
FineBI
配置外接MySQL数据库，导入数据失败 处理方法：检查版本号和编码方式。具体操作，请参见 配置外接数据库，目前FineBI支持MySQL 5.x版本。检查外接MySQL数据库是否使用utf8（– UTF-8 Unicode）编码为字符集排列规则，或新建一个utf8编码的...
添加数据集
说明 仅支持导入兼容MySQL数据库、RDS for MySQL和RDS for PostgreSQL这三种类型的数据源。在 选择数据源类型 下拉列表中选择一个已有的数据源类型，并在右侧 选择数据源 下拉列表中，选择一个对应类型下的具体的数据源实例。说明 如果 ...
设置连接池
如果您的应用连接创建频繁（例如短连接场景）或者连接数量很大（大于MySQL数据库的连接数限制），您可以参考本文使用合适的RDS MySQL数据库代理连接池，降低应用与数据库建立连接的频率来减少MySQL数据库主线程的开销，减少数据库上的总...
从Amazon RDS MySQL迁移至阿里云
通过增量数据迁移可以实现在应用不停服的情况下，平滑地完成MySQL数据库的迁移。数据库账号的权限要求 数据库 结构迁移 全量迁移 增量迁移 Amazon RDS MySQL SELECT权限 SELECT权限 REPLICATION CLIENT、REPLICATION SLAVE、SHOW VIEW和...
SOURCE
MySQL命令导入 使用MySQL命令导入语法格式：mysql-u用户名-p密码<要导入的数据库数据(runoob.sql)示例：#mysql-uroot-p123456命令导入 source命令导入数据库需要先登录到数据库终端：create database abc;创建数据库 use abc;使用已创建的...
通过DTS导入数据
操作方法 您可以选择数据同步或数据迁移任意一种方式，将RDS MySQL数据导入至 AnalyticDB MySQL 湖仓版（3.0）或 数仓版（3.0）。具体操作，请参见：RDS MySQL同步至AnalyticDB MySQL 3.0。RDS MySQL迁移至AnalyticDB MySQL 3.0。
Java API访问
云数据库HBase增强版全文索引服务支持多语言访问，并且完全兼容开源Apache Solr API，本文介绍如何使用Solr Java API访问云数据库HBase增强版全文索引服务。使用Solr Java API访问云数据库HBase增强版全文索引服务的操作和使用Solr Java ...
导出至RDS MySQL
本文介绍如何通过 AnalyticDB MySQL 数仓版（3.0）的外表导出数据至云数据库RDS MySQL。前提条件 RDS MySQL实例需与 AnalyticDB MySQL 集群位于同一个VPC，即所在专有网络的VPC ID相同。说明 登录 RDS控制台，单击实例ID，在 数据库连接 ...
RDS MySQL逻辑备份文件恢复到自建数据库
演示环境 本地MySQL数据库安装在64位的Linux系统中，且与云数据库MySQL版的版本相同。本文使用CentOS 7的操作系统以及MySQL5.7版本为例进行演示。逻辑备份恢复操作步骤 访问 RDS实例列表，在上方选择地域，然后单击目标实例ID。在左侧导航...
优化建议
对底层MySQL建立合适的索引，这一点看似与分布式数据库无关，但却是最重要的。分布式数据库的高性能依赖于底层数据库的高性能，而对底层数据库性能来说，建立需要的索引是重要的环节；确保语句能正确使用到索引，例如查询条件能被索引完全...
数据变更最佳实践
例如，从RDS for MySQL、ECS自建MySQL数据导入 AnalyticDB MySQL版 时，推荐使用 INSERT INTO，详情请参见 通过外表导入至数仓版。说明 导入数据到 AnalyticDB MySQL版 时，导入任务使用 AnalyticDB MySQL版 中的资源，如果查询数据期间...
同步数据
分析型数据库MySQL版支持多种数据加载方式，包括但不限于：通过阿里云数据传输服务DTS将MySQL/DRDS中的数据导入分析型数据库MySQL版，其中MySQL可为RDS for MySQL、其他云厂商或线上IDC的自建MySQL以及ECS自建MySQL。详细操作步骤请参见 ...
备份下载的常见问题
详情请参见 RDS MySQL物理备份文件恢复到自建数据库、RDS MySQL逻辑备份文件恢复到自建数据库 或 RDS MySQL快照备份文件恢复到自建数据库。通过数据传输服务DTS将 本地数据库迁移到新的RDS实例 上，或者使用RDS MySQL的 全量备份导入功能，...
数据导入方式介绍
通过外表常规导入MaxCompute数据 通过外表常规导入HDFS数据 通过外表常规导入OSS数据 通过外表常规导入RDS MySQL数据 弹性导入 仅内核版本3.1.10.0及以上且已创建Job型资源组的 湖仓版（3.0）集群支持弹性导入数据。弹性导入可以大幅减少...
备份下载的常见问题
详情请参见 RDS MySQL物理备份文件恢复到自建数据库、RDS MySQL逻辑备份文件恢复到自建数据库 或 RDS MySQL快照备份文件恢复到自建数据库。通过数据传输服务DTS将 本地数据库迁移到新的RDS实例 上，或者使用RDS MySQL的 全量备份导入功能，...
数据导入
int|-|-|-|-|-|-|-|-|1|vertex|1|2|vertex|2|3|vertex|3|#文件2|id|label|prop1:int|prop2:int|prop3:int|prop4:int|prop5:int|prop6:int|-|-|-|-|-|-|-|-|4|vertex|4|4|4|4|4|6|从Neo4j迁移数据到图数据库GDB 图数据库GDB支持从Neo4j迁移...
备份下载的常见问题
详情请参见 RDS MySQL物理备份文件恢复到自建数据库、RDS MySQL逻辑备份文件恢复到自建数据库 或 RDS MySQL CSV或SQL文件恢复到自建数据库。通过数据传输服务DTS将 本地数据库迁移到新的RDS实例 上，或者使用RDS MySQL的 全量备份导入功能...
导入MySQL数据
您可以将自建MySQL数据库或RDS MySQL数据库中的数据导入到日志服务，实现数据的查询分析、加工等操作。本文介绍导入MySQL数据的操作步骤。使用限制 目前仅支持：华东1（杭州）、华东2（上海）、华北1（青岛）、华北2（北京）、华北3...
AnalyticDB MySQL 2.0数据导入
方式二：通过外表方式进行数据迁移 具体操作，请参见 通过外表导入RDS MySQL数据至数仓版。SQL回归测试 由于 数仓版（3.0）全面兼容MySQL，摒弃了 AnalyticDB for MySQL 2.0的部分函数，如果 AnalyticDB for MySQL 2.0的SQL语句使用了这些...
从RDS MySQL迁移至自建MySQL
通过数据传输服务DTS（Data Transmission Service），您可以将RDS MySQL迁移至自建MySQL数据库，适用于数据分析、业务功能测试等场景。前提条件 RDS MySQL中的待迁移的表需具备主键或者唯一性非空索引。自建MySQL数据库的存储空间须大于RDS...
创建表 CREATE TABLE 的不兼容点
本文为您介绍迁移 MySQL 数据库的数据至 OceanBase 数据库 MySQL 租户时，MySQL 数据库执行的 CREATE TABLE DDL 支持被数据传输的 DDL 同步组件转换，但 OceanBase 数据库 MySQL 租户不支持执行的场景。在生成列的基础上再定义生成列 通过 ...
导入数据
本文介绍如何将TPC-H 100 GB测试数据分别导入AnalyticDB MySQL和Presto中。下表列出了TPC-H测试数据集中的表数据条数。表名 数据条数 customer 15000000 lineitem 600037902 nation 25 orders 150000000 part 20000000 partsupp 80000000 ...
导入结构和数据
背景信息 ODC 支持批量导入数据库对象的结构和数据。通过 ODC 导入任务可以分别导入数据库对象的结构和数据、仅导入数据或者仅导入结构。导入结构和数据：同时导入数据库对象的定义语句及其数据。仅导入数据：仅导入表/视图对象的数据。仅...
数据归档
说明 ODC V4.2.2 及之后的版本支持选择 MySQL 数据库，以将 OceanBase 中的数据归档到 MySQL 数据库中。变量配置 可选项。通过变量筛选表中符合条件的行进行归档。例如：create_time${bizdate}，其中 bizdate 默认为任务执行时间，可以通过...
自建数据库备份恢复上云
阿里云支持将MySQL自建数据库的全量备份数据恢复至云上。本文介绍备份恢复上云功能的使用方法。说明 关于如何选择数据恢复方案，请参见 数据恢复方案概览。您也可以先将备份文件恢复至自建数据库中，然后再从自建数据库迁移到RDS实例。具体...
数据迁移方案概览
“数据传输”导入 事务引擎/分析引擎 使用数据传输（Data Transmission Service）将自建MySQL数据库或者RDS for MySQL数据库迁移到HybridDB for MySQL中。从MySQL批量导入导出 分析引擎 HybridDB for MySQL支持从自建MySQL中全量导入和导出...
添加兼容MySQL数据库的数据源
本文档介绍在DataV中添加兼容MySQL数据库数据源的方法，以及相关参数配置说明。通过兼容MySQL数据库的数据源，您可以使用旧版本的MySQL数据库作为组件的数据源。前提条件 已准备好待添加的兼容MySQL数据库数据源。操作步骤 登录 DataV控制...
数据类型转换
本文为您介绍迁移 MySQL 数据库的数据至 OceanBase 数据库 MySQL 租户时，数据类型转换的支持范围。支持的转换类型 数值类型 分类 MySQL 数据库 OceanBase 数据库 MySQL 租户 整型 支持指定字段长度，SIGNED、UNSIGNED、ZEROFILL。INT INT ...
创建云原生数据仓库 AnalyticDB MySQL 版（AnalyticDB...
需要先创建 云原生数据仓库 AnalyticDB MySQL 版（AnalyticDB for MySQL）数仓版（3.0）集群，再将RDS MySQL数据库中的数据导入集群。创建数仓版（3.0）集群 登录 云原生数据仓库 AnalyticDB MySQL 版（AnalyticDB for MySQL）控制台，单击...
无锁结构变更概览
DDL无锁变更能够有效解决结构变更时锁表的问题，较好地规避了因锁表导致业务阻塞的问题、避免了数据库原生Online DDL带来的主备延迟现象。您可在业务低峰期提交无锁变更。背景信息 在数据量大的情况下进行结构变更，需要考虑锁表的风险，锁...
绑定或解绑RAM用户与数据库账号
RAM用户与AnalyticDB MySQL数据库普通账号映射场景 SQL编辑器：使用RAM用户登录SQL编辑器，需要映射成 AnalyticDB MySQL 数据库普通账号进行库表鉴权。JDBC连接方式：使用 AnalyticDB MySQL 数据库普通账号登录，需要映射成RAM用户进行外表...
绑定或解绑RAM用户与数据库账号
RAM用户与AnalyticDB MySQL数据库普通账号映射场景 SQL编辑器：使用RAM用户登录SQL编辑器，需要映射成 AnalyticDB MySQL 数据库普通账号进行库表鉴权。JDBC连接方式：使用 AnalyticDB MySQL 数据库普通账号登录，需要映射成RAM用户进行外表...
修改表 ALTER TABLE 的不兼容点
本文为您介绍迁移 MySQL 数据库的数据至 OceanBase 数据库 MySQL 租户时，MySQL 数据库执行的 ALTER TABLE DDL 支持被数据传输的 DDL 同步组件转换，但 OceanBase 数据库 MySQL 租户不支持执行的场景。行内 CHECK 表达式中引用了其它列 ...
从OSS导入JSON数据文件
在HybridDB for MySQL中建立导出数据的真实存储表 在HybridDB for MySQL中建立一张外表映射到JSON文件 调用 INSERT INTO SELECT 来完成数据导入 操作步骤 登录HybridDB for MySQL数据库，具体的操作请参考 登录数据库。在HybridDB for ...
自建MySQL数据导入
本文介绍如何通过 AnalyticDB MySQL 的外表将ECS自建MySQL数据库的数据导入至 AnalyticDB MySQL 数仓版（3.0）。前提条件 已创建与 AnalyticDB MySQL 集群相同地域、相同VPC的ECS实例。已在ECS实例中安装自建MySQL。已在ECS实例的安全组中...
- 产品推荐
- 这些文档可能帮助您