数据导入优化建议
批量和实时导入如何选择 从MaxCompute或者OSS导入HybridDB for MySQL，推荐使用 INSERT OVERWRITE SELECT 做批量导入：批量导入适合大数据量导入，性能较好。批量导入适合数据仓库语义，即导入过程中旧数据可查询，导入完成一键切换新数据...
同步方案概览
源为自建SQL Server或RDS SQL Server的同步方案 源为自建MongoDB或云数据库MongoDB的同步方案 源为自建Redis或云数据库Tair/Redis的同步方案 源为MariaDB的同步方案 源为TiDB的同步方案 源为Db2 for LUW的同步方案 源为Db2 for i（AS/400）...
概述
回收站实际上是一个数据字典表，用于放置用户删除的数据库对象信息，包括用户删除的数据库和表等信息。背景信息 在对数据库对象进行删除操作时：如果回收站为开启状态，则该对象会进入回收站。在回收站中可以查询到被删除的对象，并可进行...
从MySQL导入数据
当您需要将云数据库RDS MySQL或云原生数据库PolarDB MySQL中的数据迁移至 云数据库ClickHouse 中进行实时分析时，本文档为您提供了以RDS MySQL为参考的示例，以帮助您轻松完成数据迁移任务。前提条件 已创建目标 云数据库ClickHouse 集群，...
通过外表导入至数仓版
您可以使用以下语句在目标数据库 adb_demo 中创建一张目标表，用于存储从HDFS导入的数据：创建普通外表对应的目标表（本文示例中目标表名为 adb_hdfs_import_test），语法如下。CREATE TABLE IF NOT EXISTS adb_hdfs_import_test(uid ...
使用kettle将本地数据导入AnalyticDB MySQL 2.0
关于如何创建 云原生数据仓库AnalyticDB MySQL版 2.0集群的数据库和表组，请参见 快速入门-开通分析型数据库MySQL版服务、创建表组 和 创建表。操作步骤 在kettle中新建一个转换。在转换中新建一个数据库连接，详细的参数配置如下表所示。...
Databricks数据洞察快速使用
说明 在default数据库中建表会提示失败，因此需要新建一个数据库。新建数据库需要指定存储空间location，否则无法导入数据到数据库。本文的location均为示例，请您更换为您实际的location。在单元格创建表。spark.sql use db_demo;create ...
库表恢复：按备份集恢复
若您要恢复至的时间点是某个备份集（快照）的时间点，可通过按备份集（快照）恢复的方式恢复误操作的数据库或者表的数据。前提条件 已存在备份集（快照）。版本要求和使用限制 版本要求 说明 您可以通过 查询版本号 来确认集群版本。当前 ...
CREATE DATABASE
CREATE DATABASE 用于创建一个新的PolarDB数据库。简介 CREATE DATABASE 创建一个新的PolarDB数据库。要创建一个数据库，你必须是一个超级用户或者具有特殊的 CREATEDB 特权。默认情况下，新数据库将通过克隆标准系统数据库 template1 被...
库表恢复方式1：从备份集恢复
库表恢复是指仅恢复指定的部分库或部分表到原集群。例如游戏业务中有时仅需恢复某个或某些玩家的数据，此时可使用库表恢复方式。...RestoreTable-恢复PolarDB实例的某些数据库或表到原实例 调用RestoreTable恢复 PolarDB 库表。
云数据库RDS MySQL版实例中实时查询慢日志slow_log的...
概述 本文主要介绍在使用云数据库RDS MySQL版实例时，实时查询慢日志slow_log的方法。用户告知 本文仅阐述实时查询slow_log的方法，文中的操作示例未通过where语句进行条件过滤，因此属于全表查询。建议您在操作时，通过where语句增加条件...
上传数据
DataWorks支持将本地的CSV文件或部分文本文件数据直接上传至MaxCompute表中，本文为您介绍操作步骤详情。前提条件 已准备好用于接收本地数据的MaxCompute表。您可以选择已创建的MaxCompute表，或者直接新创建一个MaxCompute表，建表操作可...
使用clickhouse-client导入数据
当您需要将本地文件的数据导入到云数据库ClickHouse时，本文将指导您如何通过clickhouse-client工具进行数据导入，以帮助您快速的完成数据导入。注意事项 支持导入到 云数据库ClickHouse 的常见文件格式为TabSeparated、...
基本概念
数据库 database 表示数据访问代理的逻辑数据库。以这个作为访问的入口，通过分库分表、读写分离等规则可以请求到后端真实的物理数据库。数据表 data table 表示数据访问代理的逻辑表，应用访问数据访问代理时 SQL 中的表即数据表。一个...
湖仓一体
本章节介绍如何通过 云数据库SelectDB 提供的联邦查询技术，对数据湖、数据库、远端文件等外部数据源进行联邦分析。为您提供简单、快速的数据分析体验。概述 云数据库SelectDB 提供多源数据目录功能（Multi-Catalog或Catalog），支持对接...
通过Hive访问云数据库HBase
如果云数据库HBase表已存在，可在Hive中云数据库HBase外表进行关联，外部表在删除时不影响云数据库HBase已创建表。在云数据库HBase中创建HBase表，并执行put命令测试数据。create 'hbase_table','f' put 'hbase_table','1122','f:col1','...
ETL工具支持概览
在数据集成服务中，将 AnalyticDB PostgreSQL版 配置为一个PostgreSQL数据库，即可实现其他数据源（RDS、MaxCompute、TableStore等）到 AnalyticDB PostgreSQL版 的数据同步。您可以直接从其他数据源读取数据，写入到 AnalyticDB ...
库表级恢复
数据库备份DBS 支持表级别的数据恢复能力。当发生数据误删除时，您可以选择只对单个表或数据库进行恢复，而无需恢复全部数据，可用于误操作后的快速订正，以及分析历史数据等场景。功能介绍 数据库备份DBS 在执行逻辑备份时，以数据库对象...
库表级恢复
数据库备份DBS 支持表级别的数据恢复能力。当发生数据误删除时，您可以选择只对单个表或数据库进行恢复，而无需恢复全部数据，可用于误操作后的快速订正，以及分析历史数据等场景。功能介绍 数据库备份DBS 在执行逻辑备份时，以数据库对象...
Db2 for LUW同步至云原生数据仓库 AnalyticDB ...
注意事项 说明 在库表结构同步过程中，DTS会将源数据库中的外键同步到目标数据库。在全量同步和增量同步过程中，DTS会以Session级别暂时禁用约束检查以及外键级联操作。若任务运行时源库存在级联更新、删除操作，可能会导致数据不一致。...
5.6/5.7/8.0版功能对比
❌ 设置透明数据加密TDE ✔️ ❌ SQL防火墙 ✔️ ❌ 动态脱敏 ✔️ ❌ 数据库管理 功能 集群版 多主集群（库表）管理数据库 ✔️ ✔️ 数据库代理企业版 功能 集群版 多主集群（库表）管理连接地址 ✔️ ✔️ 连接数据库集群 ✔️ ✔️ ...
通过导入工具导入至数仓版
若打印出如下日志表示执行正常：[2021-03-13 17:50:24.730]add consumer consumer-01 导入期间，导入工具不会进行过多的日志滚动，您可以查询数据库获取导入进度，例如查询目标表的总行数，命令如下：mysql>select count(*)from dbname....
使用COPY命令导入或导出本地数据
本文为您介绍如何使用COPY命令导入本地的数据至Hologres或从Hologres中导出数据至本地。使用限制 使用COPY命令的限制说明如下：当前COPY命令支持的数据类型与Hologres...在 导入总览 页面您可以查看本地文件导入的Schema、数据库、表等信息。
配置AnalyticDB MySQL 2.0数据源
重要 分析型数据库MySQL版中的表需要创建成实时表（普通表），通过实时导入效率高而且流程简单。操作步骤 登录 DataWorks控制台，单击对应项目栏中的 进入数据集成。本例项目名为SQLServer_DataWorks_ADB1。单击 新增数据源，数据源选择 ...
恢复MongoDB数据库
已选择的恢复时间点 选择需要恢复的时间，设置的时间必须在可恢复的时间范围内 恢复目标数据库 数据库所在位置 选择恢复目标数据库所在位置，支持类型如下：有公网IP:Port的自建数据库 ECS上的自建数据库 通过专线/VPN网关/智能网关接入的...
数据中心
主要功能包括数据表引入、本地数据导入。数据表 支持用户从已注册的计算资源类型中添加数据表。支持基于已添加的数据查看表信息、表内展示的字段。支持将已添加的源表数据进行删除。本地数据 支持用户通过上传本地文件方式将数据集导入至...
通过DMS将逻辑备份导入RDS数据库
通过数据管理DMS（Data Management）可以将数据库备份数据导入RDS目标数据库，实现备份恢复或者数据迁移。操作步骤 本文以RDS MySQL为例。步骤一：下载备份数据 下载RDS MySQL备份数据，详情请参见 下载备份。说明 DMS的数据导入功能支持...
MongoDB数据导入
返回结果：+-+|CAST(_id AS string)|+-+|641002ad883a73eb0d7291a7|+-+说明 如果要将ObjectId字段导入到 AnalyticDB for MySQL 中，需要先创建用于存储ObjectId字段的数据库和数据表，具体操作，请参见 导入MongoDB非嵌套文档 中的步骤5~7...
IMPORT PARTITION
本文档介绍了导入表分区TABLESPACE（ibd文件）的方法。语法 ALTER TABLE…IMPORT PARTITION 命令用于导入表分区的TABLESPACE（ibd文件）。ALTER TABLE table_name IMPORT PARTITION partition_name[,partition_name].TABLESPACE;说明 在...
数据库管理
DMS支持PostgreSQL的数据库（Database）管理与模式（Schema）管理。登录 数据管理DMS 5.0。在DMS左侧的实例列表中，右键单击目标实例，从弹出的列表中选择 数据库管理。若您需要管理模式，请在DMS左侧的实例列表中展开目标实例，右键单击...
入门概览
本文旨在介绍如何购买实例、创建账号、设置白名单、导入数据、连接实例和查询分析图，使您能够了解从购买图数据库GDB到开始使用的流程。前提条件 如果您是初次使用图数据库GDB，请先了解相关使用限制。具体信息，请参见 使用须知。如果您...
从自建MySQL迁移至MyBase MySQL
数据库 库表结构迁移 全量迁移 增量迁移 ECS自建MySQL数据库 SELECT权限 SELECT权限 增量数据迁移：待迁移对象的SELECT权限 REPLICATION CLIENT、REPLICATION SLAVE、SHOW VIEW MyBase MySQL实例 读写权限 数据库账号创建及授权方法：自建...
使用程序进行大数据导入
背景信息 假设当前数据库有一个表需要导入到 PolarDB-X 1.0 数据库中，数据量大致为814万，表结构如下。CREATE TABLE `post`(`postingType` int NOT NULL,`id` bigint(20)unsigned NOT NULL AUTO_INCREMENT,`acceptedAnswer` bigint(20)...
Db2 for LUW迁移至云原生数据仓库 AnalyticDB ...
支持增量迁移的SQL操作 操作类型 SQL操作语句 DML INSERT、UPDATE、DELETE 数据库账号的权限要求 数据库 全量迁移 库表结构迁移 增量迁移 Db2 for LUW CONNECT、SELECT权限 CONNECT、SELECT权限 DBADM权限 AnalyticDB PostgreSQL版 目标库...
自建SQL Server同步至云原生数据仓库 AnalyticDB ...
全量初始化会并发执行INSERT操作，导致目标数据库的表产生碎片，因此全量初始化完成后目标实例的表空间比源实例的表空间大。在DTS同步期间，不允许有除DTS外的数据写入目标库，否则会导致源库与目标库数据不一致。例如，有除DTS外的数据...
Azure Cosmos DB API for MongoDB迁移至阿里云
使用MongoDB数据库自带的备份还原工具，您可以将Azure Cosmos DB API for MongoDB迁移至阿里云。注意事项 该操作为全量迁移，为避免迁移前后数据不一致，迁移开始前请停止数据库写入。如果您之前使用 mongodump 命令对数据库进行过备份操作...
基本概念
数据库（Database）数据库属于目录，内部包含表、列、视图、函数和数据类型等。表（Table）表属于数据库。在 云数据库SelectDB版 中，表 是存储结构化数据的一种特殊形式。一张表由行（Row）和（Column）组成，其中行表示一行数据，列表示...
通过Kettle导入至数仓版
在 表输出 的 数据库字段 选项卡中，单击 获取字段 和 输入字段映射，可以设置Excel中的列与 AnalyticDB MySQL版 表中列名间的映射关系。单击白色三角箭头运行转换，观察运行日志和运行状态。本地Excel数据成功同步至 AnalyticDB MySQL版 ...
自建MySQL迁移至PolarDB MySQL版
由于全量数据迁移会并发执行INSERT操作，导致目标数据库的表产生碎片，因此全量迁移完成后目标数据库的表存储空间会比源实例的表存储空间大。请确认DTS对数据类型为FLOAT或DOUBLE的列的迁移精度是否符合业务预期。DTS会通过 ROUND(COLUMN,...
企业版和标准版功能对比
支持 不支持 全球数据库 全球数据库网络（Global Database Network，简称GDN）是由分布在同一个国家内多个地域的多个 PolarDB 集群组成的网络。GDN网络中所有集群的数据保持同步，网络中每个集群均提供读服务（写服务会被转发到主集群处理...
- 产品推荐
- 这些文档可能帮助您