RDS实例间的数据迁移
本文介绍如何使用数据传输服务（Data Transmission Service，简称DTS），实现RDS实例间的数据迁移。DTS支持结构迁移、全量数据迁移以及增量数据迁移，同时使用这三种迁移类型可以实现在自建应用不停服的情况下，平滑地完成数据库的迁移。...
RDS实例间数据迁移
本文介绍如何使用数据传输服务（Data Transmission Service，简称DTS），实现RDS实例间的数据迁移。DTS支持结构迁移、全量数据迁移以及增量数据迁移，同时使用这三种迁移类型可以实现在自建应用不停服的情况下，平滑地完成数据库的迁移。...
从RDS MySQL迁移至PolarDB MySQL版
操作类型 SQL操作语句 DML INSERT、UPDATE、DELETE、REPLACE DDL ALTER TABLE、ALTER VIEW CREATE FUNCTION、CREATE INDEX、CREATE PROCEDURE、CREATE TABLE、CREATE VIEW DROP INDEX、DROP TABLE RENAME TABLE TRUNCATE TABLE 数据库账号...
从PolarDB MySQL版迁移至RDS MySQL
操作类型 SQL操作语句 DML INSERT、UPDATE、DELETE、REPLACE DDL ALTER TABLE、ALTER VIEW CREATE FUNCTION、CREATE INDEX、CREATE PROCEDURE、CREATE TABLE、CREATE VIEW DROP INDEX、DROP TABLE RENAME TABLE TRUNCATE TABLE 数据库账号...
从PolarDB MySQL版迁移至自建MySQL
操作类型 SQL操作语句 DML INSERT、UPDATE、DELETE、REPLACE DDL ALTER TABLE、ALTER VIEW CREATE FUNCTION、CREATE INDEX、CREATE PROCEDURE、CREATE TABLE、CREATE VIEW DROP INDEX、DROP TABLE RENAME TABLE TRUNCATE TABLE 数据库账号...
同步时源库为Db2 for LUW的注意事项及限制
如果同步的源库为 Db2 for LUW，您需要在配置具体的同步任务前，参考本文的注意事项及限制，以保障数据同步任务的正常运行。Db2 for LUW同步至PolarDB-X 2.0 说明 DTS默认同步到目标数据库中时会取消外键约束，因此源数据库的级联、删除等...
跨阿里云账号迁移PolarDB MySQL版
操作类型 SQL操作语句 DML INSERT、UPDATE、DELETE、REPLACE DDL ALTER TABLE、ALTER VIEW CREATE FUNCTION、CREATE INDEX、CREATE PROCEDURE、CREATE TABLE、CREATE VIEW DROP INDEX、DROP TABLE RENAME TABLE TRUNCATE TABLE 数据库账号...
源库Binlog检查
在启动MySQL之间的增量数据迁移任务时，DTS将在预检查阶段对源数据库进行Binlog检查。本文将介绍源库Binlog检查涉及的检查项及修复方法。源库Binlog是否开启检查 该检查项主要检查源数据库是否开启Binlog功能。如果检查失败，请参考下述...
PolarDB MySQL版迁移至RDS MySQL
通过增量数据迁移可以实现在自建应用不停机的情况下，平滑地完成数据迁移。支持增量迁移的SQL操作 操作类型 SQL操作语句 DML INSERT、UPDATE、DELETE DDL ALTER TABLE、ALTER VIEW CREATE FUNCTION、CREATE INDEX、CREATE PROCEDURE、...
Tablestore外部表
本文将进一步为您介绍如何将来自Tablestore（原OTS）的数据纳入MaxCompute上的计算生态，实现多种数据源之间的无缝连接。背景信息 表格存储（Tablestore）是构建在阿里云飞天分布式系统之上的NoSQL数据存储服务，提供海量结构化数据的存储...
从自建PostgreSQL（10.1~13版本）增量迁移至RDS ...
DTS支持结构迁移、全量数据迁移和增量数据迁移，同时使用这三种迁移类型可以实现在自建应用不停服的情况下，平滑地完成数据库迁移。本文介绍自建PostgreSQL增量迁移至RDS PostgreSQL的配置方式。前提条件 自建PostgreSQL的数据库版本为10.1...
自建MySQL同步至RDS MySQL
数据传输服务DTS（Data Transmission Service）支持在不影响业务正常运行的情况下，将部署在本地或ECS的MySQL数据库同步至 RDS MySQL 实例。DTS默认仅实时同步增量数据，您也可以选择同时进行库表结构同步和全量同步，平滑地完成自建MySQL...
从自建Oracle迁移至阿里云RDS MySQL
DTS支持结构迁移、全量数据迁移以及增量数据迁移，同时使用这三种迁移类型可以实现在本地应用不停服的情况下，平滑地完成Oracle数据库的数据迁移。前提条件 自建Oracle数据库的版本为9i、10g、11g、12c、18c或19c版本。自建Oracle数据库已...
从自建Oracle迁移至阿里云RDS MySQL
DTS支持结构迁移、全量数据迁移以及增量数据迁移，同时使用这三种迁移类型可以实现在本地应用不停服的情况下，平滑地完成Oracle数据库的数据迁移。前提条件 自建Oracle数据库的版本为9i、10g、11g、12c、18c或19c版本。自建Oracle数据库已...
实例状态显示“锁定中”时如何解决？
SELECT table_schema|'.'|table_name AS table_full_name,pg_total_relation_size('"'|table_schema|'"."'|table_name|'"')AS size FROM information_schema.tables ORDER BY pg_total_relation_size('"'|table_schema|'"."'|table_name|'...
实例状态显示“锁定中”时如何解决？
SELECT table_schema|'.'|table_name AS table_full_name,pg_total_relation_size('"'|table_schema|'"."'|table_name|'"')AS size FROM information_schema.tables ORDER BY pg_total_relation_size('"'|table_schema|'"."'|table_name|'...
实例状态显示“锁定中”时如何解决？
SELECT table_schema|'.'|table_name AS table_full_name,pg_total_relation_size('"'|table_schema|'"."'|table_name|'"')AS size FROM information_schema.tables ORDER BY pg_total_relation_size('"'|table_schema|'"."'|table_name|'...
实例状态显示“锁定中”时如何解决？
SELECT table_schema|'.'|table_name AS table_full_name,pg_total_relation_size('"'|table_schema|'"."'|table_name|'"')AS size FROM information_schema.tables ORDER BY pg_total_relation_size('"'|table_schema|'"."'|table_name|'...
实例状态显示“锁定中”时如何解决？
SELECT table_schema|'.'|table_name AS table_full_name,pg_total_relation_size('"'|table_schema|'"."'|table_name|'"')AS size FROM information_schema.tables ORDER BY pg_total_relation_size('"'|table_schema|'"."'|table_name|'...
导入概述
为了更好地满足各种不同的业务场景，StarRocks支持多种数据模型，StarRocks中存储的数据需要按照特定的模型进行组织。本文为您介绍数据导入的基本概念、原理、系统配置、不同导入方式的适用场景，以及一些最佳实践案例和常见问题。背景信息...
数据集成侧同步任务能力说明
说明 以业务数据库数据同步到MaxCompute数据仓库为例，当有大量的数据存储在数据库系统里，需要将数据库中的全量及增量数据同步到MaxCompute进行数仓分析时，数据集成传统方式是通过全量同步或者依赖数据库表中的 modify_time 等字段进行...
RDS MariaDB迁移至RDS MySQL
是否限制增量迁移速率 您也可以根据实际情况，选择是否对增量迁移任务进行限速设置（设置 每秒增量迁移的行数RPS 和 每秒增量迁移的数据量(MB)BPS），以缓解目标库的压力。说明 仅当 迁移类型 选择了 增量迁移 时才可以配置。环境标签 您...
OceanBase（MySQL模式）迁移至RDS MySQL
TRUNCATE TABLE 数据库账号的权限要求 数据库 库表结构迁移 全量迁移 增量迁移 OceanBase 用户 SELECT权限 租户 普通租户 普通租户 普通租户 重要 需要在OceanBase数据库所在服务安装oblogproxy（增量日志代理服务）并配置系统租户，详情请...
简介
基本组件说明 分类 组件 说明 数据容器 Data 绑定单个数据源上下文的容器，为容器中组件提供数据源，对页面布局无影响。List 绑定列表数据源上下文的容器，为容器中组件提供数据源，对页面布局无影响。Gallery 图库组件以网格容器的形式...
查看Worker倾斜关系
此时可能出现了计算资源倾斜，Hologres建立了新的系统视图hologres.hg_worker_info，通过此视图可以查询当前数据库Worker、Table Group和Shard之间的关系，便于您判断资源倾斜等关系，解决资源负载不均问题，提高资源利用率。本文为您介绍...
RDS MySQL实例间的同步
开启迁移评估 评估源库和目标库的结构（如索引长度、存储过程、依赖的表等）是否满足要求，您可以根据实际情况选择 是 或者 否。说明 仅当 同步类型 选择了 库表结构同步 时才可以配置。若选择 是，则可能会增加预检查时间。您可以在预检查...
PostgreSQL数据源
PostgreSQL数据源为您提供读取和写入PostgreSQL双向通道的功能，方便您后续可以通过向导模式和脚本模式配置数据同步任务。本文为您介绍DataWorks的PostgreSQL数据同步能力支持情况。支持的版本 目前仅支持配置PostgreSQL数据源为PostgreSQL...
从自建TiDB增量迁移至RDS MySQL
本文介绍如何使用数据传输服务DTS（Data Transmission Service），结合Kafka集群与TiDB数据库的Pump、Drainer组件，完成增量数据迁移，实现在应用不停服的情况下，平滑地完成数据库的迁移上云。前提条件 说明 增量迁移前，您可先将自建TiDB...
PyODPS常见问题
本文为您介绍使用PyODPS时的常见问题。问题类别 常见问题 安装PyODPS 安装PyODPS时，提示Warning:XXX not ...table_names=['table1',.,'tableN']dfs=[o.get_table(tn).to_df()for tn in table_names]reduce(lambda x,y:x.union(y),dfs)...
Python SDK常见问题
本文为您介绍Python SDK常见问题，即PyODPS。问题类别 常见问题 安装PyODPS 安装PyODPS时，提示Warning:XXX not ...table_names=['table1',.,'tableN']dfs=[o.get_table(tn).to_df()for tn in table_names]reduce(lambda x,y:x.union(y),...
开发PyODPS 2任务
table('table_name').get_partition('ds='+args['ds'])更多场景的PyODPS任务开发，请参考：PyODPS使用第三方包 节点运行ECS机器上的脚本 PyODPS节点实现结巴中文分词 PyODPS节点实现避免将数据下载到本地 后续步骤 如何判断Shell自定义脚本...
DQL操作常见问题
产生原因 示例SQL是table1通过ID字段和table2的ID字段做左外关联，所以会出现以下情况：如果table2表中找不到关联数据，table1也会返回一条数据。如果table1找不到但是table2能找到关联数据，则不返回结果。如果table1和table2都能找到关联...
PolarDB MySQL版间迁移
通过数据传输服务DTS（Data Transmission Service），可以帮助您实现 PolarDB MySQL版 集群间的数据迁移。说明 目前 PolarDB MySQL版 集群暂不支持升级MySQL版本至8.0版本，您可以创建一个新的 PolarDB MySQL版 集群（8.0版本），使用本...
开发PyODPS 2任务
table('table_name').get_partition('ds='+args['ds'])更多场景的PyODPS任务开发，请参考：PyODPS使用第三方包 节点运行ECS机器上的脚本 PyODPS节点实现结巴中文分词 PyODPS节点实现避免将数据下载到本地 后续步骤 如何判断Shell自定义脚本...
RDS MariaDB实例间的同步
是否限制增量同步速率 您也可以根据实际情况，选择是否对增量同步任务进行限速设置（设置 每秒增量同步的行数RPS 和 每秒增量同步的数据量(MB)BPS），以缓解目标库的压力。环境标签 您可以根据实际情况，选择用于标识实例的环境标签。本...
列存索引中GroupJoin算子的实现
本文介绍了 PolarDB IMCI中GroupJoin算子的一些限制条件和实现方式，以及其他数据的一些相关实现。阅读本文前请先了解基础的HASH JOIN与HASH GROUP BY算法。背景 SELECT key1,SUM(sales)as total_sales FROM fact_table LEFT JOIN ...
开发PyODPS 3任务
table('table_name').get_partition('ds='+args['ds'])更多场景的PyODPS任务开发，请参考：PyODPS使用第三方包 节点运行ECS机器上的脚本 PyODPS节点实现结巴中文分词 PyODPS节点实现避免将数据下载到本地 后续步骤 如何判断Shell自定义脚本...
从自建PostgreSQL（10.0及以下版本）增量迁移至RDS ...
DTS支持结构迁移、全量数据迁移和增量数据迁移，同时使用这三种迁移类型可以实现在自建应用不停服的情况下，平滑地完成自建PostgreSQL数据库迁移上云。本文以 有公网IP的自建数据库 为例介绍增量数据迁移的配置流程。如您仅需要全量数据...
RDS MariaDB同步至RDS MySQL
是否限制增量同步速率 您也可以根据实际情况，选择是否对增量同步任务进行限速设置（设置 每秒增量同步的行数RPS 和 每秒增量同步的数据量(MB)BPS），以缓解目标库的压力。环境标签 您可以根据实际情况，选择用于标识实例的环境标签。本...
开发PyODPS 3任务
table('table_name').get_partition('ds='+args['ds'])更多场景的PyODPS任务开发，请参考：PyODPS使用第三方包 节点运行ECS机器上的脚本 PyODPS节点实现结巴中文分词 PyODPS节点实现避免将数据下载到本地 后续步骤 如何判断Shell自定义脚本...
- 产品推荐
- 这些文档可能帮助您