数据传输作业:数据集成

实时同步 DataWorks提供的实时数据同步功能,使用单表或整库同步方式,将源端数据库中部分或全部表的数据变化实时同步至MaxCompute中,实现MaxCompute实时保持和源库的数据对应。一个实时同步任务支持多个转换插件进行数据清洗,并支持多个...

Redis数据同步方案概览

借助数据传输服务DTS(Data Transmission Service),云数据库Redis版 为您提供了丰富数据同步方案,可适用于同步上云、数据异地多活、数据容灾、数据分析等多种业务场景。DTS介绍 DTS 是阿里云提供的实时数据流服务,集数据迁移、订阅、...

pg_publication

puballtables bool 如果为真,这个publication自动包括数据库中的所有表,包括未来将会创建的任何表。pubinsert bool 如果为真,为publication中的表复制 INSERT 操作。pubupdate bool 如果为真,为publication中的表复制 UPDATE 操作。...

创建数据库

语法 CREATE DATABASE name 参数 参数名称 描述 name 新建数据库的名称。描述 CREATE DATABASE命令可以用来创建一个新的数据库。说明 仅限超级用户、polar_superuser权限用户或者拥有createdb权限的用户才能创建数据库。带有createdb权限的...

设置增量同步位点

设置增量同步位点时,仅支持选择当前时间或当前时间之前的时间点,并且不能晚于您设置的源端数据库增量日志的过期时间或归档时间。适用场景 您可以通过设置增量同步位点的方式实现以下场景:您在创建数据迁移或数据同步项目前,已确保源端...

DROP DATABASE

DROP DATABASE用于移除一个数据库。简介 DROP DATABASE 移除一个数据库。它会移除该数据库的系统目录项并且删除包含数据的文件目录。它只能由数据库拥有者执行。当你已经连接到目标数据库时,它不能被执行(连接到 postgres 或者任何其他...

自定义配置 DDL/DML

本文为您介绍配置数据迁移或数据同步项目时,如何自定义配置增量同步中的 DDL 和 DML 同步。背景信息 您在配置数据迁移或数据同步项目时,如果在 选择迁移类型 或 选择同步类型 步骤选择了 增量同步,则会默认支持 DML 同步,您可以自定义...

JDBC

本文将介绍如何在Java应用中使用JDBC连接 PolarDB PostgreSQL版(兼容Oracle数据库。前提条件 已经在 PolarDB 集群创建用户,如何创建用户请参见 创建数据库账号。已经将需要访问 PolarDB 集群的主机IP地址添加到白名单,如何添加白名单...

数据库代理常见问题

数据库代理中的连接池与应用程序中的连接池有什么区别,应该如何结合使用?RDS MySQL数据库代理的连接池功能是指代理的连接池功能,不影响客户端的连接池功能。如果您的客户端已经支持连接池,则可以不使用Proxy的连接池功能。RDS MySQL...

唯一索引

数据库自动为定义了一个唯一约束或主键的表创建一个唯一索引。该索引包含组成主键或唯一约束的所有列(可能是一个多列索引),它也是用于强制这些约束的机制。注意 不需要手工在唯一列上创建索引,如果那样做也只是重复了自动创建的...

同步时源为Redis的注意事项及限制

如果同步的源数据库类型为Redis,如自建Redis、云数据库Redis,您需要在配置具体的同步任务前,参考本文的注意事项及限制,以保障数据同步任务的正常运行。源库为Redis的同步方案概览 根据如下同步方案,查看同步任务的注意事项及限制:...

CREATE DATABASE

创建新数据库。语法 CREATE DATABASE name 说明 CREATE DATABASE 不能在事务块内部执行。参数 参数 说明 name 要创建的数据库的名称。示例 创建新数据库:CREATE DATABASE employees;

CREATE DATABASE

CREATE DATABASE 用于创建一个新的PolarDB数据库。简介 CREATE DATABASE 创建一个新的PolarDB数据库。要创建一个数据库,你必须是一个超级用户或者具有特殊的 CREATEDB 特权。默认情况下,新数据库将通过克隆标准系统数据库 template1 被...

OceanBase 数据库 Oracle 租户至 Oracle 数据库的同步...

如果是 Oracle 数据库至 OceanBase 数据库等库到库的数据迁移或数据同步,OceanBase 数据库上的 PK 名称和 Oracle 数据库的不同,因此无法在 OceanBase 数据库中删除。迁移 OceanBase 数据库 Oracle 租户的数据至 Oracle 数据库时,不支持...

同步时源为MongoDB的注意事项及限制

如果同步的源数据库类型为MongoDB,如自建MongoDB、云数据库MongoDB,您需要在配置具体的同步任务前,参考本文的注意事项及限制,以保障数据同步任务的正常运行。源库为MongoDB的同步方案概览 根据如下同步方案,查看同步任务的注意事项及...

新建 PostgreSQL 数据

Database Name RDS PostgreSQL 数据库的名称。说明 当数据源作为源端时,数据迁移或数据同步项目仅支持选择指定 Database Name 下的迁移或同步对象。备注(可选)数据源的备注信息。单击 测试连接,验证数据传输和数据源的网络连接,以及...

Redis数据迁移方案概览

借助数据传输服务DTS(Data Transmission Service),云数据库Redis版 提供了多种数据迁移方案,包括自建Redis数据库迁移上云、云数据库Redis版 实例间的数据迁移、其他云Redis数据迁移到阿里云等,满足多种业务场景下Redis数据迁移的需求...

点表-轨迹表数据同步

自动同步:通过触发器,在插入点表时,自动将点同步到轨迹表中。点表和轨迹表可以实时同步,但会影响点表的写入性能。手动同步SQL示例:说明 手动同步时,需要在点表上增加一列以标记此点是否已经同步到轨迹表。在点表增加一列标记是否同步...

全球数据库市场发展与机遇

知名市场研究机构Forrester在最新发布的数据库评估报告《The Forrester Wave™:Database-As-A-Service,Q2 2019》中将阿里云数据库列入“强劲表现者(strong performance)”象限。阿里云数据库技术已先后走过了“商业-开源-自研”的演进...

pg_db_role_setting

目录 pg_db_role_setting 为每一个角色和数据库组合记录被设置到运行时配置变量的默认值。和大部分系统目录不同,pg_db_role_setting 是在集簇的所有数据库之间共享的:在一个集簇中只有一份 pg_db_role_setting 拷贝,而不是每个数据库一...

数据库库表重命名

适用场景 默认情况下,被迁移或同步的对象(例如数据库、表等)在源端和目标端的名称相同,您可以通过数据传输提供的对象名称重命名功能,设置被迁移或同步的对象在目标端的名称,实现源端和目标端之间数据库的库名、表名的映射。...

同步时源为SQL Server的注意事项及限制

源库为SQL Server的同步方案概览 根据同步方案,查看同步任务的注意事项及限制:说明 DTS默认同步到目标数据库中时会取消外键约束,因此源数据库的级联、删除等操作不会同步到如下目标数据库:SQL Server MySQL(RDS MySQL、自建MySQL)...

OceanBase 数据库 MySQL 租户之间的数据同步

本文为您介绍如何创建 OceanBase 数据库 MySQL 租户(简称为 OB_MySQL)至 OceanBase 数据库 MySQL 租户的数据同步项目。前提条件 数据传输已具备云资源访问权限。详情请参见 数据传输迁移角色授权。已为 OceanBase 数据库创建专用于数据...

离线同步数据质量排查

在实际生产业务当中,在线数据源往往有对应的预发或者测试环境,而实际同步任务使用的生产数据库和预发测试数据库不一致,需要进行数据检查对比是否有环境差异。在半结构化数据同步时往往涉及多个文件同步,您需要确认数据读取、写出的文件...

从SLS同步

本文介绍如何使用日志投递功能从日志服务(SLS)同步数据到云数据库ClickHouse。注意事项 云数据库ClickHouse的企业版集群和在2021年12月份之后创建的社区兼容版集群不支持日志投递功能。云数据库ClickHouse目前不支持数组类型的数据。支持...

启动和暂停数据同步项目

启动数据同步项目 创建数据同步项目时,如果在预检查完成后仅保存该数据同步项目,未进行启动,则需要在同步项目列表中手动启动数据同步项目。登录 OceanBase 管理控制台。在左侧导航栏,单击 数据传输>数据同步。在 同步项目列表 页面,...

常见问题

数据同步过程中如果源实例中的数据库名、表名或者列名中含有划线(-)会报错吗?由于ADB中不允许数据库名、表名或者列名中含有划线(-),为保证数据同步成功,系统会将中划线(-)映射为下划线(_)。如果在数据同步过程中遇到其他因数据...

DMS支持的数据库

关系型数据库 MySQL SQL Server PostgreSQL MariaDB OceanBase MySQL模式 OceanBase Oracle模式 OceanBase ODP Oracle DB2 达梦数据库 OpenGauss 数据仓库 ClickHouse SelectDB NoSQL数据库 Redis MongoDB 大数据 Hive 录入他云/自建数据库...

配置SQLServer数据

此连接串中的Database为本数据源的默认数据库,但在配置同步任务时,您可以使用相应RDS实例下所有的数据库。用户名 登录数据库的用户名。密码 登录数据库的密码。选择 资源组连通性 类型为 数据集成。在资源组列表,单击相应资源组后的 ...

无感集成(Zero-ETL)

为了解决这些问题,阿里云瑶池数据库提供了无感集成(Zero-ETL)功能,可以快速构建业务系统(OLTP)和数据仓库(OLAP)之间的数据同步链路,将业务系统(OLTP)的数据自动进行提取、转换清洗和加载到数据仓库(OLAP),从而一站式完成数据...

QGIS访问Ganos

QGIS(原称Quantum GIS)是一个用户界面友好的开源桌面端软件,支持多种矢量、栅格格式以及数据库作为数据源,同时支持数据的可视化、管理、编辑、分析以及印刷地图的制作。创建Ganos连接 直接创建PostGIS Connection,填入必要项参数,...

通过DTS采集数据

注意 DataHub同步的是增量数据,您的数据库中必须插入、删除或更新一条或多条数据后,才会同步到DataHub中。本案例采用手动插入数据的方法,但在实际情况中,都是将用户的购买行为,通过程序的方式动态同步数据库中的。进行数据抽样时,...

OpenJump访问Ganos

Database 需要连接的数据库名。User 数据库用户名。Password 密码。单击 确定 后可以看到ganos库中所有的图层信息。数据浏览与操作 连接后可以对数据进行浏览,可以进行放大、缩小、漫游等基本操作,也可以进行符号化渲染等。也可以对几何...

DBA_DB_LINKS

DBA_DB_LINKS 视图提供数据库中的所有 database link 的相关信息。名称 类型 说明 owner TEXT database link 所有者的用户名。db_link TEXT database link 的名称。type CHARACTER VARYING 远程服务器的类型。username TEXT 登录用户的用户...

ALTER ROLE

其余的变体用于更改一个角色的配置变量的会话默认值,可以为所有数据库设置,或者只为 IN DATABASE 中指定的数据库设置。如果指定的是 ALL 而不是一个角色名,将会为所有角色更改该设置。把 ALL 和 IN DATABASE 一起使用实际上和使用命令 ...

无感数据集成(Zero-ETL)

为了解决这些问题,阿里云瑶池数据库提供了无感集成(Zero-ETL)功能,可以快速构建业务系统(OLTP)和数据仓库(OLAP)之间的数据同步链路,将业务系统(OLTP)的数据自动进行提取、转换清洗和加载到数据仓库(OLAP),从而一站式完成数据...

同步字典

如果您在DMS进行数据库结构变更,DMS会自动同步字典,否则需要手动同步字典。背景信息 字典信息用于实现数据库、表、字段、可编程对象的权限分级管控。DMS采集的字典信息包含如下内容:数据库名称和字符集信息。说明 管控模式为安全协同...

SYS_CONTEXT

DATABASE_ROLE 数据库角色,支持的角色类型如下:PRIMARY REPLICA STANDBY SESSION_USERID 当前会话的用户ID。CLIENT_INFO 会话中client_info字段(DBMS_APPLICATION_INFO.CLIENT_INFO)。具体内容,请参见 DBMS_APPLICATION_INFO。HOST ...

监控

本文介绍了逻辑复制的监控内容。简介 因为逻辑复制是基于与物理流复制相似的架构的,一个发布节点上的监控也类似于对物理复制主节点的监控。有关订阅的监控信息在 pg_...如果有任何表的数据同步正在进行,对正在被同步的表会有额外的工作者。

SYS_CONTEXT

DATABASE_ROLE 数据库角色,支持的角色类型如下:PRIMARY REPLICA STANDBY SESSION_USERID 当前会话的用户ID。CLIENT_INFO 会话中client_info字段(DBMS_APPLICATION_INFO.CLIENT_INFO)。具体内容,请参见 DBMS_APPLICATION_INFO。HOST ...
共有200条 < 1 2 3 4 ... 200 >
跳转至: GO
产品推荐
云服务器 安全管家服务 安全中心
这些文档可能帮助您
云数据库 RDS 云数据库 Redis 版 数据库备份 DBS 云数据库 MongoDB 版 弹性公网IP 短信服务
新人特惠 爆款特惠 最新活动 免费试用