新建离线自定义源类型
对于非RDBMS类型的数据库，数据源的链接方式与配置项比较多样化。您可通过JSON定义数据源连接所需配置项，并上传读/写插件驱动包创建非RDBMS类型自定义源。集成组件生成说明 完成创建离线自定义源类型后，在集成管道的组件库中会自动生成该...
配置MySQL输入
MySQL输入基于Binlog实时订阅的方式，实时读取您配置的MySQL数据库表数据。本文为您介绍，如何配置MySQL输入，以及配置输入之前需要准备的网络环境及账号权限。前提条件 配置MySQL输入之前，请确保已完成以下规划与准备工作。已配置同步...
数据建模
对于已经创建的数据库，可以通过修改数据库参数 partition_interval 的方式设置时间分区。但是目前需要等到下次分区自动切换时，修改后的时间分区才会生效，对于已经创建的分区无法生效。ALTER DATABASE DB4 WITH(partition_interval=60);...
配置VPC数据源
通过专有网络VPC数据源的配置，您可以将专有网络VPC内的数据库接入到DataV中，并作为组件的数据源进行大屏展示。背景信息 了解专有网络VPC，详情请参见 什么是专有网络。操作步骤 登录 DataV控制台。在 我的数据 页签中选择 数据源管理，...
DataV连接
在工作台页面，单击 数据准备>数据源，进入数据源页面，单击 新建数据源。从 类型 列表中，选择 AnalyticDB for PostgreSQL。在 网络 列表中选择连接的网络类型，并选择实例所在的区域。内网：通过 AnalyticDB PostgreSQL版 的内网地址连接...
新建数据库SQL任务
执行数据库SQL需要获取数据源的执行权限，不支持表级权限校验。更多信息，请参见 申请、续期和交还数据源权限。不支持基于MySQL、Oracle数据源SQL数据更新触发调度数据源质量规则。更新信息，请参见 创建数据表质量规则。查询结果不支持全...
新建数据库SQL任务
执行数据库SQL需要获取数据源的执行权限，不支持表级权限校验。更多信息，请参见 申请、续期和交还数据源权限。不支持基于MySQL、Oracle数据源SQL数据更新触发调度数据源质量规则。更新信息，请参见 创建全域数据表质量规则。查询结果不...
新建数据库
操作步骤 新建数据库 您可以使用以下两种方式来新建数据库：Hologres管控台新建数据库 Hologres管控台 支持以可视化的方式新建数据库，在Hologres管控台进入对应实例的详情页，选择 数据库管理，单击 新增数据库 进行创建。说明 当前版本的...
FineBI
单击 下一步，选择数据库，单击 外部数据库 中的 配置数据库。在 外接数据库配置 页面，按照页面提示进行参数配置。说明 此处应填写MySQL数据库的连接信息，而不是 AnalyticDB MySQL版 数据库连接信息。参数 说明 数据库类型 选择 MySQL。...
使用DTS迁移副本集架构的自建MongoDB数据库上云
使用数据传输服务DTS（Data Transmission Service），将副本集架构的自建MongoDB数据库迁移至云数据库MongoDB中。DTS支持全量数据迁移和增量数据迁移，同时使用这两种迁移类型可以实现在不停服的情况下，平滑地完成数据库的迁移上云。除本...
使用DTS迁移单节点架构的自建MongoDB数据库上云
本文介绍如何使用数据传输服务DTS（Data Transmission Service），将单节点架构的自建MongoDB数据库迁移至云数据库MongoDB中。除本方法外，您也可以 使用MongoDB工具将自建数据库迁移至单节点实例。更多数据迁移或数据同步场景的解决方案，...
数据库采集
说明 建议在业务低峰期采集数据库数据，通常业务低峰期采集只需要较短时间就可以完成采集。采集器对CPU要求不高，如果涉及到数据库对象的getddl操作，采集开始时CPU负载会有一些增加，负载增加量取决于源数据库规格和当前负载。采集器对源...
使用DataWorks
MaxCompute支持通过DataWorks的数据集成功能将MaxCompute中的数据以离线方式导出至其他数据源。当您需要将MaxCompute中的数据导出至其他数据源执行后续数据处理操作时，您可以使用数据集成功能导出数据。本文为您介绍如何将MaxCompute的...
通过向导模式配置离线同步任务
您需要在数据集成同步任务配置前，配置好您需要同步的源端和目标端数据库，以便在同步任务配置过程中，可通过选择数据源名称来控制同步任务的读取和写入数据库。离线同步支持的数据源及其配置详情请参见 支持的数据源与读写插件。说明 数据...
创建同步任务
配置离线同步任务，当您选择使用多个数据库时，则每个数据库均需要配置一个数据源。认证选项 选择 无认证。备库设置 如果数据源具备只读实例（备库），可以在配置任务时开启 备库设置，并选择备库ID。设置备库的优势是防止干扰主库，不影响...
从自建MySQL迁移至MyBase MySQL
本文以ECS自建数据库为源数据库，MyBase MySQL实例为目标数据库介绍配置流程，其他数据源配置流程与本案例类似。源数据库 目标数据库 阿里云实例。以下类型的自建数据库：有公网IP的自建数据库。ECS上的自建数据库。通过专线、VPN网关或...
RDS MySQL实例间的单向同步
注意事项 DTS在执行全量数据初始化时将占用源库和目标库一定的读写资源，可能会导致数据库的负载上升，在数据库性能较差、规格较低或业务量较大的情况下（例如源库有大量慢SQL、存在无主键表或目标库存在死锁等），可能会加重数据库压力，...
创建数据流
数据库：配置项 描述 数据库类型 选择输出数据的目标数据库类型。数据库 搜索并选择输出数据的目标数据库。说明 如果数据库未登录，在 登录实例 对话框中，输入 数据库账号 和 数据库密码 登录数据库。表名 选择或输入数据流输出数据的目标...
自建MySQL迁移至PolarDB MySQL版
本文以有公网IP的自建数据库为例介绍配置流程，其他类型的源数据库配置流程与本案例类似。RDS MySQL 实例。以下类型的自建数据库：有公网IP的自建数据库。ECS上的自建数据库。通过专线、VPN网关或智能网关接入的自建数据库。通过数据库网关...
从ECS上的自建MySQL同步至RDS
注意事项 DTS在执行全量数据初始化时将占用源库和目标库一定的读写资源，可能会导致数据库的负载上升，在数据库性能较差、规格较低或业务量较大的情况下（例如源库有大量慢SQL、存在无主键表或目标库存在死锁等），可能会加重数据库压力，...
PolarDB分布式版逻辑备份
数据库备份DBS可满足 PolarDB分布式版 实例异地备份、长期归档、分布式备份等需求。前提条件 数据库为PolarDB-X 1.0，存储类型为RDS MySQL，MySQL版本为MySQL 5.x。功能概述 功能 说明 备份SQL文件 采用逻辑备份技术，备份成JSON文件。备份...
EMR Hive数据整库离线同步至MaxCompute
Hive数据源包括 阿里云实例模式，连接串模式，CDH集群内置模式 三种类型，若您配置的数据源为阿里云EMR，推荐您使用 阿里云实例模式 配置数据源；若您配置的数据源非阿里云EMR，您可以使用 连接串模式 配置数据源；若您的项目空间配置了CDH...
EMR Hive数据整库离线同步至MaxCompute
Hive数据源包括 阿里云实例模式，连接串模式，CDH集群内置模式 三种类型，若您配置的数据源为阿里云EMR，推荐您使用 阿里云实例模式 配置数据源；若您配置的数据源非阿里云EMR，您可以使用 连接串模式 配置数据源；若您的项目空间配置了CDH...
自建Oracle迁移至PolarDB PostgreSQL版
建议在执行数据迁移前了解源库为Oracle时DTS支持的能力和限制条件，并使用ADAM（Advanced Database&Application Migration）进行数据库评估，以便您平滑地完成Oracle迁移上云。更多信息，请参见 Oracle数据库的限制和准备工作 和 数据库...
不同阿里云账号下RDS实例间的数据同步
注意事项 DTS在执行全量数据初始化时将占用源库和目标库一定的读写资源，可能会导致数据库的负载上升，在数据库性能较差、规格较低或业务量较大的情况下（例如源库有大量慢SQL、存在无主键表或目标库存在死锁等），可能会加重数据库压力，...
RDS MySQL同步至PolarDB MySQL版
本文以RDS MySQL实例为例介绍配置流程，其他类型的源数据库配置流程与本案例类似。RDS MySQL 实例。ECS上的自建数据库。通过专线、VPN网关或智能网关接入的自建数据库。通过数据库网关接入的自建数据库。通过云企业网CEN接入的自建数据库。...
自建MySQL迁移至PolarDB MySQL版
本文以有公网IP的自建数据库为例介绍配置流程，其他类型的源数据库配置流程与本案例类似。RDS MySQL 实例。以下类型的自建数据库：有公网IP的自建数据库。ECS上的自建数据库。通过专线、VPN网关或智能网关接入的自建数据库。通过数据库网关...
自建Oracle迁移至云原生数据仓库 AnalyticDB ...
建议在执行数据迁移前了解源库为Oracle时DTS支持的能力和限制条件，并使用ADAM（Advanced Database&Application Migration）进行数据库评估，以便您平滑地完成Oracle迁移上云。更多信息，请参见 Oracle数据库的限制和准备工作 和 数据库...
自建Oracle迁移至PolarDB MySQL版
建议在执行数据迁移前了解源库为Oracle时DTS支持的能力和限制条件，并使用ADAM（Advanced Database&Application Migration）进行数据库评估，以便您平滑地迁移上云。更多信息，请参见 Oracle数据库的限制和准备工作 和 数据库评估概览。...
自建Oracle间迁移
建议在执行数据迁移前了解源库为Oracle时DTS支持的能力和限制条件，并使用ADAM（Advanced Database&Application Migration）进行数据库评估，以便您平滑地迁移上云。更多信息，请参见 Oracle数据库的限制和准备工作 和 数据库评估概览。...
RDS MySQL同步至自建Oracle
本文以RDS MySQL实例为源数据库，ECS上自建Oracle实例为目标数据库为例介绍配置流程，其他数据源配置流程与本案例类似。源数据库 目标数据库 RDS MySQL 实例。ECS上的自建数据库。通过专线、VPN网关或智能网关接入的自建数据库。通过数据库...
离线同步能力说明
数据集成的离线同步功能为您提供数据读取（Reader）和写入插件（Writer），方便您通过定义来源与去向数据源，并结合DataWorks调度参数使用，将源端数据库中全量或增量数据的同步至目标数据库中。本文为您介绍离线同步的相关能力。使用限制 ...
自建Oracle迁移至DataHub
建议在执行数据迁移前了解源库为Oracle时DTS支持的能力和限制条件，并使用ADAM（Advanced Database&Application Migration）进行数据库评估，以便您平滑地完成Oracle迁移上云。更多信息，请参见 Oracle数据库的限制和准备工作 和 数据库...
自建Oracle迁移至自建PostgreSQL
建议在执行数据迁移前了解源库为Oracle时DTS支持的能力和限制条件，并使用ADAM（Advanced Database&Application Migration）进行数据库评估，以便您平滑地迁移上云。更多信息，请参见 Oracle数据库的限制和准备工作 和 数据库评估概览。...
Oracle物理备份
数据库备份DBS 支持对Windows或Linux操作系统上的Oracle数据库进行物理备份，支持备份Oracle单实例、Data Guard Physical Standby、RAC等多种架构的Oracle数据库。本文介绍Oracle物理备份，关于Oracle逻辑备份的信息，请参见 Oracle逻辑...
配置数据同步任务
数据同步功能帮助您实现数据源之间的数据实时同步，适用于数据异地多活、数据异地灾备、本地数据灾备、跨境数据同步、云BI及实时数据仓库等多种业务场景。本文以 RDS MySQL 同步至 RDS MySQL 为例为您介绍在DTS专属集群中配置数据同步任务...
ApsaraDB For OceanBase数据源
ApsaraDB for OceanBase数据源提供读取和写入ApsaraDB for OceanBase数据的双向功能，您可以使用ApsaraDB for OceanBase数据源配置同步任务同步数据。本文为您介绍DataWorks的ApsaraDB For Oceanbase数据同步能力支持情况。支持的版本 离线...
自建Oracle迁移至RDS PostgreSQL
建议在执行数据迁移前了解源库为Oracle时DTS支持的能力和限制条件，并使用ADAM（Advanced Database&Application Migration）进行数据库评估，以便您平滑地迁移上云。更多信息，请参见 Oracle数据库的限制和准备工作 和 数据库评估概览。...
自建Oracle同步至DataHub
建议在执行数据同步前了解源库为Oracle时DTS支持的能力和限制条件，并使用ADAM（Advanced Database&Application Migration）进行数据库评估，以便您平滑地同步上云。更多信息，请参见 Oracle数据库的限制和准备工作 和 数据库评估概览。...
实时消费Kafka数据
源端配置 数据源 选择在新增实时数据源中配置的数据源，目前仅支持Kafka为源的数据源。group_name Kafka的消费者组。failback_offset 消费位点。earliest：从最早可用位点消费。latest：从最新的位点开始消费。投递保证 流计算中的一致性...
- 产品推荐
- 这些文档可能帮助您