配置GoldenDB输出组件
同步其他数据源的数据至GoldenDB数据源的场景中，完成源数据源的信息配置后，需要配置GoldenDB输出组件写入数据的目标数据源。本文为您介绍如何配置GoldenDB输出组件。前提条件 已创建GoldenDB数据源，如何创建，请参见 创建GoldenDB数据源...
配置GoldenDB输出组件
同步其他数据源的数据至GoldenDB数据源的场景中，完成源数据源的信息配置后，需要配置GoldenDB输出组件写入数据的目标数据源。本文为您介绍如何配置GoldenDB输出组件。前提条件 已创建GoldenDB数据源，如何创建，请参见 创建GoldenDB数据源...
配置Impala输出组件
同步其他数据源的数据至Impala数据源的场景中，完成源数据源的信息配置后，需要配置Impala输出组件写入数据的目标数据源。本文为您介绍如何配置Impala输出组件。前提条件 已创建Impala数据源，如何创建，请参见 创建Impala数据源。进行...
Kafka单表实时入湖OSS（HUDI）
说明 OSS数据源在下一步新增OSS数据源时，指定Endpoint地址，即可实现OSS数据源与独享数据集成资源组的网络连通，无需特殊配置。添加数据源 新建Kafka数据源 在DataWorks 数据源管理 页面，单击 新建数据源，根据界面提示新建Kafka数据源。...
配置OpenGauss输出组件
同步其他数据源的数据至OpenGauss数据源的场景中，完成源数据源的信息配置后，需要配置OpenGauss输出组件写入数据的目标数据源。本文为您介绍如何配置OpenGauss输出组件。前提条件 已创建OpenGauss数据源，如何创建，请参见 创建OpenGauss...
配置OpenGauss输出组件
同步其他数据源的数据至OpenGauss数据源的场景中，完成源数据源的信息配置后，需要配置OpenGauss输出组件写入数据的目标数据源。本文为您介绍如何配置OpenGauss输出组件。前提条件 已创建OpenGauss数据源，如何创建，请参见 创建OpenGauss...
配置TiDB输出组件
同步其他数据源的数据至TiDB数据源的场景中，完成源数据源的信息配置后，需要配置TiDB输出组件写入数据的目标数据源。本文为您介绍如何配置TiDB输出组件。前提条件 已创建TiDB数据源，如何创建，请参见 创建TiDB数据源。进行TiDB输出组件...
配置Impala输出组件
同步其他数据源的数据至Impala数据源的场景中，完成源数据源的信息配置后，需要配置Impala输出组件写入数据的目标数据源。本文为您介绍如何配置Impala输出组件。前提条件 已创建Impala数据源，如何创建，请参见 创建Impala数据源。进行...
配置TiDB输出组件
同步其他数据源的数据至TiDB数据源的场景中，完成源数据源的信息配置后，需要配置TiDB输出组件写入数据的目标数据源。本文为您介绍如何配置TiDB输出组件。前提条件 已创建TiDB数据源，如何创建，请参见 创建TiDB数据源。进行TiDB输出组件...
数据脱敏
脱敏源为 RDS表/PolarDB-X表/MaxCompute表/PolarDB表/OceanBase表/ADB-MySQL表 时配置项说明 脱敏源配置项 是否必填 配置描述 数据存储类型 是 选择脱敏文件的数据存储类型。支持的存储类型包括：RDS表、PolarDB-X表、MaxCompute表、...
配置StarRocks输出组件
同步其他数据源的数据至StarRocks数据源的场景中，完成源数据源的信息配置后，需要配置StarRocks输出组件写入数据的目标数据源。本文为您介绍如何配置StarRocks输出组件。前提条件 已创建StarRocks数据源，如何创建，请参见 创建StarRocks...
配置StarRocks输出组件
同步其他数据源的数据至StarRocks数据源的场景中，完成源数据源的信息配置后，需要配置StarRocks输出组件写入数据的目标数据源。本文为您介绍如何配置StarRocks输出组件。前提条件 已创建StarRocks数据源，如何创建，请参见 创建StarRocks...
配置订阅任务（新控制台）
源库信息 选择已有的DMS数据库实例（可选，如未创建可忽略此处选择，直接在下方配置数据库信息即可）若您已将源库录入至DMS中，可在此选择，选择后无需填写下方的源库信息。若未录入，请忽略该选项。数据库类型 选择 MySQL。接入方式 选择 ...
创建AnalyticDB for PostgreSQL数据源
方式一：通过阿里云实例模式创建数据源 配置基础信息。参数 说明 数据源名称 定义数据源在DataWorks的名称，名称必须唯一。配置模式 选择阿里云实例模式。所属云账号 定义创建数据源所使用的AnalyticDB for PostgreSQL实例属于当前阿里云主...
配置AnalyticDB for MySQL 3.0输出组件
同步其他数据源的数据至AnalyticDB for MySQL 3.0数据源的场景中，完成源数据源的信息配置后，需要配置AnalyticDB for MySQL 3.0输出组件的目标数据源。本文为您介绍如何配置AnalyticDB for MySQL 3.0输出组件。前提条件 已创建AnalyticDB ...
配置AnalyticDB for MySQL 3.0输出组件
同步其他数据源的数据至AnalyticDB for MySQL 3.0数据源的场景中，完成源数据源的信息配置后，需要配置AnalyticDB for MySQL 3.0输出组件的目标数据源。本文为您介绍如何配置AnalyticDB for MySQL 3.0输出组件。前提条件 已创建AnalyticDB ...
配置MySQL输出组件
同步其他数据源的数据至MySQL数据源的场景中，完成源数据源的信息配置后，需要配置MySQL输出组件的目标数据源。本文为您介绍如何配置MySQL输出组件。前提条件 已创建MySQL数据源，详情请参见 创建MySQL数据源。进行FTP输出组件属性配置的...
配置MySQL输出组件
同步其他数据源的数据至MySQL数据源的场景中，完成源数据源的信息配置后，需要配置MySQL输出组件的目标数据源。本文为您介绍如何配置MySQL输出组件。前提条件 已创建MySQL数据源，详情请参见 创建MySQL数据源。进行FTP输出组件属性配置的...
创建ClickHouse数据源
创建数据源 配置基础信息。您可根据界面提示配置数据源的名称等基础信息，核心配置参数如下表所示。说明 标准模式工作空间，需分别创建开发环境数据源和生产环境数据源。工作空间模式，详情请参见 必读：简单模式和标准模式的区别。参数 ...
配置Hive输出组件
同步其他数据源的数据至Hive数据源的场景中，完成源数据源的信息配置后，需要配置Hive输出组件写入数据的目标数据源。本文为您介绍如何配置Hive输出组件。使用限制 Hive输出组件支持写入文件格式为 orc、parquet、text、iceberg（iceberg...
LogHub（SLS）实时ETL同步至Hologres
新建数据源 配置LogHub（SLS）数据源 您可以手动添加LogHub（SLS）数据源至DataWorks，详情请参见 配置LogHub（SLS）数据源。新建Hologres数据源 获取Hologres数据源信息 进入 Hologres产品控制台。找到您要进行数据同步的Hologres数据源，...
配置MaxCompute输出组件
同步其他数据源的数据至MaxCompute数据源的场景中，完成源数据源的信息配置后，需要配置MaxCompute输出组件写入数据到目标数据源。本文为您介绍如何配置MaxCompute输出组件。操作步骤 请参见 离线管道组件开发入口，进入离线单条管道脚本的...
配置MaxCompute输出组件
同步其他数据源的数据至MaxCompute数据源的场景中，完成源数据源的信息配置后，需要配置MaxCompute输出组件写入数据到目标数据源。本文为您介绍如何配置MaxCompute输出组件。操作步骤 请参见 离线管道组件开发入口，进入离线单条管道脚本的...
配置源库信息
本文介绍配置源库信息的具体方法。前提条件 当前仅支持在华东1（杭州）、华东2（上海）、华北1（青岛）、华北2（北京）、华北3（张家口）、华南1（深圳）、华南3（广州）和中国香港创建ETL任务。当前源库支持 MySQL、PolarDB MySQL、Oracle...
管理中心功能概览
例如，在配置数据集成任务前，可先在DataWorks数据源管理页面，配置好需同步的源端和目标端数据库或数据仓库的相关信息，并在同步过程中，通过数据源名称来控制读取和写入的数据库或数据仓库。开源集群 在 开源集群 处，可管理已绑定至...
配置TDH Inceptor输出组件
同步其他数据源的数据至TDH Inceptor数据源的场景中，完成源数据源的信息配置后，需要配置TDH Inceptor输出组件写入数据的目标数据源。本文为您介绍如何配置TDH Inceptor输出组件。使用限制 TDH Inceptor输出组件支持写入文件格式为orc、...
添加IP应用加速域名
第二部分：配置源站信息 如果您需要添加多个源站信息，请根据下表分多次添加。参数 说明 类型 IP：支持配置单个或者多个IP作为源站地址，不支持内网IP，支持IPv4地址和IPv6地址，不能全部配置IPv6地址，必须至少配置一个IPv4地址，使用阿里...
全球加速联动CDN实现回源加速
在 源站信息 区域单击 新增源站信息，在 新增源站信息 对话框配置以下信息。参数 说明 源站信息 配置CDN的源站信息，当CDN节点无缓存资源时，会回源站获取资源并缓存至CDN节点。本文选择 源站域名，然后输入组合购买实例后系统为全球加速...
创建同步任务
配置数据源信息。在 新增MySQL数据源 对话框，配置各项参数。本文以创建 阿里云实例模式 类型为例。参数说明如下。参数 描述 数据源类型 当前选择的数据源类型为 阿里云实例模式。数据源名称 自定义数据源名称。数据源描述 数据源的简单...
Kafka实时ETL同步至Hologres
在弹出的 自定义路由 窗口，单击 新增路由，填写路由信息，关键配置信息如下。目的VPC：选择数据源所在的地域和专有网络。目的Switch实例：选择数据源所在的交换机。步骤2 添加数据库白名单（以下以AliKafka为例）获取需要绑定的白名单IP。...
使用ETL分析实时订单
步骤一：配置源库信息 将实时交易数据配置为流表，业务维度数据配置为维表。步骤二：配置表JOIN 将维表和流表数据关联成一张宽表。步骤三：配置表记录过滤 配置过滤条件（单笔金额需超过3000），筛选宽表中的数据。步骤四：配置目标库信息 ...
配置FTP输出组件
同步其他数据源的数据至FTP数据源的场景中，完成源数据源的信息配置后，需要配置FTP输出组件的目标数据源。本文为您介绍如何配置FTP输出组件。前提条件 已创建FTP数据源，详情请参见 创建FTP数据源。进行FTP输出组件属性配置的账号，需具备...
配置FTP输出组件
同步其他数据源的数据至FTP数据源的场景中，完成源数据源的信息配置后，需要配置FTP输出组件的目标数据源。本文为您介绍如何配置FTP输出组件。前提条件 已创建FTP数据源，详情请参见 创建FTP数据源。进行FTP输出组件属性配置的账号，需具备...
通过整库迁移配置集成任务
配置数据源信息。参数 描述 同步来源 数据源类型 选择同步来源的数据源类型。Dataphin支持的同步来源数据源类型包括 Hive、MySQL、Oracle、Microsoft SQL Server、OceanBase、IBM DB2、MaxCompute、FTP、PostgreSQL。数据源创建，请参见 ...
配置数据订阅任务
源库信息 选择已有的数据库连接（可选，如未创建可忽略此处选择，直接在下方配置数据库信息即可）您可以按实际需求，选择是否使用已有实例。如使用已有实例，下方数据库信息将自动填入，您无需重复输入。如不使用已有实例，您需要输入下方...
配置数据同步任务
配置 源库信息 和 目标库信息。警告 选择源和目标实例后，建议您仔细阅读页面上方显示的 使用限制，否则可能会导致任务失败或数据不一致。类别 配置 说明 无 任务名称 DTS会自动生成一个任务名称，建议配置具有业务意义的名称（无唯一性...
配置数据迁移任务
配置 源库信息 和 目标库信息。警告 选择源和目标实例后，建议您仔细阅读页面上方显示的 使用限制，否则可能会导致任务失败或数据不一致。类别 配置 说明 无 任务名称 DTS会自动生成一个任务名称，建议配置具有业务意义的名称（无唯一性...
通过整库迁移配置集成任务
配置数据源信息。参数 描述 同步来源 数据源类型 选择同步来源的数据源类型。Dataphin支持的同步来源数据源类型包括MySQL、Oracle、Microsoft SQL Server、OceanBase、IBM DB2、MaxCompute、FTP、PostgreSQL。数据源创建，请参见 通过整库...
新建自定义数据源
数据源配置 配置数据源：如果开发模式是Basic模式，则选择 生产数据源。如果开发模式是Dev-Prod模式，则可以通过以下方式配置数据源：单击 生产+开发数据源，配置生产环境和开发环境的数据源。单击 生产数据源，配置生产数据源。完成生产...
新建自定义数据源
数据源配置 配置数据源：如果开发模式是Basic模式，则选择 生产数据源。如果开发模式是Dev-Prod模式，则可以通过以下方式配置数据源：单击 生产+开发数据源，配置生产环境和开发环境的数据源。单击 生产数据源，配置生产数据源。完成生产...
- 产品推荐
- 这些文档可能帮助您