配置OSS输入组件
选取Dataphin系统中已配置的数据源，且数据源需同时具备以下两个条件：数据源类型为 OSS数据源。执行 属性配置 的账号具有该数据源的同步读权限，如果没有权限，则需要申请数据源权限，详情请参见 申请数据源权限。同时您可以单击 数据源 ...
配置Elasticsearch输入组件
选取Dataphin系统中已配置的数据源，且数据源需同时具备以下两个条件：数据源类型为 Elasticsearch数据源。执行 属性配置 的账号具有该数据源的同步读权限，如果没有权限，则需要申请数据源权限，详情请参见 申请、续期和交还数据源权限。...
配置Elasticsearch输入组件
选取Dataphin系统中已配置的数据源，且数据源需同时具备以下两个条件：数据源类型为 Elasticsearch数据源。执行 属性配置 的账号具有该数据源的同步读权限，如果没有权限，则需要申请数据源权限，详情请参见 申请、续期和交还数据源权限。...
添加成员并设置角色
前提条件 在开始执行操作前，请确认您已满足以下条件：需要添加至服务项目的RAM用户已在Dataphin成员列表中。您可以在管理中心查看Dataphin成员。如果用户不在Dataphin成员列表中，您需要添加用户至Dataphin成员列表中。具体操作，请参见 ...
新建和管理标准集目录
前提条件 已具备超级管理员或数据标准管理员用户角色，如何添加角色，请参见 添加、配置及管理Dataphin成员。使用限制 新建标准集目录层级不能超过5级。所有层级的标准集目录总数不超过1000。新建标准集目录 在Dataphin首页，单击顶部菜单...
添加及管理监控对象
序号 描述 Dataphin数据表 ① 筛选及搜索区 您可以通过筛选条件过滤需要查询的质量规则。您可以根据 我负责的、校验开关、最近一次校验状态、质量负责人、表类型、数据板块、所属项目、资源负责人 条件进行精确筛选。② 列表区 为您展示 表...
添加及管理监控对象
序号 描述 Dataphin数据表 ① 筛选及搜索区 您可以通过筛选条件过滤需要查询的质量规则。您可以根据 我负责的、校验开关、最近一次校验状态、质量负责人、表类型、数据板块、所属项目、资源负责人 条件进行精确筛选。② 列表区 为您展示 表...
数据源管理概述
在使用Dataphin前，您可将需要引入Dataphin的数据源接入到Dataphin中，已接入的数据源可用于读取原始数据和写入数据建设过程中的数据。Dataphin具备丰富的数据源类型接入，支持对接如MaxCompute、Hive等数据仓库，也支持对接企业传统数据库...
数据源管理概述
在使用Dataphin前，您可将需要引入Dataphin的数据源接入到Dataphin中，已接入的数据源可用于读取原始数据和写入数据建设过程中的数据。Dataphin具备丰富的数据源类型接入，支持对接如MaxCompute、Hive等数据仓库，也支持对接企业传统数据库...
配置IBM DB2输入组件
同步IBM DB2数据源的数据至其他数据源的场景中，您需要先配置IBM DB2输入组件读取的源数据源信息，再配置数据同步的目标数据源。本文为您介绍如何配置IBM DB2输入组件。前提条件 在开始执行操作前，请确认您已完成以下操作：已创建IBM DB2...
配置IBM DB2输入组件
同步IBM DB2数据源的数据至其他数据源的场景中，您需要先配置IBM DB2输入组件读取的源数据源信息，再配置数据同步的目标数据源。本文为您介绍如何配置IBM DB2输入组件。前提条件 在开始执行操作前，请确认您已完成以下操作：已创建IBM DB2...
配置DataHub输入组件
说明 进行属性配置的账号需具备该数据源的同步读权限，如果没有权限，则需要申请数据源权限，详情请参见 申请、续期和交还数据源权限。主题 DataHub的topic名称。单击下拉列表，选择需要读取的DataHub主题名称。消费开始时间 数据消费的...
配置DataHub输入组件
说明 进行属性配置的账号需具备该数据源的同步读权限，如果没有权限，则需要申请数据源权限，详情请参见 申请、续期和交还数据源权限。主题 DataHub的topic名称。单击下拉列表，选择需要读取的DataHub主题名称。消费开始时间 数据消费的...
配置Teradata输入组件
同步Teradata数据源的数据至其他数据源的场景中，您需要先配置Teradata输入组件读取的源数据源信息，再配置数据同步的目标数据源。本文为您介绍如何配置Teradata输入组件。使用限制 不支持读取Teradata数据库的视图。前提条件 在开始执行...
配置OceanBase输入组件
同步OceanBase数据源的数据至其他数据源的场景中，您需要先配置OceanBase输入组件读取的源数据源信息，再配置数据同步的目标数据源。本文为您介绍如何配置OceanBase输入组件。前提条件 在开始执行操作前，请确认您已完成以下操作：已创建...
配置OceanBase输入组件
同步OceanBase数据源的数据至其他数据源的场景中，您需要先配置OceanBase输入组件读取的源数据源信息，再配置数据同步的目标数据源。本文为您介绍如何配置OceanBase输入组件。前提条件 在开始执行操作前，请确认您已完成以下操作：已创建...
配置Teradata输入组件
同步Teradata数据源的数据至其他数据源的场景中，您需要先配置Teradata输入组件读取的源数据源信息，再配置数据同步的目标数据源。本文为您介绍如何配置Teradata输入组件。前提条件 已创建Teradata数据源，如何创建，请参见 创建Teradata...
配置Vertica输入组件
同步Vertica数据源的数据至其他数据源的场景中，您需要先配置Vertica输入组件读取的源数据源信息，再配置数据同步的目标数据源。本文为您介绍如何配置Vertica输入组件。在开始执行操作前，请确认您已完成以下操作：已创建Vertica数据源。...
配置Vertica输入组件
同步Vertica数据源的数据至其他数据源的场景中，您需要先配置Vertica输入组件读取的源数据源信息，再配置数据同步的目标数据源。本文为您介绍如何配置Vertica输入组件。在开始执行操作前，请确认您已完成以下操作：已创建Vertica数据源。...
配置Oracle输入组件
同步Oracle数据源的数据至其他数据源的场景中，您需要先配置Oracle输入组件读取的源数据源信息，再配置数据同步的目标数据源。本文为您介绍如何配置Oracle输入组件。前提条件 在开始执行操作前，请确认您已完成以下操作：已创建Oracle数据...
配置PolarDB-X（原DRDS）输入组件
同步PolarDB-X数据源的数据至其他数据源的场景中，您需要先配置PolarDB-X输入组件读取的源数据源信息，再配置数据同步的目标数据源。本文为您介绍如何配置PolarDB-X输入组件。前提条件 在开始执行操作前，请确认您已完成以下操作：已创建...
配置PolarDB-X（原DRDS）输入组件
同步PolarDB-X数据源的数据至其他数据源的场景中，您需要先配置PolarDB-X输入组件读取的源数据源信息，再配置数据同步的目标数据源。本文为您介绍如何配置PolarDB-X输入组件。前提条件 在开始执行操作前，请确认您已完成以下操作：已创建...
配置TDH Inceptor输入组件
同步TDH Inceptor数据源的数据至其他数据源的场景中，您需要先配置TDH Inceptor输入组件读取的数据源信息，再配置数据同步的目标数据源。本文为您介绍如何配置TDH Inceptor输入组件。使用限制 TDH Inceptor输入组件支持数据格式为orc、...
配置AnalyticDB for PostgreSQL输入组件
同步AnalyticDB for PostgreSQL数据源的数据至其他数据源的场景中，您需要先配置AnalyticDB for PostgreSQL输入组件读取的源数据源信息，再配置数据同步的目标数据源。本文为您介绍如何配置AnalyticDB for PostgreSQL输入组件。前提条件 在...
离线任务调度属性配置
条件调度 可设置多组调度条件，系统按照从上往下的顺序进行条件判断，命中条件后即执行相应调度动作，并终止后续所有条件的判断。未命中任何条件时，则执行默认调度配置。重要 条件调度仅在调度类型为 正常调度 时生效。单击 添加调度条件...
离线任务调度属性配置
条件调度 可设置多组调度条件，系统按照从上往下的顺序进行条件判断，命中条件后即执行相应调度动作，并终止后续所有条件的判断。未命中任何条件时，则执行默认调度配置。重要 条件调度仅在调度类型为 正常调度 时生效。单击 添加调度条件...
配置离线管道调度
条件调度 可设置多组调度条件，系统按照从上往下的顺序进行条件判断，命中条件后即执行相应调度动作，并终止后续所有条件的判断。未命中任何条件时，则执行默认调度配置。重要 条件调度仅在调度类型为 正常调度 时生效。单击 添加调度条件...
配置离线管道调度
条件调度 可设置多组调度条件，系统按照从上往下的顺序进行条件判断，命中条件后即执行相应调度动作，并终止后续所有条件的判断。未命中任何条件时，则执行默认调度配置。重要 条件调度仅在调度类型为 正常调度 时生效。单击 添加调度条件...
新建Amazon S3数据源
更多Amazon S3信息，请参见 什么是Amazon S3。权限说明 仅支持具备新建数据源权限的账号进行新建。更多信息，请参见 数据源权限说明。操作步骤 在Dataphin首页，单击顶部菜单栏的 管理中心。按照下图操作指引，进入 新建数据源 页面。在 ...
配置逻辑表调度属性
条件调度 可设置多组调度条件，系统按照从上往下的顺序进行条件判断，命中条件后即执行相应调度动作，并终止后续所有条件的判断。未命中任何条件时，则执行默认调度配置。重要 条件调度仅在调度类型为 正常调度 时生效。单击 添加调度条件...
配置逻辑表调度属性
条件调度 可设置多组调度条件，系统按照从上往下的顺序进行条件判断，命中条件后即执行相应调度动作，并终止后续所有条件的判断。未命中任何条件时，则执行默认调度配置。重要 条件调度仅在调度类型为 正常调度 时生效。单击 添加调度条件...
创建标签项目
前提条件 若您需进行规范建模研发，在创建标签项目前您需创建对应的数据板块。若不创建，则只可进行通用研发。数据板块创建详情请参见：创建数据板块。创建标签项目前，您需完成对应的计算源创建。详情请参见：计算源概述。使用限制 ...
配置LogicalTable输入组件
前提条件 在开始执行操作前，请确认您已完成以下操作：已创建逻辑表。具体操作，详情请创建 规范建模概述。进行LogicalTabler输入组件属性配置的账号，需具备该数据表的同步读权限。如果没有权限，则需要申请数据表权限。具体操作，请参见 ...
配置LogicalTable输入组件
前提条件 在开始执行操作前，请确认您已完成以下操作：已创建逻辑表。具体操作，详情请创建 规范建模概述。进行LogicalTabler输入组件属性配置的账号，需具备该数据表的同步读权限。如果没有权限，则需要申请数据表权限。具体操作，请参见 ...
配置HDFS输出组件
前提条件 已创建HDFS数据源，如何创建，请参见 创建HDFS数据源。进行HDFS输入组件属性配置的账号，需具备该数据源的同步读权限。如果没有权限，则需要申请数据源权限，详情请参见 申请数据源权限。操作步骤 请参见 离线管道组件开发入口，...
配置SAP Table输入组件
同步SAP Table数据源的数据至其他数据源的场景中，您需要先配置SAP Table输入组件读取的数据源，再配置数据同步的目标数据源。本文为您介绍如何配置SAP Table输入组件。前提条件 已创建SAP Table数据源，如何创建，请参见 创建Sap Table...
配置SAP Table输入组件
同步SAP Table数据源的数据至其他数据源的场景中，您需要先配置SAP Table输入组件读取的数据源，再配置数据同步的目标数据源。本文为您介绍如何配置SAP Table输入组件。前提条件 已创建SAP Table数据源，如何创建，请参见 创建SAP Table...
配置Hologres输入组件
前提条件 已创建Hologres数据源，如何创建，请参见 创建Hologres数据源。进行Hologres输入组件属性配置的账号，需具备该数据源的同步读权限。如果没有权限，则需要申请数据源权限，详情请参见 申请、续期和交还数据源权限。使用限制 不支持...
配置DataHub输出组件
前提条件 已创建DataHub数据源。具体操作，请参见 创建DataHub数据源。进行DataHub输入组件属性配置的账号，需具备该数据源的同步读权限。如果没有权限，则需要申请数据源权限。具体操作，请参见 管理数据源权限。操作步骤 在Dataphin首页...
配置TiDB输入组件
前提条件 已创建TiDB数据源，如何创建，请参见 创建TiDB数据源。进行TiDB输入组件属性配置的账号，需具备该数据源的同步读权限。如果没有权限，则需要申请数据源权限，详情请参见 管理数据源权限。操作步骤 请参见 离线管道组件开发入口，...
- 产品推荐
- 这些文档可能帮助您