Dataphin的数据分级可以在后续的数据脱敏保护、权限申请、权限下载等环节使用,支持按照不同的数据分级使用不同的管控策略。敏感数据识别 Dataphin支持通过自动识别和手动打标两种方式来生成敏感数据清单。自动识别 Dataphin支持使用识别...
Hologres输入组件用于读取Hologres数据源的数据。同步Hologres数据源的数据至其他数据源的场景中,您需要先配置Hologres输入组件读取的数据源,再配置数据同步的目标数据源。本文为您介绍如何配置Hologres输入组件。前提条件 已创建...
定时调度补数据任务是指任务将按照配置的定时调度时间生成并运行补数据实例,进行历史数据的回刷。本文将为您介绍如何查看并管理定时调度类型的补数据任务。定时调度补数据任务入口 请参见 运维中心入口,进入 运维 中心。按照下图操作指引...
Dataphin支持通过数据同步的方式,将业务数据源的数据引入Dataphin平台。背景说明 如果您是在 2020年4月之后 购买的Dataphin,则数据同步能力通过数据集成功能实现(即系统 不再提供数据同步的功能入口)。数据集成为您提供简单高效、安全...
同步其他数据源的数据至Hologres数据源的场景中,完成源数据的信息配置后,需要配置Hologres输出组件的目标数据源。本文为您介绍如何配置Hologres输出组件。前提条件 已创建Hologres数据源并已申请Hologres数据源的同步写权限:如何创建...
帮助您对数据中缺失、错误、重复或不完整的数据进行补全、修正。调度类型说明 Dataphin补数据任务支持两种调度类型:定时调度和手动运行。定时调度:是指可以在预设的时间点自动运行的补数据任务,可以按照 日、周、月 进行调度。适用于...
帮助您对数据中缺失、错误、重复或不完整的数据进行补全、修正。调度类型说明 Dataphin补数据任务支持两种调度类型:定时调度和手动运行。定时调度:是指可以在预设的时间点自动运行的补数据任务,可以按照 日、周、月 进行调度。适用于...
OceanBase输入组件用于读取OceanBase数据源的数据。同步OceanBase数据源的数据至其他数据源的场景中,您需要先配置OceanBase输入组件读取的源数据源信息,再配置数据同步的目标数据源。本文为您介绍如何配置OceanBase输入组件。前提条件 在...
OceanBase输入组件用于读取OceanBase数据源的数据。同步OceanBase数据源的数据至其他数据源的场景中,您需要先配置OceanBase输入组件读取的源数据源信息,再配置数据同步的目标数据源。本文为您介绍如何配置OceanBase输入组件。前提条件 在...
Dataphin支持通过数据同步的方式,将业务数据源的数据引入Dataphin平台。背景说明 如果您是在 2020年4月之后 购买的Dataphin,则数据同步能力通过数据集成功能实现(即系统 不再提供数据同步的功能入口)。数据集成为您提供简单高效、安全...
SAP HANA输入组件用于读取SAP HANA数据源的数据。同步SAP HANA数据源的数据至其他数据源的场景中,您需要先配置SAP HANA输入组件读取的数据源,再配置数据同步的目标数据源。本文为您介绍如何配置SAP HANA输入组件。前提条件 在开始执行...
Hologres输入组件用于读取Hologres数据源的数据。同步Hologres数据源的数据至其他数据源的场景中,您需要先配置Hologres输入组件读取的数据源,再配置数据同步的目标数据源。本文为您介绍如何配置Hologres输入组件。前提条件 已创建...
本文为您介绍如何授予和回收数据板块的权限。授权数据板块权限 在Dataphin首页,单击顶部菜单栏的 管理中心。按照下图操作指引,进入 数据板块授权 对话框。在 数据板块授权 对话框,配置参数。...逻辑表 选择该数据板块的某个逻辑表授权给...
本文为您介绍如何授予和回收数据板块的权限。授权数据板块权限 在Dataphin首页,单击顶部菜单栏的 管理中心。按照下图操作指引,进入 数据板块授权 对话框。在 数据板块授权 对话框,配置参数。...逻辑表 选择该数据板块的某个逻辑表授权给...
支持选择的数据板块类型:电商(图标)金融(图标)云计算(图标)广告营销(图标)物流(图标)文娱(图标)出行(图标)健康()社交&通信(图标)餐饮(图标)图标代表 教育(图标)环境()业务信息 板块架构师 负责板块信息设置,包括...
权限管理员支持将某工作空间下的数据源资源授予多名开发者编辑数据源和使用数据源的权限。背景信息 权限管理员授予开发者权限时,在协同状态和私密状态下的权限属性有所不同,见下图。其中,不同权限属性存在以下联系:编辑权限:当开发者...
若您需要输入数据作为数据源,请参见 数据源功能项列表 以查看支持ETL功能的数据源。校验连通性。若您选择数据源后,出现 自动连接失败,请手动单击校验 提示,则单击 校验连通性。说明 为确保数据源的顺利连接,请将106.15.233.0/24添加至...
同步其他数据源的数据至Hologres数据源的场景中,完成源数据的信息配置后,需要配置Hologres输出组件的目标数据源。本文为您介绍如何配置Hologres输出组件。前提条件 已创建Hologres数据源并已申请Hologres数据源的同步写权限:如何创建...
数据源 在数据源下拉列表中,展示所有Hive类型的数据源,包括您已拥有同步写权限的数据源和没有同步写权限的数据源。对于没有同步写权限的数据源,您可以单击数据源后的 申请,申请数据源的同步写权限。具体操作,请参见 申请数据源权限。...
Oracle输入组件用于读取Oracle数据源的数据。同步Oracle数据源的数据至其他数据源的场景中,您需要先配置Oracle输入组件读取的源数据源信息,再配置数据同步的目标数据源。本文为您介绍如何配置Oracle输入组件。前提条件 在开始执行操作前...
MongoDB输入组件用于读取MongoDB数据源的数据。同步MongoDB数据源的数据至其他数据源的场景中,您需要先配置MongoDB输入组件读取的数据源,再配置数据同步的目标数据源。本文为您介绍如何配置MongoDB输入组件。前提条件 在开始执行操作前,...
PolarDB输入组件用于读取PolarDB数据源的数据。同步PolarDB数据源的数据至其他数据源的场景中,您需要先配置PolarDB输入组件读取的数据源,再配置数据同步的目标数据源。本文为您介绍如何配置PolarDB输入组件。前提条件 在开始执行操作前,...
SAP HANA输入组件用于读取SAP HANA数据源的数据。同步SAP HANA数据源的数据至其他数据源的场景中,您需要先配置SAP HANA输入组件读取的数据源,再配置数据同步的目标数据源。本文为您介绍如何配置SAP HANA输入组件。操作步骤 请参见 通过离...
将经过加工的数据执行落库操作,您可以选择输出数据至已有的目标数据库表中(每次写入会删除表中原数据,并插入新数据),也可以输出数据至新建的数据库表中,还可以输出数据至数据集中。前提条件 已完成数据加工的配置,请参见 数据加工。...
数据源分组 选择已创建的数据源分组。数据源描述 填写对数据源分组简单的描述。不能超过128字符。数据环境 选择数据源读取数据的来源。数据环境对后续选择物理表和逻辑表的影响说明如下:选择了 生产环境,后续支持选择Basic和Prod业务板块...
支持选择的数据板块类型:电商(图标)金融(图标)云计算(图标)广告营销(图标)物流(图标)文娱(图标)出行(图标)健康()社交&通信(图标)餐饮(图标)图标代表 教育(图标)环境()业务信息 板块架构师 负责板块信息设置,包括...
定时调度补数据任务是指任务将按照配置的定时调度时间生成并运行补数据实例,进行历史数据的回刷。本文将为您介绍如何查看并管理定时调度类型的补数据任务。定时调度补数据任务入口 在Dataphin首页,单击顶部菜单栏的 研发。默认进入数据 ...
PolarDB输入组件用于读取PolarDB数据源的数据。同步PolarDB数据源的数据至其他数据源的场景中,您需要先配置PolarDB输入组件读取的数据源,再配置数据同步的目标数据源。本文为您介绍如何配置PolarDB输入组件。前提条件 在开始执行操作前,...
Oracle输入组件用于读取Oracle数据源的数据。同步Oracle数据源的数据至其他数据源的场景中,您需要先配置Oracle输入组件读取的源数据源信息,再配置数据同步的目标数据源。本文为您介绍如何配置Oracle输入组件。操作步骤 请参见 通过离线单...
HBase输入组件用于读取HBase数据源的数据。同步HBase数据源的数据至其他数据源的场景中,您需要先配置HBase输入组件读取的数据源,再配置数据同步的目标数据源。本文为您介绍如何配置HBase输入组件。前提条件 在开始执行操作前,请确认您已...
查看数据分类预置模型 系统内置通用和金融两种模型,帮助您在不同业务中可快捷选择合适的数据分类模板。通用模型:包括 个人信息(个人联系信息、个人基本信息、身份鉴别信息)、企业信息 和 设备敏感信息。金融模型:包括 业务类(账号...
查看数据分类预置模型 系统内置通用和金融两种模型,帮助您在不同业务中可快捷选择合适的数据分类模板。通用模型:包括 个人信息(个人联系信息、个人基本信息、身份鉴别信息)、企业信息 和 设备敏感信息。金融模型:包括 业务类(账号...
ClickHouse输入组件用于读取ClickHouse数据源的数据。同步ClickHouse数据源的数据至其他数据源的场景中,您需要先配置ClickHouse输入组件读取的数据源信息,再配置数据同步的目标数据源。本文为您介绍如何配置ClickHouse输入组件。前提条件...
Hive输入组件用于读取Hive数据源的数据。同步Hive数据源的数据至其他数据源的场景中,您需要先配置Hive输入组件读取的数据源,再配置数据同步的目标数据源。本文为您介绍如何配置Hive输入组件。使用限制 Hive输入组件支持数据格式为 orc、...
SAP Table输入组件用于读取SAP Table数据源的数据。同步SAP Table数据源的数据至其他数据源的场景中,您需要先配置SAP Table输入组件读取的数据源,再配置数据同步的目标数据源。本文为您介绍如何配置SAP Table输入组件。前提条件 已创建...
SAP Table输入组件用于读取SAP Table数据源的数据。同步SAP Table数据源的数据至其他数据源的场景中,您需要先配置SAP Table输入组件读取的数据源,再配置数据同步的目标数据源。本文为您介绍如何配置SAP Table输入组件。前提条件 已创建...
TiDB输入组件用于读取TiDB数据源的数据。同步TiDB数据源的数据至其他数据源的场景中,您需要先配置TiDB输入组件读取的数据源,再配置数据同步的目标数据源。本文为您介绍如何配置TiDB输入组件。前提条件 已创建TiDB数据源,如何创建,请...
MaxCompute输入组件用于读取MaxCompute数据源的数据。同步MaxCompute数据源的数据至其他数据源的场景中,您需要先配置MaxCompute输入组件读取的数据源,再配置数据同步的目标数据源。本文为您介绍如何配置MaxCompute输入组件。前提条件 在...
TDH Inceptor输入组件用于读取TDH Inceptor数据源的数据。同步TDH Inceptor数据源的数据至其他数据源的场景中,您需要先配置TDH Inceptor输入组件读取的数据源信息,再配置数据同步的目标数据源。本文为您介绍如何配置TDH Inceptor输入组件...
ArgoDB输入组件用于读取ArgoDB数据源的数据。同步ArgoDB数据源的数据至其他数据源的场景中,您需要先配置ArgoDB输入组件读取的数据源,再配置数据同步的目标数据源。本文为您介绍如何配置ArgoDB输入组件。使用限制 ArgoDB输入组件支持数据...