管理发布任务

可在 发布详情 对话框,查看 基本信息、流程校验 和 异常提醒 信息。发布审批:若该对象开启了发布审批,则有该流程。管控规则:若该对象命中了发布管控策略,则有该流程。执行条件:不同对象类型有不同的校验条件,可在发布详情里查看校验...

管理发布任务

可在 发布详情 对话框,查看 基本信息、流程校验 和 异 常提醒 信息。发布审批:若该对象开启了发布审批,则有该流程。管控规则:若该对象命中了发布管控策略,则有该流程。执行条件:不同对象类型有不同的校验条件,可在发布详情里查看...

什么是RPA

产品介绍 阿里云RPA产品是一款新型工作流程自动化办公机器人软件,通过模拟人工操作进行自动流程执行处理。它可以将办公人员从每日的重复工作中解放出来,提高生产效率。具体而言,阿里云RPA是基于软件机器人和人工智能(AI,Artificial ...

数据同步概述

Dataphin支持通过数据同步的方式,将业务数据源的数据引入Dataphin平台。背景说明 如果您是在 2020年4月之后 购买的Dataphin,则数据同步能力通过数据集成功能实现(即系统 不再...配置代码任务中的调度参数,详情请参见 配置任务基本信息。

数据同步概述

Dataphin支持通过数据同步的方式,将业务数据源的数据引入Dataphin平台。背景说明 如果您是在 2020年4月之后 购买的Dataphin,则数据同步能力通过数据集成功能实现(即系统 不再...配置代码任务中的调度参数,详情请参见 配置任务基本信息。

确定需求

业务调研 充分的业务调研和需求分析是数据仓库建设的基石,直接决定数据仓库能否建设成功。在数仓建设项目启动前,您需要请相关的业务人员介绍具体的业务,以便明确各个团队的分析员、运营人员的需求,沉淀出相关文档。您可以通过调查表、...

资产质量概述

背景信息 面对各行各业日趋强烈的大数据建设、管理及应用的诉求,Dataphin应用场景的多样性及复杂性随之增加。因业务系统的原始数据的规范性无法得以保障,所以Dataphin需要定义数据分析的质量,以满足资产质量的时效性、准确性、完整性、...

查看并管理整改流程

发起整改后,可对该校验详情的整个整改流程进行查询追踪。本文为您介绍如何管理整改流程。权限说明 超级管理员和质量管理员可以查看、忽略此次异常、重新校验、发起验收和完成验收所有整改流程。当普通用户自己是整改负责人或验收负责人时...

资产质量概述

背景信息 面对各行各业日趋强烈的大数据建设、管理及应用的诉求,Dataphin应用场景的多样性及复杂性随之增加。因业务系统的原始数据的规范性无法得以保障,所以Dataphin需要定义数据分析的质量,以满足资产质量的时效性、准确性、完整性、...

变更管控

针对校验不通过的任务,根据规则配置详情,会 阻断发布流程(强管控)或 给出警告提示但不阻塞发布(弱管控),以增强平台的稳定性保障。发布管控常用但不限于以下几种场景:时间节点管控:在某些特殊时间节点,禁止发布新的任务或更新历史...

变更管控

针对校验不通过的任务,根据规则配置详情,会 阻断发布流程(强管控)或 给出警告提示但不阻塞发布(弱管控),以增强平台的稳定性保障。发布管控常用但不限于以下几种场景:时间节点管控:在某些特殊时间节点,禁止发布新的任务或更新历史...

创建标签项目

项目是Dataphin的基本组织单元,是进行多用户隔离和访问控制的主要边界。在进行标签开发前,您需要创建对应标签项目。本文为您介绍如何创建标签项目。前提条件 若您需进行规范建模研发,在创建标签项目前您需创建对应的数据板块。若不创建...

新建SPARK_JAR_ON_HIVE任务

基本信息 用于定义调度任务的名称、对应责任人、描述等基本信息。配置说明,请参见 配置任务基本信息。参数配置 若您的任务中调用了参数变量,您可在属性中对参数进行赋值,从而支持节点调度时,参数变量可以自动被替换为相应的变量值。...

调用Dataphin数据源

操作流程 步骤一:查询并申请Dataphin数据源 在数据服务市场中,查询符合您业务场景的Dataphin数据源。查询到后申请该Dataphin数据源的调用权限。步骤二:调用Dataphin数据源 根据调用Dataphin数据源示例,进行调用Dataphin数据源。步骤一...

步骤一:准备工作

进行离线数仓建设前您需完成相关云资源的准备。云资源准备包括阿里云账号资源准备、Dataphin开通与AccessKey配置、MaxCompute计算源的开通与配置、以及数据源的准备。本文将指导您完成本教程的云资源准备工作。步骤一:阿里云账号资源准备 ...

步骤一:准备工作

进行离线数仓建设前您需完成相关云资源的准备。云资源准备包括阿里云账号资源准备、Dataphin开通与AccessKey配置、MaxCompute计算源的开通与配置、以及数据源的准备。本文将指导您完成本教程的云资源准备工作。步骤一:阿里云账号资源准备 ...

离线任务属性配置概述

任务的调度配置仅用于定义任务调度运行时的相关属性,任务需通过发布流程发布至生产环境后,才会根据该配置进行最终调度。调度时间仅定义任务 预期 执行时间,其实际执行时间还受上游执行情况控制,关于任务执行条件说明,详情请参见 实例...

新建及管理知识库

知识库能够帮助您针对具体的质量问题或某一类质量问题,沉淀相关解决方案,...后续步骤 知识库被质量规则和治理工作台关联后,您可在质量规则和治理工作台中查看关联相关知识库,详情请参见 质量规则 查看并管理治理工作台 查看并管理整改流程

新建及管理知识库

知识库能够帮助您针对具体的质量问题或某一类质量问题,沉淀相关解决方案,...后续步骤 知识库被质量规则和治理工作台关联后,您可在质量规则和治理工作台中查看关联相关知识库,详情请参见 质量规则 查看并管理治理工作台 查看并管理整改流程

离线任务属性配置概述

任务的调度配置仅用于定义任务调度运行时的相关属性,任务需通过发布流程发布至生产环境后,才会根据该配置进行最终调度。调度时间仅定义任务 预期 执行时间,其实际执行时间还受上游执行情况控制,关于任务执行条件说明,详情请参见 实例...

通过单条管道创建集成任务

各配置说明如下:基本信息:通过集成管道基本信息,您可配置集成管道任务开发负责人、运维负责人及描述。详细说明,请参见:配置离线集成管道基本信息。调度配置:对于 周期性节点,调度配置用于定义集成管道任务在生产环境的调度方式。您...

通过单条管道创建集成任务

各配置说明如下:基本信息:通过集成管道基本信息,您可以配置集成管道任务的开发负责人、运维负责人及描述。详细说明,请参见:配置离线集成管道基本信息。调度配置:对于 周期性节点,调度配置用于定义集成管道任务在生产环境的调度方式...

离线集成任务属性配置概述

任务的调度配置仅用于定义任务调度运行时的相关属性,任务需通过发布流程发布至生产环境后,才会根据该配置进行最终调度。调度时间仅定义任务 预期 执行时间,其实际执行时间还受上游执行情况控制,关于任务执行条件说明,详情请参见 实例...

离线集成任务属性配置概述

任务的调度配置仅用于定义任务调度运行时的相关属性,任务需通过发布流程发布至生产环境后,才会根据该配置进行最终调度。调度时间仅定义任务 预期 执行时间,其实际执行时间还受上游执行情况控制,关于任务执行条件说明,详情请参见 实例...

通过脚本模式创建集成任务

Dataphin通过各个节点的调度依赖的配置结果,有序的运行业务流程中各个节点,保障业务数据有效、适时地产出。详细说明,请参见 配置离线管道调度依赖。运行配置:您可根据业务场景为该集成管道任务配置任务级的运行超时时间和任务运行失败...

通过脚本模式创建集成任务

Dataphin通过各个节点的调度依赖的配置结果,有序的运行业务流程中各个节点,保障业务数据有效、适时地产出。详细说明,请参见 配置离线管道调度依赖。运行配置:您可根据业务场景为该集成管道任务配置任务级的运行超时时间和任务运行失败...

Dataphin免费试用申请

Dataphin支持在线申请免费试用。本文为您介绍如何申请。背景信息 为了方便您在做出购买决策之前更好地了解...相关文档 试用开通成功后,您可按照 Dataphin新手引导 一步步体验Dataphin的研发流程,也可按照 导入模型 来导入示例模型快速体验。

指标资产详情

后续,您可以在质量模块的问题清单中查看反馈问题的处理流程和结果。② 明细信息 为您展示指标的 基本信息 和 相关指标。基本信息:包括指标的所属数据板块、主题域、所属汇总表、度量单位、来源表名称、原子指标、业务限定、统计粒度、...

创建原子指标

配置 基本信息 区域参数。参数 描述 业务实体 选择业务对象或业务活动。主题域 默认选中业务对象或业务活动所在的主题域。英文名称 输入英文名称时,Dataphin将根据输入数据实时匹配数据标准中已配置的词根,您可以选择推荐的词根作为业务...

创建原子指标

配置 基本信息 区域参数。参数 描述 业务实体 选择业务对象或业务活动。主题域 默认选中业务对象或业务活动所在的主题域。英文名称 输入英文名称时,Dataphin将根据输入数据实时匹配数据标准中已配置的词根,您可以选择推荐的词根作为业务...

数据服务概述

数据服务(OneService)是基于Dataphin建设数据中台的最后一步。数据服务作为统一的数据服务出口,实现了数据的统一市场化管理,有效地降低数据开放门槛的同时,保障了数据开放的安全。前提条件 已购买 数据服务 增值服务,开通Dataphin ...

规范建模任务提交说明

变更内容信息包括 基本信息、对象信息、表结构信息、物理信息、表关系信息、计算逻辑、调度配置、调度依赖、运行配置、字段约束。前置检查 提交维度/事实逻辑表任务时,将进行以下前置校验,未正确配置所有校验项将不支持提交。下图以 维度...

规范建模任务提交说明

变更内容信息包括 基本信息、对象信息、表结构信息、物理信息、表关系信息、计算逻辑、调度配置、调度依赖、运行配置、字段约束。前置检查 提交维度/事实逻辑表任务时,将进行以下前置校验,未正确配置所有校验项将不支持提交。下图以 维度...

什么是Dataphin

数据标准 权限管理 为您提供多种资产对象和功能权限的精细化管理,支持权限主动申请与交还、权限审批、主动授权或回收权限等功能,实现了权限最小化管控,同时,方便您查看权限审批流程各环节的进展,及时跟进处理流程。权限管理 资产质量 ...

查看并管理治理工作台

您可以在治理工作台查看数据质量在校验过程中的出错情况及针对该质量校验问题发起整改、忽略、通知等治理操作,从而实现资产质量从制定计划到实现整改的PDCA完整流程,有效提升数据质量。本文为您介绍如何查看并管理治理工作台。权限说明 ...

创建数据板块

业务信息 板块架构师 负责板块信息设置,包括基本信息更新、业务信息更新等。支持选择Dataphin成员列表的所有正常使用的成员。业务负责人 负责板块数据的稳定性,非必选。支持选择Dataphin成员列表的所有正常使用的成员。数据负责人 非必选...

创建FTP数据源

目前支持传输协议包括以下几种:FTP:文件传输协议,用于控制文件的双向传输,同时也是一个应用程序。SFTP:基于SSH的安全文件传送协议,为传输文件提供一种安全的加密方法。FTPS:基于SSL/TLS的文件传输协议,相当于加密的FTP。Host FTP...

智能数据建设与治理 Dataphin

Dataphin是集产品、技术、方法论于一体的智能大数据平台建设引擎,为您提供数据引入、规范定义、建模研发、资产管理、数据服务等全链路智能数据构建及管理服务。

基本概念

本文将为您介绍数据服务的Dataphin数据源服务、API服务、分组、服务单元和应用等基本概念。基本概念 说明 Dataphin数据源 配置数据表生成Dataphin数据源。服务单元 对数据表进行统一的元数据配置。应用 消费数据服务(调用API或Dataphin...

基本概念

本文为您介绍资产质量中的数据对象、质量规则、强规则和弱规则等基本概念。概念 描述 质量规则 数据对象进行质量校验时的规则,质量规则可以覆盖到字段。例如,如果您需要关注某个表中的行数变化及主键是否重复,则您可以将行数变化和主键...
共有200条 < 1 2 3 4 ... 200 >
跳转至: GO
产品推荐
云服务器 安全管家服务 安全中心
这些文档可能帮助您
机器人流程自动化 文件存储NAS 云数据库 RDS 弹性公网IP 短信服务 人工智能平台 PAI
新人特惠 爆款特惠 最新活动 免费试用