资产质量概述
背景信息 面对各行各业日趋强烈的大数据建设、管理及应用的诉求，Dataphin应用场景的多样性及复杂性随之增加。因业务系统的原始数据的规范性无法得以保障，所以Dataphin需要定义数据分析的质量，以满足资产质量的时效性、准确性、完整性、...
查看并管理整改流程
发起整改后，可对该校验详情的整个整改流程进行查询追踪。本文为您介绍如何管理整改流程。权限说明 超级管理员和质量管理员可以查看、忽略此次异常、重新校验、发起验收和完成验收所有整改流程。当普通用户自己是整改负责人或验收负责人时...
查看并管理整改流程
发起整改后，可对该校验详情的整个整改流程进行查询追踪。本文为您介绍如何管理整改流程。权限说明 超级管理员和质量管理员可以查看、忽略此次异常、重新校验、发起验收和完成验收所有整改流程。当普通用户自己是整改负责人或验收负责人时...
变更管控
针对校验不通过的任务，根据规则配置详情，会 阻断发布流程（强管控）或 给出警告提示但不阻塞发布（弱管控），以增强平台的稳定性保障。发布管控常用但不限于以下几种场景：时间节点管控：在某些特殊时间节点，禁止发布新的任务或更新历史...
变更管控
针对校验不通过的任务，根据规则配置详情，会 阻断发布流程（强管控）或 给出警告提示但不阻塞发布（弱管控），以增强平台的稳定性保障。发布管控常用但不限于以下几种场景：时间节点管控：在某些特殊时间节点，禁止发布新的任务或更新历史...
创建标签项目
项目是Dataphin的基本组织单元，是进行多用户隔离和访问控制的主要边界。在进行标签开发前，您需要创建对应标签项目。本文为您介绍如何创建标签项目。前提条件 若您需进行规范建模研发，在创建标签项目前您需创建对应的数据板块。若不创建...
新建SPARK_JAR_ON_HIVE任务
基本信息 用于定义调度任务的名称、对应责任人、描述等基本信息。配置说明，请参见 配置任务基本信息。参数配置 若您的任务中调用了参数变量，您可在属性中对参数进行赋值，从而支持节点调度时，参数变量可以自动被替换为相应的变量值。...
调用Dataphin数据源
操作流程 步骤一：查询并申请Dataphin数据源 在数据服务市场中，查询符合您业务场景的Dataphin数据源。查询到后申请该Dataphin数据源的调用权限。步骤二：调用Dataphin数据源 根据调用Dataphin数据源示例，进行调用Dataphin数据源。步骤一...
步骤一：准备工作
进行离线数仓建设前您需完成相关云资源的准备。云资源准备包括阿里云账号资源准备、Dataphin开通与AccessKey配置、MaxCompute计算源的开通与配置、以及数据源的准备。本文将指导您完成本教程的云资源准备工作。步骤一：阿里云账号资源准备 ...
步骤一：准备工作
进行离线数仓建设前您需完成相关云资源的准备。云资源准备包括阿里云账号资源准备、Dataphin开通与AccessKey配置、MaxCompute计算源的开通与配置、以及数据源的准备。本文将指导您完成本教程的云资源准备工作。步骤一：阿里云账号资源准备 ...
离线任务属性配置概述
任务的调度配置仅用于定义任务调度运行时的相关属性，任务需通过发布流程发布至生产环境后，才会根据该配置进行最终调度。调度时间仅定义任务 预期 执行时间，其实际执行时间还受上游执行情况控制，关于任务执行条件说明，详情请参见 实例...
新建及管理知识库
知识库能够帮助您针对具体的质量问题或某一类质量问题，沉淀相关解决方案，...后续步骤 知识库被质量规则和治理工作台关联后，您可在质量规则和治理工作台中查看关联相关知识库，详情请参见 质量规则 查看并管理治理工作台 查看并管理整改流程
新建及管理知识库
知识库能够帮助您针对具体的质量问题或某一类质量问题，沉淀相关解决方案，...后续步骤 知识库被质量规则和治理工作台关联后，您可在质量规则和治理工作台中查看关联相关知识库，详情请参见 质量规则 查看并管理治理工作台 查看并管理整改流程
离线任务属性配置概述
任务的调度配置仅用于定义任务调度运行时的相关属性，任务需通过发布流程发布至生产环境后，才会根据该配置进行最终调度。调度时间仅定义任务 预期 执行时间，其实际执行时间还受上游执行情况控制，关于任务执行条件说明，详情请参见 实例...
通过单条管道创建集成任务
各配置说明如下：基本信息：通过集成管道基本信息，您可配置集成管道任务开发负责人、运维负责人及描述。详细说明，请参见：配置离线集成管道基本信息。调度配置：对于 周期性节点，调度配置用于定义集成管道任务在生产环境的调度方式。您...
通过单条管道创建集成任务
各配置说明如下：基本信息：通过集成管道基本信息，您可以配置集成管道任务的开发负责人、运维负责人及描述。详细说明，请参见：配置离线集成管道基本信息。调度配置：对于 周期性节点，调度配置用于定义集成管道任务在生产环境的调度方式...
离线集成任务属性配置概述
任务的调度配置仅用于定义任务调度运行时的相关属性，任务需通过发布流程发布至生产环境后，才会根据该配置进行最终调度。调度时间仅定义任务 预期 执行时间，其实际执行时间还受上游执行情况控制，关于任务执行条件说明，详情请参见 实例...
离线集成任务属性配置概述
任务的调度配置仅用于定义任务调度运行时的相关属性，任务需通过发布流程发布至生产环境后，才会根据该配置进行最终调度。调度时间仅定义任务 预期 执行时间，其实际执行时间还受上游执行情况控制，关于任务执行条件说明，详情请参见 实例...
Dataphin免费试用申请
Dataphin支持在线申请免费试用。本文为您介绍如何申请。背景信息 为了方便您在做出购买决策之前更好地了解...相关文档 试用开通成功后，您可按照 Dataphin新手引导 一步步体验Dataphin的研发流程，也可按照 导入模型 来导入示例模型快速体验。
通过脚本模式创建集成任务
Dataphin通过各个节点的调度依赖的配置结果，有序的运行业务流程中各个节点，保障业务数据有效、适时地产出。详细说明，请参见 配置离线管道调度依赖。运行配置：您可根据业务场景为该集成管道任务配置任务级的运行超时时间和任务运行失败...
通过脚本模式创建集成任务
Dataphin通过各个节点的调度依赖的配置结果，有序的运行业务流程中各个节点，保障业务数据有效、适时地产出。详细说明，请参见 配置离线管道调度依赖。运行配置：您可根据业务场景为该集成管道任务配置任务级的运行超时时间和任务运行失败...
数据服务概述
数据服务（OneService）是基于Dataphin建设数据中台的最后一步。数据服务作为统一的数据服务出口，实现了数据的统一市场化管理，有效地降低数据开放门槛的同时，保障了数据开放的安全。前提条件 已购买 数据服务 增值服务，开通Dataphin ...
创建原子指标
配置 基本信息 区域参数。参数 描述 业务实体 选择业务对象或业务活动。主题域 默认选中业务对象或业务活动所在的主题域。英文名称 输入英文名称时，Dataphin将根据输入数据实时匹配数据标准中已配置的词根，您可以选择推荐的词根作为业务...
创建原子指标
配置 基本信息 区域参数。参数 描述 业务实体 选择业务对象或业务活动。主题域 默认选中业务对象或业务活动所在的主题域。英文名称 输入英文名称时，Dataphin将根据输入数据实时匹配数据标准中已配置的词根，您可以选择推荐的词根作为业务...
规范建模任务提交说明
变更内容信息包括 基本信息、对象信息、表结构信息、物理信息、表关系信息、计算逻辑、调度配置、调度依赖、运行配置、字段约束。前置检查 提交维度/事实逻辑表任务时，将进行以下前置校验，未正确配置所有校验项将不支持提交。下图以 维度...
规范建模任务提交说明
变更内容信息包括 基本信息、对象信息、表结构信息、物理信息、表关系信息、计算逻辑、调度配置、调度依赖、运行配置、字段约束。前置检查 提交维度/事实逻辑表任务时，将进行以下前置校验，未正确配置所有校验项将不支持提交。下图以 维度...
什么是Dataphin
数据标准 权限管理 为您提供多种资产对象和功能权限的精细化管理，支持权限主动申请与交还、权限审批、主动授权或回收权限等功能，实现了权限最小化管控，同时，方便您查看权限审批流程各环节的进展，及时跟进处理流程。权限管理 资产质量 ...
查看并管理治理工作台
您可以在治理工作台查看数据质量在校验过程中的出错情况及针对该质量校验问题发起整改、忽略、通知等治理操作，从而实现资产质量从制定计划到实现整改的PDCA完整流程，有效提升数据质量。本文为您介绍如何查看并管理治理工作台。权限说明 ...
查看并管理治理工作台
您可以在治理工作台查看数据质量在校验过程中的出错情况及针对该质量校验问题发起整改、忽略、通知等治理操作，从而实现资产质量从制定计划到实现整改的PDCA完整流程，有效提升数据质量。本文为您介绍如何查看并管理治理工作台。权限说明 ...
接入流程介绍
下面将简述各种接入方式的接入流程。基于 mPaaS 框架 通用接入流程 为了使用 mPaaS 组件，首先需要参考 基于 mPaaS 框架接入 完成通用接入流程。接入移动分析组件 使用 mPaaS 插件添加 SDK。参考对应版本的 SDK 使用文档，使用 SDK。包括...
创建FTP数据源
目前支持传输协议包括以下几种：FTP：文件传输协议，用于控制文件的双向传输，同时也是一个应用程序。SFTP：基于SSH的安全文件传送协议，为传输文件提供一种安全的加密方法。FTPS：基于SSL/TLS的文件传输协议，相当于加密的FTP。Host FTP...
在Azure中获取SAML配置说明
在 Azure中 获取SAML的元数据配置文件 单击列表页，选择 Azure Active Directory-企业应用程序，进入企业应用程序页面。新建应用程序。在 浏览Azure AD库 页面，单击 创建你自己的应用程序，自建应用程序。输入应用名称，并选择 集成未在库...
数据开发概述
智能编辑器：Dataphin代码编辑器不仅支持基本的代码高亮、代码补全，还支持智能代码提示、权限校验等功能。助您降低开发成本，更快的交付可靠的代码和提升编码体验。编辑器使用说明详情请参见 编辑器代码提效。数据开发入口 在Dataphin首页...
基本概念
本文将为您介绍数据服务的Dataphin数据源服务、API服务、分组、服务单元和应用等基本概念。基本概念 说明 Dataphin数据源 配置数据表生成Dataphin数据源。服务单元 对数据表进行统一的元数据配置。应用 消费数据服务（调用API或Dataphin...
基本概念
本文为您介绍资产质量中的数据对象、质量规则、强规则和弱规则等基本概念。概念 描述 质量规则 数据对象进行质量校验时的规则，质量规则可以覆盖到字段。例如，如果您需要关注某个表中的行数变化及主键是否重复，则您可以将行数变化和主键...
基本概念
本文将为您介绍告警中心中的告警事件、推送记录、值班表和推送渠道等基本概念。概念 描述 告警事件 基于告警对象和告警规则构成的事件。推送记录 告警中心将告警消息推送给订阅用户的记录。值班表 为接收并处理告警事件的人员提供了排班...
基本概念
本文将为您介绍告警中心中的告警事件、推送记录、值班表和推送渠道等基本概念。概念 描述 告警事件 基于告警对象和告警规则构成的事件。推送记录 告警中心将告警消息推送给订阅用户的记录。值班表 为接收并处理告警事件的人员提供了排班...
配置任务基本信息
您可以在离线任务编辑器属性对话框中查看离线任务的基本详细和进行调度配置，包括任务的名称、ID、类型，并配置对应责任人、描述等基本信息。本文为您介绍离线任务属性的基本信息参数配置。操作步骤 请参见 离线任务属性入口，进入离线任务...
配置任务基本信息
您可以在离线任务编辑器属性对话框中查看离线任务的基本详细和进行调度配置，包括任务的名称、ID、类型，并配置对应责任人、描述等基本信息。本文为您介绍离线任务属性的基本信息参数配置。操作步骤 请参见 离线任务属性入口，进入离线任务...
基本概念
本文为您介绍资产质量中的数据对象、质量规则、强规则和弱规则等基本概念。概念 描述 质量规则 数据对象进行质量校验时的规则，质量规则可以覆盖到字段。例如，如果您需要关注某个表中的行数变化及主键是否重复，则您可以将行数变化和主键...
- 产品推荐
- 这些文档可能帮助您