Dataphin智能数据建设与治理服务等级协议（半托管）
版本生效日期：2024年03月26日 本服务等级协议（Service Level Agreement，以下简称“SLA”）约定了阿里云向客户提供的智能数据建设与治理（简称“Dataphin”）的服务可用性等级指标及赔偿方案。特别提示您，除非另有约定，本协议不适用于...
创建MySQL数据源
常用于网站、应用程序和商业产品，是一种常见的主要关系数据存储系统。更多详情请参见 MySQL官网。使用限制 Dataphin仅支持 超级管理员、数据源管理员、板块架构师、项目管理员 角色创建数据源。操作步骤 在Dataphin首页，单击顶部菜单栏的...
创建Redis数据源
更多学信息，请参见 Redis官网。权限说明 Dataphin仅支持 超级管理员、数据源管理员、板块架构师、项目管理员 角色创建数据源。操作步骤 在Dataphin首页，单击顶部菜单栏的 管理中心。按照以下操作指引，进入 新建数据源 对话框。依次单击 ...
新建PAI_DESIGNER任务
机器学习PAI_DESIGNER任务用于调用您在机器学习平台中构建的任务，并按照节点配置进行调度生产。本文为您介绍如何新建PAI_DESIGNER任务。前提条件 在开始执行操作前，请确认您已满足以下条件：基于机器学习的PAI-Designer完成工作流的创建...
新建PAI_DESIGNER任务
机器学习PAI_DESIGNER任务用于调用您在机器学习平台中构建的任务，并按照节点配置进行调度生产。本文为您介绍如何新建PAI_DESIGNER任务。功能上线时间 华东2（上海）、华北2（北京）：2022年03月03日 华南1（深圳）、华东1（杭州）：2022年...
创建Redis数据源
更多学信息，请参见 Redis官网。前提条件 若您需在Dataphin中创建基于阿里云产品的数据源，创建数据源前，需确保Dataphin的IP已添加至数据库白名单（或安全组）中，使数据源与Dataphin网络互通。具体操作，请参见 附录：数据源白名单配置。...
创建GreenPlum数据源
背景信息 Greenplum是一款大数据分析引擎，作用于分析、机器学习和AI等领域。其架构主要针对管理大规模分析型数据仓库以及商业智能工作负载而设计。更多详情，请参见 GreenPlum官网。使用限制 Dataphin仅支持超级管理员、数据源管理员、...
答疑支持
若您在使用智能数据建设与治理Dataphin的过程中有任何疑问，您可通过答疑支持联系我们，为您答疑解惑。操作步骤 在Dataphin页面，按照以下操作指引或单击蓝色小机器人选择 答疑支持，进入答疑支持页面后，输入您需解答的问题。依次单击 ...
答疑支持
若您在使用智能数据建设与治理Dataphin的过程中有任何疑问，您可通过答疑支持联系我们，为您答疑解惑。使用说明 需保证网络连通、Dataphin已升级至3.14.1及以上版本且已经对接工单系统（如需对接可联系运维部署团队）方可使用工单功能。...
安全白皮书概述
Dataphin面向各行各业大数据建设、管理及应用诉求，一站式提供从数据接入到数据消费全链路的智能数据建设与资产治理的大数据能力，包括产品、技术和方法论等，可帮助企业一站式构建生产经济、质量可靠、安全稳定、消费便捷的企业级数据资产...
快速入门
如果您是首次使用智能数据建设与治理Dataphin，您可以参考快速入门文档，了解如何购买实例并接入服务端。Dataphin全托管 Dataphin全托管快速入门 Dataphin半托管 Dataphin半托管快速入门
配置网络
为了实现应用与数据服务之间的网络互通，在您开始调用API或Dataphin数据源前需要配置网络。本文为您介绍如何查看域名。查看域名 您可以关闭已开通的域名。您可以打开或关闭域名显示开关（图标），可以管控非超级管理员查看域名的权限。请...
基本概念
例如，如果您需要关注某个表中的行数变化及主键是否重复，则您可以将行数变化和主键是否重复抽象为质量规则。强规则 质量规则的校验结果对下游节点会造成较大影响。当强规则校验结果为异常时，下游节点的运维调度会自动停止，同时当前节点...
操作功能权限
在 功能权限 页面，单击需要授权功能权限所在行 操作 列下的 图标。根据功能权限授权对话框提示，配置参数。参数 描述 授权用户 选择需要授权的用户。有效期至 选择权限的有效期。授权原因 填写授予功能权限的原因。单击 确定，完成功能...
基本概念
本文将为您介绍数据服务的Dataphin数据源服务、API服务、分组、服务单元和应用等基本概念。基本概念 说明 Dataphin数据源 配置数据表生成...说明 如果您是公共云用户，则需要配置VPC白名单。调用示例 应用调用API和Dataphin数据源的调用说明。
操作功能权限
在 功能权限 页面，单击需要授权功能权限所在行 操作 列下的 图标。根据功能权限授权对话框提示，配置参数。参数 描述 授权用户 选择需要授权的用户。有效期至 选择权限的有效期。授权原因 填写授予功能权限的原因。单击 确定，完成功能...
执行同步任务
背景信息 执行同步任务的说明：如果您创建的同步任务的调度类型为 周期任务，则不需要执行同步任务，系统会每天自动生成调度任务。如果您创建的同步任务的调度类型为 手动任务，则需要您手动触发调度任务。操作步骤 在Dataphin首页，单击 ...
注册调度集群
指定租户：选择可使用当前调度集群的租户，适用于需要管控资源使用范围的场景。单击 完成。后续步骤 完成调度集群注册后，还需要在指定集群完成应用安装部署等连接配置，注册的调度集群才可正常使用。具体操作，请参见 配置集群连接。
技术架构选型
根据阿里巴巴OneData方法论最佳实践，在设计数据模型前，您需要完成技术架构的选型。本教程中使用阿里云大数据产品Dataphin配合MaxCompute，完成整体的数据建模和研发流程。完整的技术架构如下图所示。其中，Dataphin的数据集成及同步负责...
准备工作简介
如果您使用RAM用户对Dataphin进行精细的权限管理，则需要将其他人员使用的RAM用户账号同步至Dataphin中，才可以使用Dataphin。具体操作，请参见 同步RAM用户账号至Dataphin。设置Dataphin实例的计算引擎。在开始使用Dataphin前，您需要完成...
基本概念
例如，如果您需要关注某个表中的行数变化及主键是否重复，则您可以将行数变化和主键是否重复抽象为质量规则。强规则 质量规则的校验结果对下游节点会造成较大影响。当强规则校验结果为异常时，下游节点的运维调度会自动停止，同时当前节点...
查看历史信息
如果您当前访问的是 Dev 或 Basic 项目，且项目空间为您的数据开发空间，则不需要选择项目空间。在数据 开发 页面，将鼠标悬停在顶部菜单栏的 开发 上，单击 集成。在数据 集成 页面，单击需要查看历史版本详情的离线单条管道。在管道脚本...
治理项管理流程
治理项的管理流程如下：元数据管理：配置和管理数据治理所需要的元数据指标。治理项管理：基于元数据指标，配置和管理数据治理所需的规则及判定策略（即治理项）。推送管理：对于单一或多个被治理项规则触发的待治理数据对象（表或任务节点...
执行同步任务
背景信息 执行同步任务的说明：如果您创建的同步任务的调度类型为 周期任务，则不需要执行同步任务，系统会每天自动生成调度任务。如果您创建的同步任务的调度类型为 手动任务，则需要您手动触发调度任务。操作步骤 登录 Dataphin控制台。...
治理项管理流程
治理项的管理流程如下：元数据管理：配置和管理数据治理所需要的元数据指标。治理项管理：基于元数据指标，配置和管理数据治理所需的规则及判定策略（即治理项）。推送管理：对于单一或多个被治理项规则触发的待治理数据对象（表或任务节点...
管理API权限
权限字段表 选中需要申请的字段。权限配置 权限类型 系统默认选中 使用权限，不支持修改。权限账号 系统默认选中 应用，不支持修改。应用 选择应用分组和应用。有效期 系统支持选择30天，90天，180天和长期，您也可以选中自定义后，选择...
新建SQL查询
Dataphin分析平台提供专注...查询数据源数据需要选择对应数据源。若无可选数据源，可以单击+新建数据源 进行新建。单击 确定，完成SQL查询新建。后续步骤 完成SQL查询新建后，您可以对SQL查询进行编辑和管理。更多信息，请参见 SQL查询概述。
查看历史信息
如果您当前访问的是 Dev 或 Basic 项目，且项目空间为您的数据开发空间，则不需要选择项目空间。在数据 开发 页面，将鼠标悬停在顶部菜单栏的 开发 上，单击 集成。在数据 集成 页面，单击需要查看历史版本详情的离线单条管道。在管道脚本...
新建SQL查询
Dataphin分析平台提供专注...查询数据源数据需要选择对应数据源。若无可选数据源，可以单击+新建数据源 进行新建。单击 确定，完成SQL查询新建。后续步骤 完成SQL查询新建后，您可以对SQL查询进行编辑和管理。更多信息，请参见 SQL查询概述。
管理服务单元权限
如果您需要使用他人的服务单元生成API，则需要申请服务单元的使用权限。前提条件 已购买数据服务模块，详情请参见 开通Dataphin。申请服务单元权限 在Dataphin首页，单击顶部菜单栏的 管理中心。按照下图操作指引，进入 服务单元权限申请 ...
消息渠道概述
邮箱也是类似，需要配置接收人的邮箱地址等参数。Dataphin中您可通过阿里云语音服务和阿里云短信服务进行服务的配置。通过这两个服务，将Dataphin的告警消息通过电话和短信的方式通知到相关人员，保障生产的安全。若您的企业中已经有自己的...
申请、交还应用权限
如果您需要消费他人生成的API，则需要申请该API所在的应用权限。前提条件 已购买数据服务增值服务，详情请参见 开通Dataphin。申请应用权限 在Dataphin首页，单击顶部菜单栏的 管理中心。按照下图指引，进入 申请应用权限 页面。在 应用...
变更管控
变更管控功能是指在变更环节（如提交、发布、运维操作等），通过配置...规则配置完成后，支持配置规则及策略生效灵活开关，以调整管控规则及策略配置，实现不同的管控效果，从而减少人工干预成本，也能进一步提升平台建设的规范性和稳定性。
概述
为了及时告知您任务运行过程中的异常情况，Dataphin支持对离线计算、实时计算、资产质量、数据服务模块的监控报警规则进行告警。任务运行过程中，如果触发了监控告警...如果您需要通过值班表告警信息，在创建告警规则前您可以先创建值班表。
变更管控
变更管控功能是指在变更环节（如提交、发布、运维操作等），通过配置...规则配置完成后，支持配置规则及策略生效灵活开关，以调整管控规则及策略配置，实现不同的管控效果，从而减少人工干预成本，也能进一步提升平台建设的规范性和稳定性。
划分主题域
数据仓库模型设计除横向的分层外，通常还需要根据业务情况纵向划分主题域。主题域是联系较为紧密的数据主题的集合，是业务对象高度概括的概念层次归类，目的是便于数据的管理和应用。划分流程 通常您需要阅读各源系统的设计文档、数据字典...
创建派生指标
派生指标用于圈定原子指标统计业务的范围。本文为您介绍如何创建派生指标。操作步骤 在Dataphin首页，单击顶部菜单栏的 研发。...后续步骤 如果项目的模式为Dev-Prod，则您需要发布派生指标至生产环境。具体操作，请参见 管理发布任务。
漏洞管理
确定了需要修复的漏洞之后，便会记录漏洞，并根据严重程度确定优先级，然后为其分配所有者。漏洞管理团队会跟踪此类问题，并经常跟进，直至确认问题已得到修复。渗透性测试 经Dataphin授权，绿盟科技渗透测试小组对产品进行了渗透性测试，...
创建派生指标
派生指标用于圈定原子指标统计业务的范围。本文为您介绍如何创建派生指标。操作步骤 在Dataphin首页，单击顶部菜单栏的 研发。...后续步骤 如果项目的模式为Dev-Prod，则您需要发布派生指标至生产环境。具体操作，请参见 管理发布任务。
管理中心概述
在使用Dataphin前，超级管理员需要通过管理中心添加Dataphin成员及设置Dataphin实例的计算引擎。同时您也可以配置计算和存储资源的规则，优化逻辑表任务、SQL查询任务及设置查询引擎，以提高数据构建效率。使用限制 仅支持超级管理员在管理...
- 产品推荐
- 这些文档可能帮助您