开通Dataphin
注意事项 开通Dataphin前，请您了解以下几点：购买前建议您先联系阿里云 售前咨询 并提供企业数据建设需求及背景信息。待阿里云售前咨询帮您确认Dataphin当前版本及功能是否符合您的需求后，会为您开通购买权限。Dataphin不支持无条件退款...
数据服务概述
数据服务（OneService）是基于Dataphin建设数据中台的最后一步。数据服务作为统一的数据服务出口，实现了数据的统一市场化管理，有效地降低数据开放门槛的同时，保障了数据开放的安全。前提条件 已购买 数据服务 增值服务，开通Dataphin ...
数仓构建流程
本文为您介绍如何基于阿里巴巴OneData方法论最佳实践，使用Dataphin助力企业数据中台的建设与管理，快速构建标准、规范的数据仓库。数仓构建流程 下图为使用Dataphin构建数据仓库的基本流程。基本概念 在正式学习本教程之前，您需要了解...
使用限制
计算引擎类型 选择设置 计算引擎设置需要提前采购计算引擎MaxCompute资源，系统以此来支持相关数据的建设工作。需要选择计算引擎类型（目前仅开放MaxCompute计算类型），配置计算引擎所在的集群，例如Endpoint等信息。系统以此来支持该计算...
逻辑结构说明
当数据的业务含义存在较大差异时，您可以创建不同的数据板块，让各成员独立管理不同的业务，后续数据仓库的建设将按照数据板块进行划分。主题域 数据域即主题域，是对某个主题分析后确定的主题边界。例如，商品域、交易域、会员域等。项目 ...
规范定义最佳实践
当数据的业务含义存在较大差异时，您可以创建不同的数据板块，让各成员独立管理不同的业务，后续数据仓库的建设将按照数据板块进行划分。在Dataphin中，项目可以归属至数据板块以实现规范建模功能，同一个数据板块中可能包含多个不同的项目...
规范定义最佳实践
当数据的业务含义存在较大差异时，您可以创建不同的数据板块，让各成员独立管理不同的业务，后续数据仓库的建设将按照数据板块进行划分。在Dataphin中，项目可以归属至数据板块以实现规范建模功能，同一个数据板块中可能包含多个不同的项目...
确定需求
业务调研 充分的业务调研和需求分析是数据仓库建设的基石，直接决定数据仓库能否建设成功。在数仓建设项目启动前，您需要请相关的业务人员介绍具体的业务，以便明确各个团队的分析员、运营人员的需求，沉淀出相关文档。您可以通过调查表、...
核心概念
当数据的业务含义存在较大差异时，您可以创建不同的数据板块，独立管理不同的业务，后续数据仓库的建设将按照数据板块进行划分。在Dataphin中，项目可以归属至数据板块以实现规范建模功能，同一个数据板块中可能包含多个不同的项目，所以...
升级
请您仔细核对购买信息并阅读 智能数据建设与治理服务协议，确认无误后选中 智能数据建设与治理服务协议。单击 去支付，支付成功后即可开始升级开通增值功能包。正在通过升级开通增值功能包的Dataphin实例，在Dataphin管理控制台页面，显示 ...
Dataphin免费试用申请
背景信息 为了方便您在做出购买决策之前更好地了解产品功能，Dataphin提供30天的免费试用，您可以通过单击 免费试用 体验试用版。说明 试用到期之后，试用实例的数据会继续为您保留14天，14天后实例释放并清空相关数据。若您希望保留部分...
元数据仓库共享模型概述
基于开放的元数据信息，您可以结合业务场景进行二次开发，以更好地满足对下游业务的适配性；也可以对数仓开发任务等进行更细粒度的盘点和分析，以辅助决策优化。应用场景 降低开发成本：在Dataphin有10+以上的元数据库，比较复杂。若您有...
合规&认证
安全合规认证 在帮助各行各业的企业实现数字化的过程中，瓴羊已经建立齐了一套科学有效的数据安全保护体系。瓴羊积极参与监管以及行业协会牵头的数据安全与合规标准，向行业输出瓴羊的最佳合规实践，得到了监管以及行业的认可与好评。目前...
什么是Dataphin
资产安全 数据服务 数据服务为您提供高效、便捷的主题式查询功能及有效的全链路企业内API生命周期托管，真正实现低门槛API开发，帮助您更好地进行数据资产应用以实现价值化。数据服务 告警中心 告警中心是基于Dataphin构建的监控告警平台，...
明细数据层（DWD）
选定好业务过程并且确定粒度之后，就可以确定维度信息了，应该选择能够描述清楚业务过程所处的环境的维度信息。例如，在A公司的交易订单事务事实表设计过程中，粒度为订单，确定的维度包含：买家、卖家、商品名称、商品类目、发货地区、收...
Dataphin智能数据建设与治理服务等级协议（半托管）
版本生效日期：2024年03月26日 本服务等级协议（Service Level Agreement，以下简称“SLA”）约定了阿里云向客户提供的智能数据建设与治理（简称“Dataphin”）的服务可用性等级指标及赔偿方案。特别提示您，除非另有约定，本协议不适用于...
规划和设计
安全是需要设计和规划的，应在构建基于云或本地数据中心的同时，建设安全系统和相关控制措施，建立配套安全管理流程和机制，建立安全意识管理体系等。并将技术控制措施、管理流程、人员组织配套的融入云基础设施的构建、业务开发，应用上线...
PAI语法
机器学习PAI命令提供了更加灵活、自由、高效的算法研发模式，Dataphin除了支持导入PAI的工作流创建PAI Designer任务，同时也支持PAI命令。...Dataphin解析参数的时间相比较PAI可能会有延迟，如需快速解析，请联系Dataphin客服人员。
管理数据源标签
Dataphin数据源管理标签以标签的形式能够更好的帮助您管理业务中常用的数据源。您可以在管理标签列表中查看数据源被引用的信息。权限说明 Dataphin仅支持 超级管理员、数据源管理员 新建及管理数据源标签。新建数据源管理标签 在Dataphin...
管理数据源标签
Dataphin数据源管理标签以标签的形式能够更好的帮助您管理业务中常用的数据源。您可以在管理标签列表中查看数据源被引用的信息。权限说明 Dataphin仅支持 超级管理员、数据源管理员 新建及管理数据源标签。新建数据源管理标签 在Dataphin...
标签工厂概述
行为关系：通过具体的行为定义实体之间的关系，如“用户购买商品”通过“购买”这个行为描述了“用户”和“商品”这俩个实体之间的关系，定义好的行为关系可以用于开发行为统计以及偏好类型的标签，或者直接用于圈选群组。标签加工：标签是...
SQL可视化图表
柱状图 柱状图适用于用来比较各组数据之间的差别，并且可以显示一段时间内的数据变化情况。图例 数据要素 X轴 Y轴 拆分 说明 单击 图标，支持根据数据要素进行升序、降序、不排序。X轴和Y轴同时配置了排序时，以X轴排序为准。单击 图标，可...
SQL可视化图表
柱状图 柱状图适用于用来比较各组数据之间的差别，并且可以显示一段时间内的数据变化情况。图例 数据要素 X轴 Y轴 拆分 说明 单击 图标，支持根据数据要素进行升序、降序、不排序。X轴和Y轴同时配置了排序时，以X轴排序为准。单击 图标，可...
标签工厂新手指引
行为关系：行为关系指通过具体的行为定义实体之间的关系，如“用户购买商品”通过“购买”这个行为描述了“用户”行为主体和“商品”行为对象这两个实体之间的关系，定义好的行为关系可以用于开发行为统计、行为偏好以及规则组合类型的标签...
质量规则模板类型
单表时间字段比较 用于对同一表的两列的时间差进行比较。两表时间字段比较 用于对不同表的两列的时间差进行比较。有效性 字段格式校验 用于识别表达式或者正则表达式对单字段的格式进行校验。字段长度校验 用于对单字段的长度进行校验。...
质量规则模板类型
单表时间字段比较 用于对同一表的两列的时间差进行比较。两表时间字段比较 用于对不同表的两列的时间差进行比较。有效性 字段格式校验 用于识别表达式或者正则表达式对单字段的格式进行校验。字段长度校验 用于对单字段的长度进行校验。...
添加识别特征
识别阈值：只有内容匹配率超过识别阈值，该规则才会被认为是有效识别，进入该字段的识别结果中比较。按字段名称扫描：根据元数据中的字段名称进行扫描判断。正则（大小兼容）：在输入框中输入正则表达式。例如您需要匹配所有名称中带有test...
添加识别特征
识别阈值：只有内容匹配率超过识别阈值，该规则才会被认为是有效识别，进入该字段的识别结果中比较。按字段名称扫描：根据元数据中的字段名称进行扫描判断。正则（大小兼容）：在输入框中输入正则表达式。例如您需要匹配所有名称中带有test...
身份认证及访问控制
身份管理 在阿里云公共云环境下，...不同项目角色的权限等级不一样，可以按照实际情况进行项目角色授予，能更好保护项目内数据的安全。同时项目角色支持客户自定义，可以按照企业的管理制度和实际情况自定义角色进行项目内的用户管理。
身份认证及访问控制
身份管理 在独立部署环境下，Dataphin...不同项目角色的权限等级不一样，可以按照实际情况进行项目角色授予，能更好保护项目内数据的安全。同时项目角色支持客户自定义，可以按照企业的管理制度和实际情况自定义角色进行项目内的用户管理。
新建用户自定义函数
背景信息 Dataphin系统根据函数类型定义了函数的目录，帮助您更好地管理函数。操作步骤 在Dataphin首页，单击顶部菜单栏的 研发。在数据开发页面，按照下图操作指引，进入 新建函数 对话框。系统支持新建的函数类型，根据Dataphin系统的...
维度层（DIM）
维度层简介 建立一致数据分析维表，可以降低数据计算口径和算法不统一风险。以维度作为建模驱动，基于每个维度的业务含义，通过定义维度及维度主键，添加维度属性、关联维度等定义计算逻辑和雪花模型，完成属性定义的过程并建立一致的数据...
数仓分层
维度层（DIM，Dimension）：以维度作为建模驱动，基于每个维度的业务含义，通过添加维度属性、关联维度等定义计算逻辑，完成属性定义的过程并建立一致的数据分析维表。为了避免在维度模型中冗余关联维度的属性，基于雪花模型构建维度表。在...
敏感数据保护
加密后的数据只有拥有密钥权限的用户才能够进行查看，从而更好地保护敏感数据。Dataphin的敏感数据保护，主要有以下两种方案：脱敏方案 针对敏感数据进行遮盖脱敏和哈希脱敏保护，如将“张三”展示为“张*”，或者通过md5脱敏手机号，可以...
敏感数据保护
加密后的数据只有拥有密钥权限的用户才能够进行查看，从而更好地保护敏感数据。Dataphin的敏感数据保护，主要有以下两种方案：脱敏方案 针对敏感数据进行遮盖脱敏和哈希脱敏保护，如将“张三”展示为“张*”，或者通过md5脱敏手机号，可以...
实时模式依赖关系配置
表名 且不区分大小写，以标识本节点产出的表，同时其他节点更好地选择调度依赖关系。例如，开发项目名称为 onedata_dev，建议将输出名称设置为 onedata.s_order。如果您将输出名称设置为 onedata_dev.s_order，则仅限代码 select*from ...
实时模式依赖关系配置
表名 且不区分大小写，以标识本节点产出的表，同时其他节点更好地选择调度依赖关系。例如，开发项目名称为 onedata_dev，建议将输出名称设置为 onedata.s_order。如果您将输出名称设置为 onedata_dev.s_order，则仅限代码 select*from ...
创建Oracle数据源
背景信息 Oracle是一款可移植好、可靠性好、适应高、功能强大的关系型数据库。如果您使用的是Oracle，在对接Dataphin进行数据开发时，您需要先完成Oracle数据源的创建。更多Oracle信息，请参见 Oracle官网。权限说明 仅支持具备新建数据源...
离线模式依赖关系配置
表名 且不区分大小写，以标识本节点产出的表，同时其他节点更好地选择调度依赖关系。例如，开发项目名称为 onedata_dev，建议将输出名称设置为 onedata.s_order。如果您将输出名称设置为 onedata_dev.s_order，则仅限代码 select*from ...
分析业务过程
选择好粒度之后，您需要基于此粒度设计维表，包括维度属性等，用于分析时进行分组和筛选。确定衡量指标。本教程中，经过业务过程调研，我们了解到A公司电商营销业务的交易订单功能模块的业务过程如下。这是一个非常典型的电商交易业务过程...
- 产品推荐
- 这些文档可能帮助您