什么是Dataphin
管理中心 全局规划 基于Dataphin建设数据中台的第一步，同时也是数据体系的顶层设计中至关重要的一步。在您开始数据开发前，需要完成数据仓库的规划，包括定义业务板块、数据域、项目、数据源、计算源和统计周期。数仓规划 数据引入 基于...
数据源管理概述
在使用Dataphin前，您可将需要引入Dataphin的数据源接入到Dataphin中，已接入的数据源可用于读取原始数据和写入数据建设过程中的数据。Dataphin具备丰富的数据源类型接入，支持对接如MaxCompute、Hive等数据仓库，也支持对接企业传统数据库...
数据源管理概述
在使用Dataphin前，您可将需要引入Dataphin的数据源接入到Dataphin中，已接入的数据源可用于读取原始数据和写入数据建设过程中的数据。Dataphin具备丰富的数据源类型接入，支持对接如MaxCompute、Hive等数据仓库，也支持对接企业传统数据库...
数据服务概述
数据服务（OneService）是基于Dataphin建设数据中台的最后一步。数据服务作为统一的数据服务出口，实现了数据的统一市场化管理，有效地降低数据开放门槛的同时，保障了数据开放的安全。前提条件 已购买 数据服务 增值服务，开通Dataphin ...
资产安全概述
场景2：开发环境数仓建设 敏感数据从生产环境写入开发环境过程中，您可以使用资产安全内置的敏感数据识别规则和脱敏规则，自动实现敏感数据的脱敏，确保敏感数据始终保留在高权限的生产环境，不会泄露到开发环境。场景3：脱敏白名单的灵活...
创建MySQL数据源
常用于网站、应用程序和商业产品，是一种常见的主要关系数据存储系统。更多详情请参见 MySQL官网。使用限制 Dataphin仅支持 超级管理员、数据源管理员、板块架构师、项目管理员 角色创建数据源。操作步骤 在Dataphin首页，单击顶部菜单栏的...
免费试用阿里云产品
云原生数据库PolarDB MySQL版 快速使用PolarDB MySQL版集群 云原生数据库 PolarDB 分布式版 云原生数据库PolarDB分布式版企业版试用教程 云原生数据库 PolarDB PostgreSQL 版 云原生数据库PolarDB PostgreSQL版（兼容Oracle）试用教程 云...
核心概念
当数据的业务含义存在较大差异时，您可以创建不同的数据板块，独立管理不同的业务，后续数据仓库的建设将按照数据板块进行划分。在Dataphin中，项目可以归属至数据板块以实现规范建模功能，同一个数据板块中可能包含多个不同的项目，所以...
Dataphin智能数据建设与治理试用服务协议
协议版本生效日期：2022年11月22日 本协议是 Dataphin智能数据建设与治理（简称“Dataphin”）与您就 Dataphin 提供的免费试用服务的相关事项所订立的有效合约。1.免费试用内容说明 1.1 免费试用次数：每个 UID 仅可开通 1 次免费试用。1.2...
Dataphin智能数据建设与治理服务等级协议（半托管）
版本生效日期：2024年03月26日 本服务等级协议（Service Level Agreement，以下简称“SLA”）约定了阿里云向客户提供的智能数据建设与治理（简称“Dataphin”）的服务可用性等级指标及赔偿方案。特别提示您，除非另有约定，本协议不适用于...
实践教程
针对各种业务需求，Dataphin提供相关实践教程，您可根据不同场景查看最佳实践教程进行参考。Dataphin 面向零售店铺的模型构建与管理 自定义RDBMS数据库及同步数据 DataX同步数据 使用Python读文件 Java UDF最佳实践 规范定义最佳实践
手动运行标签
若您的标签更新方式为手动更新，您可手动选择所需运行的版本并运行标签。本文将指导您如何手动运行标签。操作步骤 在Dataphin首页，单击顶部菜单栏的 标签。进入Dataphin 标签 页面后，默认进入 ...说明 手动运行时计算的是最新分区的数据。
步骤四：规范定义
本文为您介绍在本教程中如何进行规范定义。基本概念 业务实体：业务对象 业务对象是度量的基础，用来反映业务的一类属性，这类属性的集合构成一个业务对象，也可以称为一个实体对象。在划分主题域、构建总线矩阵时，需要结合对业务活动的...
步骤四：规范定义
本文为您介绍在本教程中如何进行规范定义。基本概念 业务实体：业务对象 业务对象是度量的基础，用来反映业务的一类属性，这类属性的集合构成一个业务对象，也可以称为一个实体对象。在划分主题域、构建总线矩阵时，需要结合对业务活动的...
技术架构选型
本教程中使用阿里云大数据产品Dataphin配合MaxCompute，完成整体的数据建模和研发流程。完整的技术架构如下图所示。其中，Dataphin的数据集成及同步负责完成源业务系统数据引入。MaxCompute作为整个大数据开发过程中的离线计算引擎。...
步骤五：开发指标
本文为您介绍如何完成本教程的 最近1天西湖龙井品类订单总金额 派生指标开发。操作步骤 在Dataphin首页，单击顶部菜单栏的 研发。默认进入数据 开发 页面。按照下图操作指引，进入 新建派生指标 配置向导页面。在 新建派生指标 配置向导...
步骤五：开发指标
本文为您介绍如何完成本教程的 最近1天西湖龙井品类订单总金额 派生指标开发。操作步骤 在Dataphin首页，单击顶部菜单栏的 研发。默认进入数据 开发 页面。按照下图操作指引，进入 新建派生指标 配置向导页面。在 新建派生指标 配置向导...
步骤八：验证数据
本文为您介绍如何通过即席查询来验证本教程开发的数据模型是否符合预期。即派生指标是否能够统计到 最近1天西湖龙井品类订单总金额。操作步骤 在Dataphin首页，单击顶部菜单栏的 研发。按照下图操作指引，进入 新建即席查询 对话框。在 ...
步骤八：验证数据
本文为您介绍如何通过即席查询来验证本教程开发的数据模型是否符合预期。即派生指标是否能够统计到 最近1天西湖龙井品类订单总金额。操作步骤 在Dataphin首页，单击顶部菜单栏的 研发。按照下图操作指引，进入 新建即席查询 对话框。在 ...
步骤四：开发业务限定
本文为您介绍如何基于本教程完成 西湖龙井 业务限定开发。操作步骤 在Dataphin首页，单击顶部菜单栏 研发。默认进入数据 开发 页面。按照下图操作指引，进入 新建业务限定 对话框。在 新建业务限定 对话框，配置参数。参数 描述 基本信息 ...
步骤四：开发业务限定
本文为您介绍如何基于本教程完成 西湖龙井 业务限定开发。操作步骤 在Dataphin首页，单击顶部菜单栏 研发。默认进入数据 开发 页面。按照下图操作指引，进入 新建业务限定 对话框。在 新建业务限定 对话框，配置参数。参数 描述 基本信息 ...
步骤三：开发原子指标
本文为您介绍如何基于本教程完成 订单总金额 原子指标开发。操作步骤 在Dataphin首页，单击顶部菜单栏 研发。按照下图操作指引，进入 新建原子指标 对话框。在 新建原子指标 对话框，配置参数。配置 基本信息 区域参数。参数 描述 业务实体...
步骤三：开发原子指标
本文为您介绍如何基于本教程完成 订单总金额 原子指标开发。操作步骤 在Dataphin首页，单击顶部菜单栏 研发。按照下图操作指引，进入 新建原子指标 对话框。在 新建原子指标 对话框，配置参数。配置 基本信息 区域参数。参数 描述 业务实体...
步骤六：可视化分析
本文将使用Quick BI指导您完成本教程的可视化分析步骤，包括数据源、数据集的创建和数据大屏图表的配置。步骤一：创建数据源 登录 Quick BI控制台。按照下图操作指引，进入 创建数据源 对话框。在 MySQL-阿里云 区域，配置连接参数。参数 ...
步骤六：可视化分析
本文将使用Quick BI指导您完成本教程的可视化分析步骤，包括数据源、数据集的创建和数据大屏图表的配置。步骤一：创建数据源 登录 Quick BI控制台。按照下图操作指引，进入 创建数据源 对话框。在 MySQL-阿里云 区域，配置连接参数。参数 ...
步骤一：准备工作
本文将指导您完成本教程的云资源准备工作。步骤一：阿里云账号资源准备 主流程 描述 操作指导 准备阿里云账号 创建阿里云账号。准备阿里云账号 创建RAM用户 创建主账号的RAM用户。准备RAM用户 步骤二：Dataphin开通与AccessKey配置 主流程 ...
步骤七：运维补数据
本文为您介绍如何为本教程的维度逻辑表、事实逻辑表、汇总逻辑表和管道任务补数据。背景信息 您需要为产品表、客户表、订单表集成任务和明细及汇总表 dim_customer、dim_products、fct_order_buy_di、dws_all 补数据。集成任务和明细及汇总...
步骤一：准备工作
本文将指导您完成本教程的云资源准备工作。步骤一：阿里云账号资源准备 主流程 描述 操作指导 准备阿里云账号 创建阿里云账号。准备阿里云账号 创建RAM用户 创建主账号的RAM用户。准备RAM用户 步骤二：Dataphin开通与AccessKey配置 主流程 ...
步骤七：运维补数据
本文为您介绍如何为本教程的维度逻辑表、事实逻辑表、汇总逻辑表和管道任务补数据。背景信息 您需要为产品表、客户表、订单表集成任务和明细及汇总表 dim_customer、dim_products、fct_order_buy_di、dws_all 补数据。集成任务和明细及汇总...
创建变更策略
生效时间：新建或变更策略，资产对象发生变更时，对应策略即时生效，按照最新策略进行校验。管理权限：仅超级管理员和系统管理员可以新建变更策略；仅超级管理员、系统管理员和变更策略负责人可以编辑和删除变更策略。前提条件 在新建变更...
创建变更策略
生效时间：新建或变更策略，资产对象发生变更时，对应策略即时生效，按照最新策略进行校验。管理权限：仅超级管理员和系统管理员可以新建变更策略；仅超级管理员、系统管理员和变更策略负责人可以编辑和删除变更策略。前提条件 在新建变更...
运行配置
重要 修改后，运行属性设置为系统配置的任务对应的实例（包括修改后新生成的、以及已生成但未开始运行的）均会按照最新配置运行。新配置生效可能需要一段时间（最多5分钟），请耐心等待。配置建议 您可根据您的业务需求和以下配置建议进行...
手工表概述
从引擎同步：将从引擎同步此表的最新数据。说明 该操作可能耗时较久且会覆盖当前页面的数据，确认操作后请耐心等待。刷新：刷新当前表最新保存数据。定位：在手工表目录中定位当前表。③ 编辑区 您可在编辑区中编辑手工表数据。说明 在编辑...
运行配置
重要 修改后，运行属性设置为系统配置的任务对应的实例（包括修改后新生成的、以及已生成但未开始运行的）均会按照最新配置运行。新配置生效可能需要一段时间（最多5分钟），请耐心等待。配置建议 您可根据您的业务需求和以下配置建议进行...
手工表概述
从引擎同步：将从引擎同步此表的最新数据。说明 该操作可能耗时较久且会覆盖当前页面的数据，确认操作后请耐心等待。刷新：刷新当前表最新保存数据。定位：在手工表目录中定位当前表。③ 编辑区 您可在编辑区中编辑手工表数据。说明 在编辑...
明确统计指标
确定指标 本教程中，用户是A公司电商营销部门的营销数据分析师。数据需求为最近一天厨具类目的商品在各省的销售总额、该类目销售额前10的商品名称、各省用户购买力分布（人均消费额）等，用于营销分析。基于规范定义，确认业务过程为确认收...
步骤一：开发维度逻辑表
本文为您介绍如何基于本教程完成 产品维度逻辑表 和 客户维度逻辑表 开发。背景信息 完成产品维度逻辑表开发并提交后，还需完成客户维度逻辑表的开发并提交。本教程的产品维度逻辑表开发与客户维度逻辑表开发操作步骤相同，本文以开发 产品...
分析业务过程
本教程中，经过业务过程调研，我们了解到A公司电商营销业务的交易订单功能模块的业务过程如下。这是一个非常典型的电商交易业务过程图。在该业务过程中，有 创建订单、买家付款、卖家发货、确认收货 四个核心业务环节。确认收货即表示交易...
步骤一：开发维度逻辑表
本文为您介绍如何基于本教程完成 产品维度逻辑表 和 客户维度逻辑表 开发。背景信息 完成产品维度逻辑表开发并提交后，还需完成客户维度逻辑表的开发并提交。本教程的产品维度逻辑表开发与客户维度逻辑表开发操作步骤相同，本文以开发 产品...
项目安全策略
如果已经安装资产安全策略，您可以查看安装日志，同时也可以更新为最新版本。如果是安装中的资产安全策略（项目级和函数级），您可以查看安装日志，同时也支持取消安装。您也可以按照下图指引，系统会批量安装或者更新资产安全策略。策略...
- 产品推荐
- 这些文档可能帮助您