Java UDF最佳实践
本教程以Java自带函数（toLowerCase）为例，为您介绍如何基于Dataphin自定义Java UDF函数。前提条件 下载 JAR包。背景信息 本教程基于下载的JAR包自定义的Java UDF函数，实现大写字母转换为小写字母。您也可以编写Java UDF代码，以实现更多...
明确统计指标
确定指标 本教程中，用户是A公司电商营销部门的营销数据分析师。数据需求为最近一天厨具类目的商品在各省的销售总额、该类目销售额前10的商品名称、各省用户购买力分布（人均消费额）等，用于营销分析。基于规范定义，确认业务过程为确认收...
分析业务过程
本教程中，经过业务过程调研，我们了解到A公司电商营销业务的交易订单功能模块的业务过程如下。这是一个非常典型的电商交易业务过程图。在该业务过程中，有 创建订单、买家付款、卖家发货、确认收货 四个核心业务环节。确认收货即表示交易...
变更管控
变更管控功能是指在变更环节（如提交、发布、运维操作等），通过配置...规则配置完成后，支持配置规则及策略生效灵活开关，以调整管控规则及策略配置，实现不同的管控效果，从而减少人工干预成本，也能进一步提升平台建设的规范性和稳定性。
步骤二：开发事实逻辑表
本文为您介绍如何基于本教程完成 下单购买事实逻辑表（fct_order_buy_di）开发。步骤一：新建事实逻辑表 在Dataphin首页，单击顶部菜单栏的 开发。按照下图操作指引，进入 新建事实逻辑表 对话框。在 新建事实逻辑表 页面，配置相关参数。...
变更管控
变更管控功能是指在变更环节（如提交、发布、运维操作等），通过配置...规则配置完成后，支持配置规则及策略生效灵活开关，以调整管控规则及策略配置，实现不同的管控效果，从而减少人工干预成本，也能进一步提升平台建设的规范性和稳定性。
步骤二：开发事实逻辑表
本文为您介绍如何基于本教程完成 下单购买事实逻辑表（fct_order_buy_di）开发。步骤一：新建事实逻辑表 在Dataphin首页，单击顶部菜单栏的 开发。按照下图操作指引，进入 新建事实逻辑表 对话框。在 新建事实逻辑表 页面，配置相关参数。...
步骤五：启动实例并插入数据
本文将指导您完成本教程的FLINK_SQL实时任务的运维，包括实时实例启动与测试数据的写入。步骤一：启动实时任务 在Dataphin首页，单击顶部菜单栏的 研发。按照下图操作指引，启动 flink_dataphin 实时任务。启动实时实例对话框，配置启动...
数仓规划概述
数仓规划是基于Dataphin建设数据中台的第一步，同时也是数据体系的顶层设计中至关重要的一步。在您开始数据开发前，需要完成数据仓库的规划，包括定义数据板块、项目、数据源、计算源和统计周期。功能介绍 数仓规划包括逻辑空间与物理空间...
步骤五：启动实例并插入数据
本文将指导您完成本教程的FLINK_SQL实时任务的运维，包括实时实例启动与测试数据的写入。步骤一：启动实时任务 在Dataphin首页，单击顶部菜单栏的 研发。按照下图操作指引，启动 flink_dataphin 实时任务。启动实时实例对话框，配置启动...
产品概述
产品描述 Dataphin是集产品、技术、方法论于一体的智能大数据平台建设引擎，为您提供数据引入、规范定义、建模研发、资产管理、数据服务等全链路智能数据建设及治理服务。功能 描述 Dataphin全托管 全托管又称公共云多租户模式，只需购买...
Dataphin智能数据建设与治理试用服务协议
协议版本生效日期：2022年11月22日 本协议是 Dataphin智能数据建设与治理（简称“Dataphin”）与您就 Dataphin 提供的免费试用服务的相关事项所订立的有效合约。1.免费试用内容说明 1.1 免费试用次数：每个 UID 仅可开通 1 次免费试用。1.2...
实时研发基本流程概述
本教程将指导您如何在Dataphin中基于Ververica Flink完成实时研发并进行可视化分析。以帮助您快速了解Dataphin进行实时研发的基本流程。背景信息 某公司的订单系统使用MySQL作为存储数据库，其中的oms_order为存储订单的表。现在要开始设计...
汇总数据层（DWS）
在本教程中，最终的分析目标为：最近一天某个类目（例如，厨具）商品在各省的销售总额、该类目销售额Top10的商品名称、各省用户购买力分布。因此，我们可以以最终交易成功的商品、类目、买家等角度对最近一天的数据进行汇总。数据聚集的...
Dataphin智能数据建设与治理服务等级协议（半托管）
版本生效日期：2024年03月26日 本服务等级协议（Service Level Agreement，以下简称“SLA”）约定了阿里云向客户提供的智能数据建设与治理（简称“Dataphin”）的服务可用性等级指标及赔偿方案。特别提示您，除非另有约定，本协议不适用于...
实时研发基本流程概述
本教程将指导您如何在Dataphin中基于Ververica Flink完成实时研发并进行可视化分析。以帮助您快速了解Dataphin进行实时研发的基本流程。背景信息 某公司的订单系统使用MySQL作为存储数据库，其中的oms_order为存储订单的表。现在要开始设计...
准备数据源和计算源
在使用Dataphin前，您需要选择符合业务场景需求的数据库或数据仓库作为数据源，用于读取原始数据和写入数据建设过程中的数据；同时您需要准备MaxCompute项目、Flink项目作为Dataphin的计算源，为数据的研发提供计算资源。准备数据源 ...
DataX同步数据
本教程以RDS MySQL数据库为例，为您介绍基于Dataphin如何调用DataX同步数据。前提条件 已开通RDS MySQL实例，且RDS MySQL实例的网络类型为专有网络。如何开通RDS MySQL实例，请参见 快速创建RDS MySQL实例。已创建RDS MySQL实例的数据库和...
准备数据源和计算源
在使用Dataphin前，您需要选择符合业务场景需求的数据库或数据仓库作为数据源，用于读取原始数据和写入数据建设过程中的数据；同时您需要准备MaxCompute项目、Flink项目作为Dataphin的计算源，为数据的研发提供计算资源。准备数据源 ...
DataX同步数据
本教程以RDS MySQL数据库为例，为您介绍基于Dataphin如何调用DataX同步数据。前提条件 已开通RDS MySQL实例，且RDS MySQL实例的网络类型为专有网络。如何开通RDS MySQL实例，请参见 创建RDS MySQL实例。已创建RDS MySQL实例的数据库和账号...
升级
请您仔细核对购买信息并阅读 智能数据建设与治理服务协议，确认无误后选中 智能数据建设与治理服务协议。单击 去支付，支付成功后即可开始升级开通增值功能包。正在通过升级开通增值功能包的Dataphin实例，在Dataphin管理控制台页面，显示 ...
步骤四：开发FLINK_SQL实时任务
本文将指导您完成本教程的FLINK_SQL实时任务的创建与开发。步骤一：新建 FLINK_SQL 任务 在Dataphin首页，单击顶部菜单栏 研发。按照下图操作指引，进入 新建FLINK_SQL任务 对话框。在 新建FLINK_SQL任务 对话框，配置参数。参数 说明 任务...
步骤四：开发FLINK_SQL实时任务
本文将指导您完成本教程的FLINK_SQL实时任务的创建与开发。步骤一：新建 FLINK_SQL 任务 在Dataphin首页，单击顶部菜单栏 研发。按照下图操作指引，进入 新建FLINK_SQL任务 对话框。在 新建FLINK_SQL任务 对话框，配置参数。参数 说明 任务...
逻辑结构说明
当数据的业务含义存在较大差异时，您可以创建不同的数据板块，让各成员独立管理不同的业务，后续数据仓库的建设将按照数据板块进行划分。主题域 数据域即主题域，是对某个主题分析后确定的主题边界。例如，商品域、交易域、会员域等。项目 ...
设置Dataphin实例的计算引擎
校验成功后，单击 确认并开始数据建设，即可开始数据建设。后续步骤 完成设置Dataphin实例的计算引擎后，您就可以准备后续数据研发过程中用于读取和写入数据的数据源、用于提供计算资源的计算源。具体操作，请参见 准备数据源和计算源。
概念建模概述
背景信息 在建设数据中台的流程中，一般的首要任务是对整个业务进行前置调研，如先盘点出参与业务的人员、事物和基本规则定义，并理清人、事、物之间的关系和发生的各种交互行为。在全面了解业务的架构和运行情况后，产出业务的概念模型。...
使用限制
计算引擎类型 选择设置 计算引擎设置需要提前采购计算引擎MaxCompute资源，系统以此来支持相关数据的建设工作。需要选择计算引擎类型（目前仅开放MaxCompute计算类型），配置计算引擎所在的集群，例如Endpoint等信息。系统以此来支持该计算...
概念建模概述
背景信息 在建设数据中台的流程中，一般的首要任务是对整个业务进行前置调研，如先盘点出参与业务的人员、事物和基本规则定义，并理清人、事、物之间的关系和发生的各种交互行为。在全面了解业务的架构和运行情况后，产出业务的概念模型。...
步骤二：实时项目规划
本文将指导您完成本教程的Ververica Flink计算源、数据源、实时项目的创建与绑定。步骤一：创建 Ververica Flink 计算源 在Dataphin首页，单击顶部菜单栏的 规划。按照下图操作指引，进入 Ververica Flink新建计算源 页面。在 新建计算源 ...
步骤二：实时项目规划
本文将指导您完成本教程的Ververica Flink计算源、数据源、实时项目的创建与绑定。步骤一：创建 Ververica Flink 计算源 在Dataphin首页，单击顶部菜单栏的 规划。按照下图操作指引，进入 Ververica Flink新建计算源 页面。在 新建计算源 ...
步骤五：规范建模
本文为您介绍如何基于本教程完成数据建模。背景信息 数据建模是使用可视化视图的方式抽象表示或定义业务的过程。通过构建数据模型，可清晰的梳理出业务所参与的对象和业务活动，帮助企业全面的了解业务过程，从而改进业务流程。同时也能够...
步骤五：规范建模
本文为您介绍如何基于本教程完成数据建模。背景信息 数据建模是使用可视化视图的方式抽象表示或定义业务的过程。通过构建数据模型，可清晰的梳理出业务所参与的对象和业务活动，帮助企业全面的了解业务过程，从而改进业务流程。同时也能够...
资产质量概述
背景信息 面对各行各业日趋强烈的大数据建设、管理及应用的诉求，Dataphin应用场景的多样性及复杂性随之增加。因业务系统的原始数据的规范性无法得以保障，所以Dataphin需要定义数据分析的质量，以满足资产质量的时效性、准确性、完整性、...
资产质量概述
背景信息 面对各行各业日趋强烈的大数据建设、管理及应用的诉求，Dataphin应用场景的多样性及复杂性随之增加。因业务系统的原始数据的规范性无法得以保障，所以Dataphin需要定义数据分析的质量，以满足资产质量的时效性、准确性、完整性、...
Dataphin免费试用申请
申请信息填写完后，勾选 我已阅读并同意《Dataphin智能数据建设与治理试用服务协议》，单击 免费试用，体验Dataphin功能。相关文档 试用开通成功后，您可按照 Dataphin新手引导 一步步体验Dataphin的研发流程，也可按照 导入模型 来导入...
元数据仓库共享模型概述
业务租户：统称为 开发租户，进行数据中台建设的租户，即进行数据开发和治理的核心使用租户。一个Dataphin实例可以创建多个开发租户，由元仓租户在租户设置页面创建并分配可用资源（数据处理单元数、质量规则数等）。元仓共享模型数据说明 ...
开通Dataphin
注意事项 开通Dataphin前，请您了解以下几点：购买前建议您先联系阿里云 售前咨询 并提供企业数据建设需求及背景信息。待阿里云售前咨询帮您确认Dataphin当前版本及功能是否符合您的需求后，会为您开通购买权限。Dataphin不支持无条件退款...
自定义RDBMS数据库及同步数据
本教程以MySQL为例，为您介绍如何自定义RDBMS数据库及进行数据同步。前提条件 已开通RDS MySQL实例，且网络类型为专有网络（VPC）。如何开通RDS MySQL实例，请参见 快速创建RDS MySQL实例。已创建RDS MySQL实例的数据库和账号，创建过程中...
什么是Dataphin
管理中心 全局规划 基于Dataphin建设数据中台的第一步，同时也是数据体系的顶层设计中至关重要的一步。在您开始数据开发前，需要完成数据仓库的规划，包括定义业务板块、数据域、项目、数据源、计算源和统计周期。数仓规划 数据引入 基于...
自定义RDBMS数据库及同步数据
本教程以MySQL为例，为您介绍如何自定义RDBMS数据库及进行数据同步。前提条件 已开通RDS MySQL实例，且网络类型为专有网络（VPC）。如何开通RDS MySQL实例，请参见 快速创建RDS MySQL实例。已创建RDS MySQL实例的数据库和账号，创建过程中...
- 产品推荐
- 这些文档可能帮助您