阿里云智能数据中台开发-阿里云智能数据中台开发文档介绍内容-阿里云

GetFile

该参数与 DataWorks控制台中，EMR Spark Streaming和EMR Streaming SQL数据开发任务，编辑页面右侧导航栏的“配置>时间属性>启动方式“对应。InputParameters Array of InputContextParameter 节点上下文输入参数。该参数与 DataWorks控制...

UpdateFile

该参数与 DataWorks控制台中，数据开发任务的“调度配置>时间属性>出错自动重跑”的”重跑间隔“配置对应。控制台中“重跑间隔”的时间单位为分钟，请在调用时注意转换时间。RerunMode String 否 ALL_ALLOWED 重跑属性。取值如下：ALL_...

必读：简单模式和标准模式的区别

附录：不同工作空间模式下，DataWorks模块对应操作的数据源您可以在数据开发>数据源界面下查看数据开发中已绑定的数据源信息。绑定后不同工作空间模式下，DataWorks模块对应操作的数据源如下表所示：DataWorks模块标准模式简单模式 ...

数据服务

面向数据资产管理者提供服务的统计分析、服务用量统计分析，实现数据中台建设后半场“数据应用”的有效落地，支撑数据智能应用的高效开发。前提条件已根据快速入门教程完成加载样例数据操作，具体信息请参见样例数据。已根据快速入门教程...

开发接入流程

在智能搭建控制台的页面管理模块中，创建页面，在页面搭建编辑器中，使用上述步骤中开发的组件和接口，进行页面搭建配置。只有通过校验的接口才会在页面搭建编辑器中展示并可以被使用。完成页面配置后，将页面发布到 PC 端和手机端。

元数据仓库共享模型概述

业务租户：统称为开发租户，进行数据中台建设的租户，即进行数据开发和治理的核心使用租户。一个Dataphin实例可以创建多个开发租户，由元仓租户在租户设置页面创建并分配可用资源（数据处理单元数、质量规则数等）。元仓共享模型数据说明 ...

功能简介

AnalyticDB PostgreSQL版的企业数据智能平台是数据资产定义、加工、管理、服务的全流程平台，提供数据同步、数据查询、数据建模、数据开发、质量评估、资产管理等功能，为智能数据应用持续稳定供给全量、标准、干净、智能的数据资源。...

什么是数据资源平台

统一服务：是一款数据中台建设过程中的数据服务化组件，面向数据开发者提供覆盖各个加工阶段统一体验的、便捷的数据查询转服务、服务管理、服务运维能力；面向数据资产管理者提供服务的统计分析、服务用量统计分析能力，实现数据中台建设后...

首页

登录 DataWorks控制台，单击左侧导航栏的数据建模与开发>数据开发，在下拉框中选择对应工作空间后单击进入数据开发。单击左上方的图标，选择全部产品>数据建模>数仓规划，默认进入数仓分层页面。单击顶部菜单栏右侧的首页，进入智能...

购买指引

增值功能推荐开通 智能数据建模，智能数据建模落地数据中台建设方法论，可进行规范化数仓建设。说明 智能数据建模为标准版、专业版、企业版这些增值版本特有的功能，仅开通基础版不支持使用智能数据建模功能。资源：推荐购买各类独享资源组...

关系图

DataWorks智能数据建模的关系图，帮助您快速构建数据仓库模型架构图，直观展示数据仓库中维度、维度表、明细表、汇总表、应用表等各模型之间的关系。一个关系图承载一个数据仓库模型，一个账号支持创建多个关系图。本文为您介绍关系图的...

全量数据管理概述

数据源相关概念目前智能推荐系统的数据源只支持MaxCompute（ODPS），后续会陆续开放OSS，RDS等其他方式。MaxCompute：大数据计算服务（MaxCompute，原名ODPS）是一种快速、完全托管的TB/PB级数据仓库解决方案，详情参见 MaxCompute 表：表...

度量单位

登录 DataWorks控制台，切换至目标地域后，单击左侧导航栏的数据建模与开发>数据建模，在下拉框中选择对应工作空间后单击进入数据建模。进入度量单位。在 智能数据建模页面的顶部菜单栏，单击数据标准，进入数据标准页面。在数据...

系统管理

策略启用后，凡是未通过智能数据建模发布，直接在数据开发（DataStudio）创建或修改的MaxCompute物理表，在执行提交、发布操作时均会触发管控限制。代码生成策略管理：用于自定义DDL语句中表Comment及字段Comment字段，与可视化建模界面里...

业务分类

登录 DataWorks控制台，单击左侧导航栏的数据建模与开发>数据建模，在下拉框中选择对应工作空间后单击进入数据建模。在数据建模页面的顶部菜单栏，单击数仓规划，进入数仓规划页面。在数仓规划页面的左侧导航栏，单击业务分类，...

导入

DataWorks智能数据建模的导入工具，为您提供了数据模型、数据标准等多种类型的对象模板，您可基于不同模板批量创建相应对象。该功能无需多次重复执行创建操作，即可快速生成多个对象，节省大量时间成本。本文为您介绍如何通过批量导入功能...

操作指南

您可以在Dataphin工作台进行数据开发、数据治理等操作。功能文档 Dataphin全托管数仓规划概述数据引入概述 数据开发概述发布中心概述运维中心概述分析平台概述标签工厂概述资产全景及目录概述数据标准概述资产质量概述资源治理...

标准代码

登录 DataWorks控制台，切换至目标地域后，单击左侧导航栏的数据建模与开发>数据建模，在下拉框中选择对应工作空间后单击进入数据建模。进入标准代码。在 智能数据建模页面的顶部菜单栏，单击数据标准，进入数据标准页面。在数据...

受众与核心能力

同时，DataWorks持续打造符合企业级数仓、数据中台构建要求的功能模块，为企业业务的数字化转型提供支持。产品受众从事数据开发、算法开发等岗位的技术人员从事销售运营、商业智能分析等岗位的业务人员从事数据安全与合规工作的管理人员...

建模空间

登录 DataWorks控制台，切换至目标地域后，单击左侧导航栏的数据建模与开发>数据建模，在下拉框中选择对应工作空间后单击进入数据建模。在 智能数据建模页面的顶部菜单栏，单击数仓规划，默认进入数仓分层页面。在数仓规划页面的...

概述

数据开发 的核心功能如下：文件夹用于存放并管理数据库中的数据开发节点。详情请参见文件夹。Hologres开发用于周期性调度作业。详情请参见 Hologres开发：周期性调度。一键MaxCompute表结构同步支持使用可视化方式批量创建外部表，加速...

什么是DataWorks

世界500强亿滋中国：通过DataWorks智能数据建模进行全链路的数据模型治理，极大提升数据中台的自服务能⼒，让企业数据决策实现下放，释放新零售的数字化力量。上市公司创梦天地：基于开源的EMR引擎，用DataWorks替换自研调度系统，企业内部...

数据建模：智能数据建模

智能数据建模是阿里云DataWorks自主研发的智能数据建模产品，沉淀了阿里巴巴十多年来数仓建模方法论的最佳实践，包含数仓规划、数据标准、维度建模及数据指标四大模块，帮助企业在搭建数据中台、数据集市建设过程中提升建模及逆向建模的...

DataWorks On Hologres使用说明

二、数据建模与开发模块描述相关文档数据建模数据建模是全链路数据治理的第一步，沉淀阿里巴巴数据中台建模方法论，从数仓规划、数据标准、维度建模、数据指标四个方面，以业务视角对业务的数据进行诠释，让企业内部实现“数同文”的...

资产安全概述

应用场景基于Dataphin实现数据安全保护的一些典型的场景：场景1：业务数据中敏感数据保护您可以使用资产安全的敏感数据识别和保护功能，脱敏明文敏感数据，保证业务数据安全。例如，姓名张三脱敏后*三。场景2：开发环境数仓建设敏感数据...

资产安全概述

应用场景基于Dataphin实现数据安全保护的一些典型的场景：场景1：业务数据中敏感数据保护您可以使用资产安全的敏感数据识别和保护功能，脱敏明文敏感数据，保证业务数据安全。例如，姓名张三脱敏后*三。场景2：开发环境数仓建设敏感数据...

DataWorks On CDP/CDH使用说明

二、数据建模与开发模块说明相关文档数据建模数据建模是全链路数据治理的第一步，沉淀阿里巴巴数据中台建模方法论，从数仓规划、数据标准、维度建模、数据指标四个方面，以业务视角对业务的数据进行诠释，让企业内部实现“数同文”的...

DataWorks On EMR使用说明

开始使用一、数据建模与开发模块说明相关文档数据建模数据建模是全链路数据治理的第一步，沉淀阿里巴巴数据中台建模方法论，从数仓规划、数据标准、维度建模、数据指标四个方面，以业务视角对业务的数据进行诠释，让企业内部实现“数...

流程管控

DataWorks提供了全链路的数据开发治理能力，为您提供了统一的数据开发治理流程，同时也支持您在DataWorks的默认流程上基于自己的业务需求在关键的流程节点进行流程管控。本文为您介绍DataWorks在数据开发过程中支持的流程管控能力。背景...

技术架构选型

MaxCompute作为整个大数据开发过程中的离线计算引擎。Dataphin则基于OneData方法论——OneModel、OneID、OneService，囊括了数据建模研发、运维中心、监控报警、数据资产等在内的一系列功能。icmsDocProps={'productMethod':'created','...

逻辑结构说明

项目项目是一种物理空间上的划分，便于用户在数据中台建设过程中对物理资源及开发人员进行隔离化管理。业务对象人们观察事物的角度，是指一种视角，是确定事物的多方位、多角度、多层次的条件和概念。业务活动业务过程即企业的业务活动...

什么是Dataphin

Dataphin是阿里巴巴集团OneData数据治理方法论内部实践的云化输出，一站式提供数据采、建、管、用全生命周期的大数据能力，以助力企业显著提升数据治理水平，构建质量可靠、消费便捷、生产安全经济的企业级数据中台。Dataphin兼容多种计算...

智能数据建模计费标准

智能数据建模使用包年包月计费模式，根据您在智能数据建模产品内创建的对象数量进行计费。您可根据实际需求，选购智能数据建模产品的不同规格。同时，智能数据建模为您提供了单独计费的行业模型模版，您可购买该模版快速构建属于您的数据...

通用参考：切换资源组

数据开发页面重要 数据开发中修改的资源组不会同步到生产环境中，您需要通过发布流程将任务发布后，才能在生产环境中生效。进入数据开发页面。登录 DataWorks控制台，切换至目标地域后，单击左侧导航栏的数据建模与开发>数据开发，在...

回收站列表

您在治理工作台中删除数据表的时间即为回收站中的回收日期。操作日期清除数据表的日期。回收状态数据表的回收状态。清除表清除后的数据表不支持再次恢复，请您谨慎操作。在回收站列表页面，单击需要删除表所在行的操作列下图标。...

回收站列表

您在治理工作台中删除数据表的时间即为回收站中的回收日期。操作日期清除数据表的日期。回收状态数据表的回收状态。清除表清除后的数据表不支持再次恢复，请您谨慎操作。在回收站列表页面，单击需要删除表所在行的操作列下图标。...

客户案例

基于飞天大数据平台产品DataWorks+MaxCompute大大提高了数据业务的开发效率，构建大润发的数据中台体系。新金融行业：某互联网金融公司湖仓一体案例客户架构如下。客户简介公司的第一代数据湖是基于Hadoop+OSS搭建的，同时引入的数据中台...

Dataphin支持的数据源

资产质量概述数据服务数据服务（OneService）是基于Dataphin建设数据中台的最后一步。数据服务作为统一的数据服务出口，实现了数据的统一市场化管理，有效地降低数据开放门槛的同时，保障了数据开放的安全。数据服务概述本文仅列举了...

建表并上传数据

数据开发中绑定MaxCompute数据源，请在数据开发控制台左侧导航栏单击数据源，根据提示进行操作。背景信息表bank_data用于存储业务数据，表result_table用于存储数据分析后产生的结果。创建表bank_data 进入数据开发页面。登录 ...

用户价值

通过标准化、精细化、规格化的智能数据生产流程，完成流水线式的数据生产作业，提升数据资源生产效率、消除数据供应品质差异。数据服务更便捷：能够赋予数据以业务价值，让各级用户能够直观的理解数据，并以此为基础向应用输出多样、便捷的...

阿里云智能数据中台开发

新品推荐