离线数仓构建流程概述

使用Dataphin进行离线数仓建设的基本流程如下:主流程 描述 操作指导 准备工作 使用Dataphin进行离线数仓建设前您需完成相关云资源的准备。云资源准备包括阿里云账号资源准备、Dataphin开通与AccessKey配置、MaxCompute计算源的开通与配置...

离线数仓构建流程概述

使用Dataphin进行离线数仓建设的基本流程如下:主流程 描述 操作指导 准备工作 使用Dataphin进行离线数仓建设前您需完成相关云资源的准备。云资源准备包括阿里云账号资源准备、Dataphin开通与AccessKey配置、MaxCompute计算源的开通与配置...

数据开发概述

数据开发包括编码研发和规范建模。编码研发用于构建计算任务,例如创建SQL代码任务、Shell任务、Python任务、MR任务和Spark任务;规范建模用于构建逻辑化的数据模型。前提条件 若需进行实时开发,需已购买实时研发增值服务并且当前租户已...

标准代码

登录 DataWorks控制台,切换至目标地域后,单击左侧导航栏的 数据建模与开发>数据建模,在下拉框中选择对应工作空间后单击 进入数据建模。进入 标准代码。在 智能数据建模 页面的顶部菜单栏,单击 数据标准,进入 数据标准 页面。在 数据...

导入

DataWorks智能数据建模的导入工具,为您提供了数据模型、数据标准等多种类型的对象模板,您可基于不同模板批量创建相应对象。该功能无需多次重复执行创建操作,即可快速生成多个对象,节省大量时间成本。本文为您介绍如何通过批量导入功能...

创建逻辑模型:维度表

维度是维度建模的基础和灵魂。在维度建模中,将度量称为”事实“,将环境描述为”维度。维度表包含了事实表中指定属性的相关详细信息,常用的维度如日期维度、城市维度等。本文为您介绍如何创建维度表。前提条件 公共层主要完成公共数据的...

产品概述

产品描述 Dataphin是集产品、技术、方法论于一体的智能大数据平台建设引擎,为您提供数据引入、规范定义、建模研发、资产管理、数据服务等全链路智能数据建设及治理服务。功能 描述 Dataphin全托管 全托管又称公共云多租户模式,只需购买...

功能发布记录(2022年)

2022.11.25 全部地域 所有DataWorks用户 发布模型至引擎 逆向建模:物理表反向建模 基于模型生成ETL代码 DataWorks智能数据建模支持对模型进行版本管理 DataWorks 智能数据建模>维度建模 新增如下两种功能:支持对模型进行版本管理,只有...

主题域

登录 DataWorks控制台,单击左侧导航栏的 数据建模与开发>数据建模,在下拉框中选择对应工作空间后单击 进入数据建模。在 数据建模 页面的顶部菜单栏,单击 数仓规划,默认进入 数仓分层 页面。在 数仓规划 页面的左侧导航栏,单击 应用层>...

业务过程

业务过程是企业在指定的数据域中所执行的业务活动,是数据建模所需要分析的逻辑主体。例如,交易域中可以有加入购物车、下单、支付等业务过程。本文为您介绍如何创建并使用业务过程。前提条件 已根据规划准备好对应数据域,系统已默认提供...

工艺模式建模

本文为您介绍工艺模式建模组件。功能说明 工艺模式建模将根据描述变量对案例进行分类,识别不同的状态。然后针对每个状态,找到最可靠的推荐变量,保证评价变量符合预期。计算逻辑原理 工艺模式建模是基于庞大的历史优质案例,每个案例具有...

云计算资源类型

云计算资源是 企业数据智能平台 中数据建模使用的基础,通过了解数据建模支持的云计算资源类型,并在系统设置模块添加数据建模需要使用的云计算资源类型对应资源,以备在物理化逻辑表和设置对应资源的质量规则时使用。本文介绍数据建模中...

Redis连接问题排查流程

首次连接排查 网络环境 在开始连接 Redis 之前,您需要先确认客户端的网络环境,具体流程图如下:图 1.排查网络环境 具体步骤如下:确认客户端的网络环境。专有网络:需确认客户端所在的ECS实例是否与 Redis 实例为同一VPC(专有网络)。...

数据建模

数据建模支持ER模型和维度模型两种数据建模方法,帮助用户完成数据模型、逻辑表的设计和管理。用户可对数据模型的层次结构进行管理,并对逻辑表字段进行设计。字段设计需要在数据标准的约束下,通过模型设计过程中引用标准数据元定义,设置...

什么是Dataphin

数据标准 权限管理 为您提供多种资产对象和功能权限的精细化管理,支持权限主动申请与交还、权限审批、主动授权或回收权限等功能,实现了权限最小化管控,同时,方便您查看权限审批流程各环节的进展,及时跟进处理流程。权限管理 资产质量 ...

产品简介

大数据专家服务 大数据专家服务(Bigdata Expert Service)是由阿里云大数据专家基于阿里云多年大数据架构、应用、运维、AI算法建模等最佳实践经验及方法论为用户提供全方位的大数据产品技术、咨询服务及售后专家服务运维保障,帮助用户...

数据域

登录 DataWorks控制台,单击左侧导航栏的 数据建模与开发>数据建模,在下拉框中选择对应工作空间后单击 进入数据建模。在 数据建模 页面的顶部菜单栏,单击 数仓规划,默认进入 数仓分层 页面。在 数仓规划 页面的左侧导航栏,单击 公共层>...

创建逻辑模型:明细表

登录 DataWorks控制台,单击左侧导航栏的 数据建模与开发>数据建模,在下拉框中选择对应工作空间后单击 进入数据建模。在 智能数据建模 页面的顶部菜单栏,单击 维度建模,进入 维度建模 页面。创建明细表。在 维度建模 页面,鼠标悬停至 ...

映射推导

在 关联业务流程 页签,选择目标业务流程名称(支持多选),完成后单击 创建。映射推导 在映射推导页面,单击 映射推导设计器。在映射推导设计页面的 时序设计 页签,单击目标映射推导。在 组件 页签,您可以拖拽目标组件至右侧画布。例如...

发布模型至引擎

DataWorks支持如下建模方式:可视化建模:创建逻辑模型:维度表、创建逻辑模型:明细表、创建逻辑模型:汇总表、创建逻辑模型:应用表。代码方式建模 导入方式建模 发布模型 维度表、明细表、汇总表、应用表可直接发布物化至绑定的...

创建并使用PAI Designer

人工智能平台PAI的 可视化建模Designer,用于实现端到端的机器学习开发流程的可视化建模工具。DataWorks为您提供PAI Designer节点,方便您通过该算法节点载入Designer工作流,通过调度配置实现Designer工作流的周期性任务调度。前提条件 ...

代码模式建模

DataWorks数据建模的设计与实现解耦,在设计过程中,您无需考虑各个大数据引擎的实现方式,建模引擎会根据FML语言定义的Schema去驱动底层各个数据引擎的执行和操作,仅在实际物化(即把设计的逻辑表转换为底层引擎的物理表)阶段,建模引擎...

生成数据库脚本

建模 导航栏中,选择 技术建模>限界上下文。在 限界上下文 页面,单击目标限界上下文名称。在目标限界上下文导航栏中,单击 数据模型。在 数据模型 页面,单击 生成数据库脚本。在 生成数据库脚本 面板,选择脚本信息。在 数据库类型及...

Dataphin新手引导

新手引导帮助您了解Dataphin的基础操作步骤,包括数据规划、规范定义、规范建模及发布与运维等操作此外,您可以通过导入示例模型快速体验Dataphin研发流程。计算引擎说明 仅当计算设置中的计算引擎为MaxCompute时,支持导入模型。新手引导...

编辑项目领域架构图

领域架构主要用于表示当前项目业务建模设计对领域分层、层级关系以及具体业务领域的划分总览,不仅能提供一张面向管理者或架构师的业务领域整体视图,而且能和具体的业务领域产生联动,实现基本的下钻能力。本文介绍如何编辑项目领域架构图...

算法建模

本文以逻辑回归二分类算法为例,为您介绍如何使用PAI Designer训练模型。前提条件 完成数据可视化,详情请参见 数据可视化。操作步骤 登录 PAI控制台,进入工作流...后续步骤 完成算法建模后,可以对训练模型进行评估,详情请参见 模型评估。

时间周期

登录 DataWorks控制台,单击左侧导航栏的 数据建模与开发>数据建模,在下拉框中选择对应工作空间后单击 进入数据建模。在 数据建模 页面,单击顶部导航栏的 数据指标,默认进入 派生指标 页面。在 数据指标 页面的左侧导航栏,单击 时间...

什么是云原生应用组装平台BizWorks

云原生应用组装平台BizWorks是基于组装式理念和阿里巴巴中台实践构建的一体化云原生应用开发和组装平台,提供了业务建模、微服务开发、轻应用组装、能力开放等平台功能,致力于帮助企业快速设计、构建、组装和运营可复用的业务能力组件和...

日志审计

日志审计可以实现对操作行为的记录,例如,新建模型发布、新建隐私求交等操作行为。您可以在多方安全建模控制台查看近 1 天、近 7 天或近 30 天的操作记录。

新建上下文版本

新建上下文映射版本 登录BizWorks,在 选择平台 下拉列表中选中 建模平台。单击页面右上角 图标或其文本框区域,在下拉列表中单击目标项目名称后,单击 建模 页签。在 建模 导航栏中,选择 技术建模>上下文映射。在 上下文映射 页面,单击 ...

精模建筑模型质量标准及优化建议

精模建筑模型质量标准 质量标准 说明 几何规范 模型比例与真实世界近似,DataV中三维场景使用的单位是米,不同的建模软件单位不一样,比如blender的建模单位是米,maya的建模单位是厘米。单个模型中心点(几何中心或者底面中心)位于建模...

精模建筑模型质量标准及优化建议

精模建筑模型质量标准 质量标准 说明 几何规范 模型比例与真实世界近似,DataV中三维场景使用的单位是米,不同的建模软件单位不一样,比如blender的建模单位是米,maya的建模单位是厘米。单个模型中心点(几何中心或者底面中心)位于建模...

Cassandra数据建模

本文介绍Cassandra数据建模的概念、建模建议。Cassandra是一款分布式、去中心化、高可用的列存储(Wide Column Store)的No SQL数据库。分布式层面主要依靠一致性Hash算法把数据分布在整个集群中,单机主要实现了基于LSM-Tree的引擎。集群...

配置服务集成

说明 编排流程必须以开始组件作为流程的开始,以结束组件作为流程的终止。规则集:支持类似 CASE WHEN 语句的条件判断规则。脚本:支持加入 Java 代码作为变量的处理。模型:在“模型部署”中部署成功的模型,支持在此处引用。分叉:支持...

全息建筑产品介绍

一、产品简介 全息建筑是为智慧楼宇、园区、城市、地产展示等场景提供三维建筑建模的算法产品。产品基于AI LAB自研算法,由二维建筑设计图纸(CAD)进行三维构建,可快速生成建筑信息模型(Building Information Modeling,BIM),还原建筑...

服务监控概述

完成模型开发和部署后,您可以在多方安全建模控制台,配置模型服务的监控采集规则。节点中内置了采集统计值模块,可以在不泄露原始数据的前提下,向控制台上报模型分及入模特征的聚合统计值。服务监控流程如下:各流程的详细配置请参见以下...

产品版本

产品版本简介 不同版本支持的产品模块和功能特性,具体请参见下表:产品模块 功能特性 体验版 专业版 企业版 业务建模平台 业务建模 不支持 ​不支持 支持 技术建模 支持 支持 支持 模型导入导出 支持 支持 支持 微服务开发平台 应用模型...

创建和管理用户故事

用户故事是一组从角色的视角定义的业务活动结构化描述,用于细化描述流程中业务活动的触发事件、执行步骤、验收标准等业务规则。本文介绍如何新建和管理用户故事,以及如何从业务流程导入用户故事。新建用户故事 登录BizWorks,在 选择平台...

导入导出限界上下文模型

完整的模型导入流程如下图所示:导入限界上下文模型 登录BizWorks,在 选择平台 下拉列表中选中 建模平台。单击页面右上角 图标或其文本框区域,在下拉列表中单击目标项目名称后,单击 建模 页签。在 建模 导航栏中,选择 模型导入导出>...

配置数据模型通用配置

建模 导航栏中,选择 技术建模>限界上下文。在 限界上下文 页面,单击目标限界上下文名称。在目标限界上下文导航栏中,单击 数据模型。在 数据模型 页面,选择 更多>模型设置。在 模型设置 面板,单击 添加字段 并配置信息,完成后单击 ...
共有200条 < 1 2 3 4 ... 200 >
跳转至: GO
产品推荐
云服务器 安全管家服务 安全中心
这些文档可能帮助您
专有网络VPC 风险识别 弹性公网IP 负载均衡 短信服务 人工智能平台 PAI
新人特惠 爆款特惠 最新活动 免费试用