模型训练
Designer提供了丰富的建模组件，您可以使用工作流，可视化的灵活构建模型、调试模型并周期性地调度模型，以完成模型训练。本文为您介绍使用Designer训练模型的具体操作步骤。前提条件 已创建工作流。您可以根据业务需要创建空白工作流或...
工艺模式建模
本文为您介绍工艺模式建模组件。功能说明 工艺模式建模将根据描述变量对案例进行分类，识别不同的状态。然后针对每个状态，找到最可靠的推荐变量，保证评价变量符合预期。计算逻辑原理 工艺模式建模是基于庞大的历史优质案例，每个案例具有...
使用流程
本文介绍了联邦模型开发总体流程和基于联邦建模控制台开发联邦模型的流程。联邦建模是蚂蚁隐私计算服务平台中的一个组件，因此在使用联邦建模控制台联合建模之前，需要先部署联邦节点，以及在 管理控制台 中注册、配置节点和项目，如下图所...
联邦建模概述
联邦建模控制台是进行联邦学习的模型开发平台。服务对象为联邦模型的开发人员，如联邦算法工程师。联邦建模控制台封装了联邦学习的基础能力，并且集成了常用机器学习库的功能，如 TensorFlow，具有开箱即用的能力。因此您只需专注于模型...
概述
准备建模工具：数据建模DATABLAU支持线下客户端和线上Web（即DataWorks的控制台页面）两类工具，建模前您需要参见 下载建模工具（DDM）章节下载并安装好建模的线下客户端，为后续的建模操作做好工具准备。（可选）熟悉操作流程与界面：入门...
导入
DataWorks智能数据建模的导入工具，为您提供了数据模型、数据标准等多种类型的对象模板，您可基于不同模板批量创建相应对象。该功能无需多次重复执行创建操作，即可快速生成多个对象，节省大量时间成本。本文为您介绍如何通过批量导入功能...
数仓规划概述
使用DataWorks进行数据建模时，数仓架构师或者模型小组成员可以在数仓规划页面对数据分层、业务分类、数据域、业务过程、数据集市、主题域进行设计。完成设计后，模型设计师在建模过程中可以依赖数仓规划中的数据分层、业务分类、数据域、...
派生指标
本文为您介绍创建派生指标及与派生指标相关的其他操作：批量创建派生指标 创建单个派生指标 版本管理及关联表 导出派生指标 批量删除及提交 进入派生指标页面 登录 DataWorks控制台，单击左侧导航栏的 数据建模与开发>数据建模，在下拉框中...
入门实践
本文以实现构建数据标准来设计数据模型，并通过规范化的流程，下发模型至计算引擎为例，为您介绍DataWorks数据建模的流程。前提条件 如果您使用的是阿里云主账号，请下载建模工具。如果您使用的是RAM用户，请完成授权并下载建模工具。详情...
全息建筑产品介绍
一、产品简介 全息建筑是为智慧楼宇、园区、城市、地产展示等场景提供三维建筑建模的算法产品。产品基于AI LAB自研算法，由二维建筑设计图纸（CAD）进行三维构建，可快速生成建筑信息模型（Building Information Modeling,BIM），还原建筑...
线性回归
一、组件说明 线性回归模型通过找到一条最佳拟合直线（或超平面），将输入特征映射到...例如，本项目中有成功建模的任务名为“xgb_criteo_10w”，其中有建模组件名字为“线性回归”，则模型名字为“xgb_criteo_10w_线性回归”，如下图所示：
逻辑回归二分类
一、组件说明 逻辑回归通过将线性回归模型的输出通过Sigmoid函数进行映射，将连续的...例如，本项目中有成功建模的任务名为“xgb_criteo_10w”，其中有建模组件名字为“逻辑回归”，则模型名字为“xgb_criteo_10w_逻辑回归”，如下图所示：
Dataphin规范建模的事实逻辑表关联维度的下游派生指标...
问题描述 Dataphin规范建模的事实逻辑表关联维度的下游派生指标已下线，还是无法更换关联维度，报错“存在依赖，不可操作派生指标：xxx”。解决方案 如果需要更换事实逻辑表的关联维度，需要将所有相关的派生指标和业务限定都下线并删除。...
TeX 数学公式
云效知识库支持在文档内键入 TeX 数学公式。添加公式 有 3 种方式可以添加公式：键入“+”，在下拉框找到“公式”选项，或者键入“+公式”或“+gs”，可以直接定位到“公式”选项。选择公式后，在公式编辑区域键入代码，即可以实时看到相应...
虚拟关联
虚拟关联可以保护每个参与方的数据隐私，且在联邦学习场景下将数据“视为本地数据”，提高建模效率。组件截图 二、参数说明 参数名称 参数说明 关联方式 建模的数据输入分别位于己方和对方的数据库中，进行隐私求交以得到交集信息，得到...
MLP二分类/MLP多分类/MLP回归
一、组件说明 MLP二分类是指使用多层感知机（Multi-Layer Perceptron）进行二元分类...例如，本项目中有成功建模的任务名为“xgb_criteo_10w”，其中有建模组件名字为“MLP二分类”，则模型名字为“xgb_criteo_10w_MLP二分类”，如下图所示：
权限管理与规范化数据开发
本实践将基于DataWorks标准模式空间完成从“数据建模”到“数据生产”的基本流程，帮助您快速掌握规范化的数据体系建设流程，提升在数据开发过程中的规范性、安全性、稳定性。背景信息 DataWorks采取RBAC权限模型供用户管理DataWorks所有...
数据导入性能优化
然而数据导入性能依然受各种各样的因素影响，如表的建模不合理导致长尾、导入配置低无法有效利用资源等。本文介绍不同场景下的数据导入调优方法。通用外表导入数据调优 检查分布键 分布键决定着数据导入的一级分区，每个表在导入时以一级...
数据导入性能优化
然而数据导入性能依然受各种各样的因素影响，如表的建模不合理导致长尾、导入配置低无法有效利用资源等。本文介绍不同场景下的数据导入调优方法。通用外表导入数据调优 检查分布键 分布键决定着数据导入的一级分区，每个表在导入时以一级...
精模建筑模型质量标准及优化建议
精模建筑模型质量标准 质量标准 说明 几何规范 模型比例与真实世界近似，DataV中三维场景使用的单位是米，不同的建模软件单位不一样，比如blender的建模单位是米，maya的建模单位是厘米。单个模型中心点（几何中心或者底面中心）位于建模...
精模建筑模型质量标准及优化建议
精模建筑模型质量标准 质量标准 说明 几何规范 模型比例与真实世界近似，DataV中三维场景使用的单位是米，不同的建模软件单位不一样，比如blender的建模单位是米，maya的建模单位是厘米。单个模型中心点（几何中心或者底面中心）位于建模...
代码模式建模
DataWorks数据建模的设计与实现解耦，在设计过程中，您无需考虑各个大数据引擎的实现方式，建模引擎会根据FML语言定义的Schema去驱动底层各个数据引擎的执行和操作，仅在实际物化（即把设计的逻辑表转换为底层引擎的物理表）阶段，建模引擎...
个性化触达时间配置说明
目录要求 与常规智能圈选输入数据的要求相同，具体目录结构如下所示：其中：行为维表（behavior）数据为个性化触达时间建模的主要数据来源，运营记录维表（operation）数据为个性化触达时间建模的辅助数据来源。行为维表和 运营记录维表 的...
什么是云原生应用组装平台BizWorks
云原生应用组装平台BizWorks是基于组装式理念和阿里巴巴中台实践构建的一体化云原生应用开发和组装平台，提供了业务建模、微服务开发、轻应用组装、能力开放等平台功能，致力于帮助企业快速设计、构建、组装和运营可复用的业务能力组件和...
基本概念
数据建模模块 负责OLAP多维分析模型构建，支持度量（例如业务量度量）、维度（例如日期型维度）、星型拓扑数据模型等常规语义的定义，可实现对数据源的模型进行转换。通过计算字段等功能，支持复用数据源的SQL语法，对多维分析模型的维度和...
导入导出限界上下文模型
完整的模型导入流程如下图所示：导入限界上下文模型 登录BizWorks，在 选择平台 下拉列表中选中 建模平台。单击页面右上角 图标或其文本框区域，在下拉列表中单击目标项目名称后，单击 建模 页签。在 建模 导航栏中，选择 模型导入导出>...
Dataphin是否可以基于一张相同的表创建多个维度
问题描述 Dataphin使用相同表创建多个维度时有报错提示，是否可以基于一张相同的表创建多个...只是从规范建模的角度上不推荐，但是支持基于同一张表创建多个维度的，正常创建、提交、发布即可。适用于 Dataphin 基于公共云v2.9.4-3版本验证
横向聚类
一、组件说明 横向聚类组件是横向场景下的一种无监督机器学习算法，...例如，本项目中有成功建模的任务名为“1_横向虚拟关联_train算法”，其中有建模组件名字为“横向聚类”，则模型名字为“1_横向虚拟关联_train算法_聚类”，如下图所示：
开始模型训练
登录多方安全建模控制台。在左侧导航栏，单击 模型开发>模型训练。单击 新建模型工程，完成以下配置。选择开发模式，仅支持 DAG 可视化。选择模板。可以创建空白模板，也可以选择已有模板，并基于模板修改建模流程。配置基础信息。参数 ...
Gateway API
组件介绍 Gateway API是Kubernetes中用于对服务网络流量进行建模的一系列资源。它的目标是建立一套表现力强、易扩展、面向角色的服务网络模型。优势如下。面向角色：资源抽象与使用Kubernetes的团队组织架构保持一致。可移植：与Ingress和...
新建逻辑表命名规则
说明 所有规则项，在数据建模的创建逻辑表中生效的均为该规则项的code值或者标识值。例如：这里选择一级目录名称为ODS，则在创建逻辑表时，逻辑表名称中显示为该一级目录的标识值（ods）。开启校验 默认选中 开启校验，设计的命名规则才能...
新建逻辑表命名规则
说明 所有规则项，在数据建模的创建逻辑表中生效的均为该规则项的code值或者标识值。例如：这里选择一级目录名称为ODS，则在创建逻辑表时，逻辑表名称中显示为该一级目录的标识值（ods）。开启校验 默认选中 开启校验，设计的命名规则才能...
数学函数
本文介绍对那些没有通用数学约定的类型进行数值改变操作（例如，日期/时间类型）的实际动作。下面的表显示了允许使用的数学函数。通过使用不同的参数类型，以多种方式使用这些函数。除非特别说明，任何形式的函数都返回和它的参数类型相同...
AliyunTDSRModellingAccess
AliyunTDSRModellingAccess 是阿里云管理的产品系统策略，您可以将 AliyunTDSRModellingAccess 授权给 RAM 身份（RAM 用户、RAM 用户组和 RAM 角色），本策略定义了 管理三维空间重建临云镜产品（TDSR）建模的权限。策略详情 类型：系统...
示例：模型设计
项目的建模过程主要由技术建模构成。本文介绍示例项目中技术建模的相关内容。背景信息 技术建模包括限界上下文划分、领域模型、数据模型、服务模型等内容，主要目的是能够基于DDD的建模方法论将业务模型转化成技术模型，从而能高效指导中台...
查看并管理明细汇总表任务
明细汇总表任务是Dataphin针对规范建模创建的逻辑表（维度逻辑表、事实逻辑表、汇总逻辑表）任务提供的字段视角运维功能，本文为您介绍如何查看并管理明细汇总表任务。背景信息 明细汇总表任务包括维度逻辑表任务、事实逻辑表任务和汇总...
基于模型生成ETL代码
维度表、明细表、汇总表等模型表发布后，DataWorks智能数据建模的模型开发功能支持快速生成代码框架，帮助您提高后续数据开发效率。本文为您介绍如何通过模型开发功能生成代码框架。前提条件 模型表已发布，操作详情请参见 发布模型至引擎...
查看并管理明细汇总表任务
明细汇总表任务是Dataphin针对规范建模创建的逻辑表（维度逻辑表、事实逻辑表、汇总逻辑表）任务提供的字段视角运维功能，本文为您介绍如何查看并管理明细汇总表任务。背景信息 明细汇总表任务包括维度逻辑表任务、事实逻辑表任务和汇总...
创建标签项目
前提条件 若您需进行规范建模研发，在创建标签项目前您需创建对应的数据板块。若不创建，则只可进行通用研发。数据板块创建详情请参见：创建数据板块。创建标签项目前，您需完成对应的计算源创建。详情请参见：计算源概述。使用限制 ...
新建PAI_DESIGNER任务
在创建可视化建模的工作空间时，资源需选择为基于MaxCompute的计算资源方式。在配置PAI空间时，使用MaxCompute离线计算引擎的AK需要将调度的工作流发布为工作空间可见，Dataphin获取的是AK下公开及私有的工作流。PAI任务使用的MaxCompute...
- 产品推荐
- 这些文档可能帮助您