数据开发:开发者

进入数据开发 登录 DataWorks控制台,切换至目标地域后,单击左侧导航栏的 数据建模与开发>数据开发,在下拉框中选择对应工作空间后单击 进入数据开发。操作流程 步骤一:新建业务流程 数据开发基于业务流程组织与开发代码,您需要先新建...

公告

数据建模、数据萃取、资产、服务等模块整体优化升级。更多功能更新信息,请参见 功能更新记录。2022年06月10日-Dataphin更名通知 为了更好地帮助广大客户解决数据资产建设问题,显著提升数据治理水平,Dataphin将进一步加强资产治理方向的...

导入与导出

此时,集群CPU使用率、磁盘IO使用率处于较低水位,但写入响应时间较高,同时您可以在 诊断优化 数据建模诊断 页面的倾斜诊断表中发现目标表。您可以重新设计表结构后再导入数据,详情请参见 表结构设计。使用adb-import.sh导入本地数据时,...

DataWorks OpenAPI概述

数据建模 API名称 API描述 API级别 最低版本要求(本版本及以上版本支持)QueryPublicModelEngine 调用QueryPublicModelEngine,使用FML语句查询数据建模引擎的信息。1级 运维中心 API名称 API描述 API级别 最低版本要求(本版本及以上版本...

下载建模工具(DDM)

DDM是数据建模DATABLAU支持的线下客户端,您可以使用DDM客户端进行自定义数据标准、创建模型和管理模型库等操作。数据建模前,您需要先下载并安装DDM,为后续的建模操作准备好工具。本文为您介绍如何下载DDM建模工具。前提条件 开通数据...

调优集群性能

您可以通过 数据建模诊断 定位这些类型的表,进行表结构的优化。过大的非分区表。当非分区表较大时,也更容易被写入、更新或者删除,也更容易触发全表Build。大量的读写请求导致存储节点CPU持续较高,进而导致Build执行过慢。节点掉线...

建模空间

当您所需要管理多个DataWorks工作空间且需要复用一套数仓规划时,面对跨多个工作空间的复杂数据体系,可以通过设计空间共享一套数据建模工具,针对整个数据体系进行统一的数仓规划、维度建模及指标定义等工作。本文为您介绍DataWorks建模...

入门实践

本文以实现构建数据标准设计数据模型,并通过规范化的流程,下发模型至计算引擎为例,为您介绍DataWorks数据建模的流程。前提条件 如果您使用的是阿里云主账号,请下载建模工具。如果您使用的是RAM用户,请完成授权并下载建模工具。详情...

概述

前提条件 您需要开通DataWorks智能数据建模后,才可以使用该产品功能,详情请参见 智能数据建模计费标准。使用限制 DataWorks工作空间中,不同角色使用智能数据建模的限制如下:浏览模型详情:访客、空间管理员、模型设计师、项目所有者 等...

数据建模:智能数据建模

智能数据建模是阿里云DataWorks自主研发的智能数据建模产品,沉淀了阿里巴巴十多年数仓建模方法论的最佳实践,包含数仓规划、数据标准、维度建模及数据指标四大模块,帮助企业在搭建数据中台、数据集市建设过程中提升建模及逆向建模的...

字段标准

登录 DataWorks控制台,单击左侧导航栏的 数据建模与开发>数据建模,在下拉框中选择对应工作空间后单击 进入数据建模。在 智能数据建模 页面的顶部菜单栏,单击 数据标准,进入 数据标准 页面。在数据标准页面左侧导航栏,单击 字段标准,...

数仓规划概述

建模空间 当您所需要管理多个DataWorks工作空间且需要复用一套数仓规划时,面对跨多个工作空间的复杂数据体系,可以通过设计空间共享一套数据建模工具,针对整个数据体系进行统一地数仓规划、维度建模及指标定义等工作。DataWorks智能...

数据标准概述

DataWorks数据建模支持在建模前规划制定数据标准,或在建模使用过程中根据业务情况沉淀企业业务的数据标准。通过规范约束标准代码、度量单位、字段标准、命名词典,保障后续建模与应用过程中数据处理的一致性,从源头上保障数据的标准化...

功能发布记录(2022年)

2022.11.10 全部地域 所有DataWorks用户 无 2022-10 功能名称 功能描述 发布时间 发布地域 使用客户 相关文档 DataWorks智能数据建模支持E-MapReduce Hive,建模能力对齐MaxCompute DataWorks 智能数据建模>维度建模 新增如下两种功能:...

逆向建模:物理表反向建模

当您的物理引擎中已有大量物理表,且希望通过DataWorks智能数据建模产品统一管理所有模型,则可使用逆向建模功能,将已有物理表反向建模至DataWorks的维度建模中。该功能帮助您无需再次执行建模操作即可快速创建模型,节省了大量的时间成本...

数据建模诊断

单击 数据建模诊断 页签,即可在 分区字段合理性诊断 区域查看分区字段合理性诊断信息。您可以通过该表判断哪些表存在分区不合理的情况,并且根据 不合理分区 的信息判断该表的哪些分区不合理,从而针对这些表或者分区进行相应的优化。...

计费逻辑说明

软件费用明细:数据建模 数据建模包括 智能数据建模 和 DATABLAU数据建模 产品,两者均采用 包年包月 计费方式,费用详情如下表。产品类型 功能介绍 计费项 计费说明 计费标准参考 智能数据建模 智能数据建模是DataWorks自研的建模产品,...

时间周期

登录 DataWorks控制台,单击左侧导航栏的 数据建模与开发>数据建模,在下拉框中选择对应工作空间后单击 进入数据建模。在 数据建模 页面,单击顶部导航栏的 数据指标,默认进入 派生指标 页面。在 数据指标 页面的左侧导航栏,单击 时间...

导出数据建模基础信息

支持您通过导出数据建模基础信息功能,下载数据建模基础信息到本地进行查看并搭配导入功能,您可以快速实现工作组间的数据建模基础信息迁移。本文介绍如何导出数据建模基础信息。前提条件 已存在数据建模基础信息,具体操作,请参见 新建...

导出数据建模基础信息

支持您通过导出数据建模基础信息功能,下载数据建模基础信息到本地进行查看并搭配导入功能,您可以快速实现工作组间的数据建模基础信息迁移。本文介绍如何导出数据建模基础信息。前提条件 已存在数据建模基础信息,具体操作,请参见 新建...

应用场景

实时数据建模:提供了实时数据建模聚合表,以支持实时聚合能力。强大的引擎和优化器保证了数据库在实时数据建模时的高效性。实时更新:采用了delete-and-insert的实时更新策略,且在读取时无需进行主键合并,相较于采用了merge-on-read...

操作流程

通过操作流程图及说明,您可以直观且全局了解数据建模任务的操作流程。本文介绍数据建模任务的操作流程。流程图 流程说明 操作 说明 新建模型目录 通过新建模型目录,管控各目录下的模型,实现层级分离。具体操作,请参见 新建模型目录。...

权限管理与规范化数据开发

本实践将基于DataWorks标准模式空间完成从“数据建模”到“数据生产”的基本流程,帮助您快速掌握规范化的数据体系建设流程,提升在数据开发过程中的规范性、安全性、稳定性。背景信息 DataWorks采取RBAC权限模型供用户管理DataWorks所有...

操作流程

通过操作流程图及说明,您可以直观且全局了解数据建模任务的操作流程。本文介绍数据建模任务的操作流程。流程图 流程说明 操作 说明 新建模型目录 通过新建模型目录,管控各目录下的模型,实现层级分离。具体操作,请参见 新建模型目录。...

创建逻辑模型:应用表

登录 DataWorks控制台,单击左侧导航栏的 数据建模与开发>数据建模,在下拉框中选择对应工作空间后单击 进入数据建模。在 智能数据建模 页面的顶部菜单栏,单击 维度建模,进入 维度建模 页面。创建应用表。在 维度建模 页面,鼠标悬停至 ...

敏感数据概况

操作步骤 登录 DataWorks控制台,单击左侧导航栏的 数据建模与开发>数据开发,在下拉框中选择对应工作空间后单击 进入数据开发。单击左上方的 图标,选择 全部产品>数据治理>数据保护伞,单击 立即体验,进入数据保护伞。单击左侧导航栏的 ...

新建数据建模基础信息

当默认的数据建模基础信息不满足要求时,可以为逻辑表添加自定义属性。本文介绍如何新建数据建模基础信息。背景信息 可根据需要同时新建多个数据建模基础信息供新建逻辑表时使用。操作步骤 登录 数据资源平台控制台。在页面左上角,单击 ...

新建数据建模基础信息

当默认的数据建模基础信息不满足要求时,可以为逻辑表添加自定义属性。本文介绍如何新建数据建模基础信息。背景信息 可根据需要同时新建多个数据建模基础信息供新建逻辑表时使用。操作步骤 登录企业数据智能平台。在页面左上角,单击 图标...

开通DataWorks服务

DataWorks智能数据建模概述 智能数据建模计费标准 步骤四:确认订单 购买时,默认将按量付费商品加入订单中。开通DataWorks服务后,在使用DataWorks的各项服务时,不同产品服务的功能模块(例如,任务开发、定时任务调度、数据同步任务调度...

创建逻辑模型:汇总表

登录 DataWorks控制台,单击左侧导航栏的 数据建模与开发>数据建模,在下拉框中选择对应工作空间后单击 进入数据建模。在 智能数据建模 页面的顶部菜单栏,单击 维度建模,进入 维度建模 页面。创建汇总表。在 维度建模 页面,鼠标悬停至 ...

应用场景

实时数据建模:提供了实时数据建模聚合表,以支持实时聚合能力。强大的引擎和优化器保证了数据库在实时数据建模时的高效性。实时更新:采用了delete-and-insert的实时更新策略,且在读取时无需进行主键合并,相较于采用了merge-on-read...

窃电用户自动识别概述

本教程为您介绍如何通过DataWorks配合机器学习的方式,实现窃电用户的自动识别,保障用户的安全用电。传统的识别窃电或计量装置故障的方法包括定期巡检、...窃电用户自动识别教程涉及的具体开发流程如下:环境准备 准备数据 加工数据 数据建模

数据建模

进行数据建模 完成简单的探索性分析之后,即可开始选择合适的算法模型进行数据建模。通过 拆分 组件,将数据分为训练集和测试集。在左侧组件列表,将 数据预处理 下的 拆分 组件拖入画布中。通过连线,将 拆分-1 节点作为 data4ml 节点的...

数据建模新能力解读

以下为您系列讲解阿里云智能数据建模新能力解读。课程视频列表 课程简介 课程内容:数据建模的发展背景。主要产品:DataWorks 课程时长:5分钟 课程内容:当前主流的数据建模方法论。主要产品:DataWorks 课程时长:4分钟 课程内容:数据...

数据建模新能力解读

以下为您系列讲解阿里云智能数据建模新能力解读。课程视频列表 课程简介 课程内容:数据建模的发展背景。主要产品:DataWorks 课程时长:5分钟 课程内容:当前主流的数据建模方法论。主要产品:DataWorks 课程时长:4分钟 课程内容:数据...

时序引擎应用开发简介

2.数据建模 针对业务场景进行数据建模,需要确定创建数据库和时序数据表,确定时序数据表的标签、时间戳和量测值,并根据数据特征确定PRIMARY KEY用于数据分片。关于数据模型,请参见 数据模型。时序引擎提供了三种Schema约束策略,分别为...

导入数据建模基础信息

通过导入数据建模基础信息,可以为逻辑表批量快速添加新属性。本文介绍如何批量导入数据建模基础信息。操作步骤 登录 数据资源平台控制台。在页面左上角,单击 图标,选择 协同。在顶部菜单栏,单击 图标,选择目标工作组,单击 资产加工。...

导入数据建模基础信息

通过导入数据建模基础信息,可以为逻辑表批量快速添加新属性。本文介绍如何批量导入数据建模基础信息。操作步骤 登录企业数据智能平台。在页面左上角,单击 图标,选择 协同。在顶部菜单栏,单击 图标,选择目标工作组,单击 资产加工。...

安全设置与其他

批量删除DataBlau DDM数据模型 当DataWorks数据建模(DataBlau DDM)商品到期后,后续无需再使用该功能,则可在 安全设置与其他 页面的 DataBlau DDM 区域单击 删除,查看当前DataWorks工作空间中已创建的模型数量,并批量删除所有模型。...

智能数据建模计费标准

智能数据建模使用包年包月计费模式,根据您在智能数据建模产品内创建的对象数量进行计费。您可根据实际需求,选购智能数据建模产品的不同规格。同时,智能数据建模为您提供了单独计费的行业模型模版,您可购买该模版快速构建属于您的数据...
共有200条 < 1 2 3 4 ... 200 >
跳转至: GO
产品推荐
云服务器 安全管家服务 安全中心
这些文档可能帮助您
云数据库 Redis 版 云数据库 RDS 数据传输服务 数据库备份 DBS 弹性公网IP 短信服务
新人特惠 爆款特惠 最新活动 免费试用