测试应用扩展程序
更多触发示例请参见 应用示例：数据开发过程触发事件检查。提交扩展程序审核 完成扩展程序测试后，在上线扩展程序前，您需要将扩展程序进行提交，完成提交后等待DataWorks平台审核后即可上线扩展程序。进入扩展程序页面。登录 DataWorks...
全景视角
数据生产视角：在数据开发场景下，建议您使用数据生产视角，关注查看数据开发过程中表、开发任务、数据服务、数据质量等方面的情况。详情请参见：数据生产视角。说明 您当前登录的账号需要拥有 AliyunDataWorksFullAccess 权限，才能使用 ...
环境准备
说明 DataWorks的工作空间分为 简单模式 和 标准模式：简单模式：指一个DataWorks工作空间对应一个引擎项目，无法设置开发和生产环境，只能进行简单的数据开发，无法对数据开发流程以及表权限进行强控制。标准模式：指一个DataWorks工作...
场景：工作空间模式升级（简单模式升级标准模式）
操作须知 升级工作空间模式前，您需先了解以下内容：了解简单模式与标准模式工作空间的区别，包括不同工作空间模式的物理形态、开发流程等差异，详情请参见 必读：简单模式和标准模式的区别。了解创建并绑定数据源的相关内容，详情请参见 ...
2.自定义组件说明
在组件开发过程中可以引用相关定义辅助代码开发。后续如果升级 API，只需要初始化一个新的组件项目，用最新的 src/api 目录替换旧的 src/api 目录即可。编译产物 查看编译产物，可以看出这是组件的 umd 产物。平台加载组件，就是加载组件的...
个人设置
警告校验 用于设置在代码开发过程中是否提供研发规范校验，将给出提示。代码提示 用于在输入代码时，提供如下智能提示：连续智能提示：智能感知输入目的，连续给出下一步输入提示建议。关键字：提示代码支持输入的关键字。语法模板：代码...
模型管理
说明 编辑修改表信息后，需发布物化至引擎，才能在后续开发过程中使用最新修改后的表。刷新模型信息：单击 刷新 可对当前变内容进行刷新，以获取最新的表信息。配置模型关联关系：单击 关联关系 即可创建或修改当前模型的关联关系。提交...
设计阶段
将上述内容产出为 ETL文档 留存，ETL将作为后续开发流程的第一参考依据。调度设计 依赖设计 将ETL抽象为多个相互依赖的代码节点形成上下游依赖关系，要求如下：一个节点仅产出一张表，一张表仅由一个节点产出。下游节点的输入数据来自于...
创建并管理工作空间
添加成员、角色及查看权限列表 在实际开发过程中，您需将各个RAM用户添加至工作空间，并授予空间管理员、开发、运维、访客等多种空间预设角色，以实现多角色协同工作。不同角色对DataWorks各功能模块的相关操作拥有的权限存在差异。若空间...
本地开发测试
下文介绍组件开发过程和测试效果。前提条件 已完成环境安装和项目文件初始化。详细内容请参见 准备环境。步骤一：开发属性文件specs 组件能力描述内容，主要集中在项目文件的 src/specs/specs.js 文件中，用于开发组件的属性、服务和事件...
UpdateIDEEventResult
用于在数据开发过程中触发扩展点时，通过调用UpdateIDEEventResult接口，将扩展程序对扩展点事件的检查结果返回给DataWorks的数据开发系统。调试 您可以在OpenAPI Explorer中直接运行该接口，免去您计算签名的困扰。运行成功后，OpenAPI ...
开发可视化应用监控树莓派状态
如果您想进一步体验IoT Studio的Web可视化和业务逻辑功能，可继续执行后续步骤，体验 监控机房温湿度 案例的开发过程。后续步骤 添加温湿度传感器，完成检测设备数据的目标，实现对机房温度和湿度环境参数的数据展示。为温湿度传感器定义物...
开发部署扩展程序：函数计算方式
在DataWorks扩展程序中，您可以自定义逻辑以监管用户的操作行为，例如拦截和阻断不当行为，通过扩展程序对特定事件进行消息通知与流程管控。本文为您介绍如何通过函数计算方式开发部署扩展程序。权限说明 开放平台管理员 和 租户管理员 ...
DataWorks On CDP/CDH使用说明
本文为您介绍在DataWorks上使用CDP/CDH的基本开发流程，以及相关 费用说明、环境准备、权限控制 等内容。背景信息 CDH是Cloudera的开源平台发行版，提供开箱即用的集群管理、集群监控、集群诊断等功能，并支持使用多种组件，助力您执行...
功能发布记录（2024年）
2024.2.22 所有地域 所有DataWorks用户 账单数据订阅及查询分析 新增在DataWorks使用 CDP/CDH的相关介绍 为您介绍在DataWorks上使用CDP/CDH的基本开发流程，以及相关费用说明、环境准备、权限控制等内容。2024.2.21 所有地域 所有DataWorks...
数据服务概述
API开发流程 创建数据源并配置网络连通性 使用数据服务创建API前，需先将您的数据库或数据仓库添加为DataWorks数据源，以此作为数据服务API的数据来源。开发数据服务API时，数据服务将访问该数据源获取数据表的Schema信息，帮助您进一步...
DataWorks On MaxCompute使用说明
同时，提供了任务开发与发布的流程管控，助力您规范开发操作，保障开发过程的安全性。一、数据集成 DataWorks的数据集成模块为您提供读取和写入数据至MaxCompute的能力，您可将其他数据源的数据同步至MaxCompute数据源，或将MaxCompute数据...
DataWorks On Hologres使用说明
同时，提供了任务开发与发布的流程管控，助力您规范开发操作，保障开发过程的安全性。一、数据集成 DataWorks的数据集成模块为您提供读取和写入数据至Hologres的能力，您可将其他数据源的数据同步至Hologres数据源，或将Hologres数据源的...
文档修订记录
为您介绍在DataWorks上使用CDP/CDH的基本开发流程，以及相关费用说明、环境准备、权限控制等内容。DataWorks On CDP/CDH使用说明 2024.2.19 新增功能 数据开发 新增CDH集群节点。您可在DataWorks上进行CDH相关的Hive、Spark、MR、Presto、...
MaxCompute数据访问权限控制
背景信息 DataWorks通过空间预设角色与空间自定义角色与开发环境引擎Role映射，来让被授予空间角色的RAM用户拥有该角色映射的开发引擎Role权限，但默认无生产权限。您可通过DataWorks安全中心实现MaxCompute数据权限管控。应用场景 场景 同...
编排逻辑流
在应用程序开发过程中，系统可以处理和恢复潜在错误和异常，以帮助您处理错误和异常，提高应用程序的稳定性、可靠性和可维护性。逻辑流搭建方式 魔笔支持以下两种方式搭建逻辑流。在页面中，通过数据容器绑定逻辑流，快速搭建逻辑流。通过...
DataWorks On EMR使用说明
本文为您介绍在DataWorks上使用EMR的基本开发流程，以及相关 费用说明、环境准备、权限控制 等内容。背景信息 开源大数据开发平台E-MapReduce（简称EMR），是运行在阿里云平台上的一种大数据处理的系统解决方案。EMR基于开源的Apache ...
创建Hologres数据源
后续操作 为保障您的开发过程更加顺畅，建议先阅读 DataWorks On Hologres使用说明，了解在DataWorks使用Hologres的开发流程、相关费用、环境准备、权限控制等内容。数据源创建完成后，您可根据需要执行如下操作：计算任务开发与调度：...
创建MaxCompute数据源
后续操作 为保障您的开发过程更加顺畅，建议先阅读 DataWorks On MaxCompute使用说明，了解在DataWorks使用MaxCompute的开发流程、相关费用、环境准备、权限控制等内容。数据源创建完成后，您可根据需要执行如下操作：计算任务开发与调度：...
创建EMR MR节点
本文将以创建EMR MR节点实现从OSS中读取文本，并统计文本中的单词数为例，为您展示EMR MR节点的作业开发流程。背景信息 本文示例中，涉及到的文件名称、Bucket名称及路径等信息，您需要替换为实际使用的相关信息。本节点支持使用OSS REF...
代码评审
发起代码评审流程 开发人员 开发人员提交节点时将触发代码评审，选择评审人员后将生成评审单。说明 标准模式工作空间下，开发人员可通过 任务发布 界面批量发起代码评审，详情请参见 发布任务。查看与审批代码评审单 节点提交人 代码评审人...
功能发布记录 2022年之前
您可以购买该功能模块，将数据模型设计管控、引标落标等能力融入DataWorks规范化开发流程，助力您实现数据资产价值化输出，在数据全生命周期上夯实数据基础，为数据价值化提供有力支撑。2021.02.20 全部地域。DATABLAU数据建模计费标准 ...
采集数据
在 数据开发 页面，双击相应的业务流程名，进入业务流程开发面板。双击虚拟节点 WorkShop_Start。进入该节点的编辑页面，单击右侧的 调度配置。配置WorkShop_Start调度属性。通过以下配置实现调度场景下，每日00:15，由工作空间根节点触发...
DataWorks OpenAPI概述
1级 UpdateIDEEventResult 用于在数据开发过程中触发扩展点时，通过调用UpdateIDEEventResult接口，将扩展程序对扩展点事件的检查结果返回给DataWorks的数据开发系统。2级 GetIDEEventDetail 调用GetIDEEventDetail，根据DataWorks开放消息...
加工数据
进入业务流程开发面板，并向面板中拖入两个ODPS SQL节点，依次命名为 数据清洗 和 数据汇聚，并配置如下图所示的依赖关系。配置ODPS SQL节点 配置数据清洗节点。双击数据清洗节点，进入节点配置页面。编写处理逻辑。SQL逻辑如下所示。...
准备数据
进入业务流程开发面板，并向面板中拖入一个虚拟节点（start）和三个离线同步节点（电量下降趋势数据同步、窃电标志数据同步和指标数据同步）分别填写相应的配置后，单击 提交。拖拽连线将start节点设置为三个离线同步节点的上游节点。配置...
采集数据
进入业务流程开发面板，鼠标单击 虚拟节点 并拖拽至右侧的编辑页面。在 新建节点 对话框中，输入 节点名称 为 workshop_start_emr，单击 确认。以同样的方式新建两个 离线同步 节点，节点名称 分别为 di_ods_raw_log_d_emr 和 di_ods_user_...
创建并管理业务流程
数据服务基于业务流程实现以业务为单元的API开发，并基于业务流程对API、函数和服务编排进行组织管理。因此在生成API前，您需要创建业务流程。本文为您介绍如何创建及管理业务流程。前提条件 在创建业务流程之前，您需要登录 API网关控制台...
开发指南概述
整体流程 使用视频点播实现音视频上传、存储、处理和播放的整体流程如下：说明 以上是使用了转码、播放凭证播放等方式的标准流程，如没有开启转码，或开启了媒体审核等，流程会有所不同。用户获取上传授权。VOD下发上传地址和凭证及VideoId...
创建手动任务
新建手动业务流程 DataWorks以业务流程为中心组织数据开发，通过各类型开发节点的容器看板，将相关工具、优化及管理操作围绕看板对象进行组织，使开发管理更加方便智能。您可根据业务需求，将同类型业务统一放置在一个业务流程。具体步骤...
使用流程参数
流程参数配置入口 进入 数据开发 页面。登录 DataWorks控制台。在左侧导航栏，单击 工作空间列表。选择工作空间所在地域后，单击相应工作空间后的 快速进入>数据开发。进入流程参数配置界面。双击目标业务流程，在业务流程编辑页面右侧导航...
CreateBusiness
调用CreateBusiness，创建数据开发（DataStudio）的业务流程。调试 您可以在OpenAPI Explorer中直接运行该接口，免去您计算签名的困扰。运行成功后，OpenAPI Explorer可以自动生成SDK代码示例。请求参数 名称 类型 是否必选 示例值 描述 ...
Hive开发手册
本文介绍如何在E-MapReduce集群中开发Hive作业流程。在Hive中使用OSS 在Hive中读写OSS时，先创建一个external的表。CREATE EXTERNAL TABLE eusers(userid INT)LOCATION 'oss:/emr/users';使用示例 Hive作业流程示例如下：示例1 编写如下...
入门实践
基于DataWorks的数据建模流程如下：空间管理员角色创建数据标准 模型设计师角色创建数据模型 模型设计师角色修改数据模型 模型设计师角色保存模型至模型库 开发角色提交模型至开发环境计算引擎 运维、部署或空间管理员角色发布模型至生产...
创建业务流程
创建业务流程 登录 DataWorks控制台，单击左侧导航栏的 数据建模与开发>数据开发，在下拉框中选择对应工作空间后单击 进入数据开发。在 数据开发 页面，鼠标悬停至 图标，单击 新建业务流程。在 新建业务流程 对话框中，输入 业务名称 和 ...
- 产品推荐
- 这些文档可能帮助您