创建并使用PAI Designer
人工智能平台PAI的 可视化建模Designer，用于实现端到端的机器学习开发流程的可视化建模工具。DataWorks为您提供PAI Designer节点，方便您通过该算法节点载入Designer工作流，通过调度配置实现Designer工作流的周期性任务调度。前提条件 ...
概述
物模型接入模式 物模型可以屏蔽底层设备差异，让软件开发者基于平台提供的标准API进行开发，让硬件开发者基于平台提供的标准协议开发，从而达到软硬开发解耦的目的。物模型详细介绍请参见 物模型。在物模型模式下，设备与云端的交互协议、...
开发部署扩展程序：自建服务方式
扩展程序参数配置 DataWorks支持在扩展程序开发过程中使用参数来提高扩展程序开发和应用效率，在扩展程序代码开发时，将需要应用的参数添加至此处即可。您可直接使用DataWorks提供的典型应用场景的内置参数，也可自定义参数。支持添加多个...
扩展程序概述
DataWorks通过OpenEvent能力为您提供消息推送订阅能力，同时您可以将服务程序注册为DataWorks的扩展程序，通过扩展程序来卡点并响应...更多扩展点的触发应用示例可参见 应用示例：数据开发过程触发事件检查、应用示例：运维中心触发事件检查。
开发计划
概述 提供开发计划管理功能模块，对埋点开发流程进行工具化管理，实现埋点任务的线上分发与线上流转。从需求阶段、开发阶段、测试阶段到发布阶段每个环节需要对应不同角色进行管理，涉及产品、研发、测试三种角色，建立开发计划、埋点需求...
全景视角
数据生产视角：在数据开发场景下，建议您使用数据生产视角，关注查看数据开发过程中表、开发任务、数据服务、数据质量等方面的情况。详情请参见：数据生产视角。说明 您当前登录的账号需要拥有 AliyunDataWorksFullAccess 权限，才能使用 ...
创建业务流程
DataWorks的 业务流程 开发结构满足根据业务视角来组织数据开发任务的需求，也提供了 周期业务流程 和 手动业务流程 两种，以满足需要周期性调度和无需周期性调度手动触发运行的场景。本文为您介绍如何创建、设计、提交和查看业务流程，...
测试应用扩展程序
更多触发示例请参见 应用示例：数据开发过程触发事件检查。提交扩展程序审核 完成扩展程序测试后，在上线扩展程序前，您需要将扩展程序进行提交，完成提交后等待DataWorks平台审核后即可上线扩展程序。进入扩展程序页面。登录 DataWorks...
任务调度属性配置概述
详情请参见 通用开发流程。已开启工作空间调度开关。仅当DataWorks工作空间开启 启用调度周期 开关后，工作空间中的任务才可以根据其配置自动调度运行。您需进入工作空间的 调度设置 页面，开启相应开关，详情请参见 调度设置。注意事项 ...
创建和使用EMR资源
DataWorks支持可视化创建EMR（E-MapReduce）JAR、EMR（E-MapReduce）FILE资源，用于上传提交自定义函数或开源MR示例源码作为资源，便于EMR 计算节点的数据开发过程中引用。本文为您介绍如何创建资源，并上传提交资源，为资源的使用做好前期...
环境准备
说明 DataWorks的工作空间分为 简单模式 和 标准模式：简单模式：指一个DataWorks工作空间对应一个引擎项目，无法设置开发和生产环境，只能进行简单的数据开发，无法对数据开发流程以及表权限进行强控制。标准模式：指一个DataWorks工作...
2.自定义组件说明
在组件开发过程中可以引用相关定义辅助代码开发。后续如果升级 API，只需要初始化一个新的组件项目，用最新的 src/api 目录替换旧的 src/api 目录即可。编译产物 查看编译产物，可以看出这是组件的 umd 产物。平台加载组件，就是加载组件的...
数据开发：开发者
操作流程 步骤一：新建业务流程 数据开发基于业务流程组织与开发代码，您需要先新建业务流程，才可进行后续的开发工作。步骤二：新建表 DataWorks支持使用可视化方式创建表，并以目录结构方式在界面展示。数据开发前，您需先在引擎创建用于...
场景：工作空间模式升级（简单模式升级标准模式）
操作须知 升级工作空间模式前，您需先了解以下内容：了解简单模式与标准模式工作空间的区别，包括不同工作空间模式的物理形态、开发流程等差异，详情请参见 必读：简单模式和标准模式的区别。了解创建并绑定数据源的相关内容，详情请参见 ...
设计阶段
将上述内容产出为 ETL文档 留存，ETL将作为后续开发流程的第一参考依据。调度设计 依赖设计 将ETL抽象为多个相互依赖的代码节点形成上下游依赖关系，要求如下：一个节点仅产出一张表，一张表仅由一个节点产出。下游节点的输入数据来自于...
模型管理
说明 编辑修改表信息后，需发布物化至引擎，才能在后续开发过程中使用最新修改后的表。刷新模型信息：单击 刷新 可对当前变内容进行刷新，以获取最新的表信息。配置模型关联关系：单击 关联关系 即可创建或修改当前模型的关联关系。提交...
个人设置
您可使用个人设置功能，自定义目标工作空间中数据开发（DataStudio）界面的布局和风格。例如，更改DataStudio左侧导航栏显示的功能模块、切换开发界面的背景颜色，以及设置编辑器可进行代码错误检查、自动换行、自动保存等。进入个人设置 ...
创建并管理工作空间
添加成员、角色及查看权限列表 在实际开发过程中，您需将各个RAM用户添加至工作空间，并授予空间管理员、开发、运维、访客等多种空间预设角色，以实现多角色协同工作。不同角色对DataWorks各功能模块的相关操作拥有的权限存在差异。若空间...
UpdateIDEEventResult
用于在数据开发过程中触发扩展点时，通过调用UpdateIDEEventResult接口，将扩展程序对扩展点事件的检查结果返回给DataWorks的数据开发系统。调试 您可以在OpenAPI Explorer中直接运行该接口，免去您计算签名的困扰。运行成功后，OpenAPI ...
本地开发测试
下文介绍组件开发过程和测试效果。前提条件 已完成环境安装和项目文件初始化。详细内容请参见 准备环境。步骤一：开发属性文件specs 组件能力描述内容，主要集中在项目文件的 src/specs/specs.js 文件中，用于开发组件的属性、服务和事件...
接入第三方 SDK 目录
为保障移动开发平台 mPaaS 的稳定运行或实现相关功能，我们可能会接入由第三方提供的软件开发包 SDK。接入的部分第三方 SDK 可能涉及收集用户信息，用于向用户提供服务。我们会评估该第三方收集信息的合法性、正当性、必要性，要求第三方对...
开发可视化应用监控树莓派状态
如果您想进一步体验IoT Studio的Web可视化和业务逻辑功能，可继续执行后续步骤，体验 监控机房温湿度 案例的开发过程。后续步骤 添加温湿度传感器，完成检测设备数据的目标，实现对机房温度和湿度环境参数的数据展示。为温湿度传感器定义物...
功能发布记录（2024年）
2024.2.22 所有地域 所有DataWorks用户 账单数据订阅及查询分析 新增在DataWorks使用 CDP/CDH的相关介绍 为您介绍在DataWorks上使用CDP/CDH的基本开发流程，以及相关费用说明、环境准备、权限控制等内容。2024.2.21 所有地域 所有DataWorks...
开发部署扩展程序：函数计算方式
在DataWorks扩展程序中，您可以自定义逻辑以监管用户的操作行为，例如拦截和阻断不当行为，通过扩展程序对特定事件进行消息通知与流程管控。本文为您介绍如何通过函数计算方式开发部署扩展程序。权限说明 开放平台管理员 和 租户管理员 ...
文档修订记录
为您介绍在DataWorks上使用CDP/CDH的基本开发流程，以及相关费用说明、环境准备、权限控制等内容。DataWorks On CDP/CDH使用说明 2024.2.19 新增功能 数据开发 新增CDH集群节点。您可在DataWorks上进行CDH相关的Hive、Spark、MR、Presto、...
DataWorks On CDP/CDH使用说明
本文为您介绍在DataWorks上使用CDP/CDH的基本开发流程，以及相关 费用说明、环境准备、权限控制 等内容。背景信息 CDH是Cloudera的开源平台发行版，提供开箱即用的集群管理、集群监控、集群诊断等功能，并支持使用多种组件，助力您执行...
DataWorks On MaxCompute使用说明
同时，提供了任务开发与发布的流程管控，助力您规范开发操作，保障开发过程的安全性。一、数据集成 DataWorks的数据集成模块为您提供读取和写入数据至MaxCompute的能力，您可将其他数据源的数据同步至MaxCompute数据源，或将MaxCompute数据...
MaxCompute数据访问权限控制
背景信息 DataWorks通过空间预设角色与空间自定义角色与开发环境引擎Role映射，来让被授予空间角色的RAM用户拥有该角色映射的开发引擎Role权限，但默认无生产权限。您可通过DataWorks安全中心实现MaxCompute数据权限管控。应用场景 场景 同...
编排逻辑流
在应用程序开发过程中，系统可以处理和恢复潜在错误和异常，以帮助您处理错误和异常，提高应用程序的稳定性、可靠性和可维护性。逻辑流搭建方式 魔笔支持以下两种方式搭建逻辑流。在页面中，通过数据容器绑定逻辑流，快速搭建逻辑流。通过...
DataWorks On EMR使用说明
本文为您介绍在DataWorks上使用EMR的基本开发流程，以及相关 费用说明、环境准备、权限控制 等内容。背景信息 开源大数据开发平台E-MapReduce（简称EMR），是运行在阿里云平台上的一种大数据处理的系统解决方案。EMR基于开源的Apache ...
创建Hologres数据源
后续操作 为保障您的开发过程更加顺畅，建议先阅读 DataWorks On Hologres使用说明，了解在DataWorks使用Hologres的开发流程、相关费用、环境准备、权限控制等内容。数据源创建完成后，您可根据需要执行如下操作：计算任务开发与调度：...
创建EMR MR节点
本文将以创建EMR MR节点实现从OSS中读取文本，并统计文本中的单词数为例，为您展示EMR MR节点的作业开发流程。背景信息 本文示例中，涉及到的文件名称、Bucket名称及路径等信息，您需要替换为实际使用的相关信息。本节点支持使用OSS REF...
创建MaxCompute数据源
后续操作 为保障您的开发过程更加顺畅，建议先阅读 DataWorks On MaxCompute使用说明，了解在DataWorks使用MaxCompute的开发流程、相关费用、环境准备、权限控制等内容。数据源创建完成后，您可根据需要执行如下操作：计算任务开发与调度：...
功能发布记录 2022年之前
您可以购买该功能模块，将数据模型设计管控、引标落标等能力融入DataWorks规范化开发流程，助力您实现数据资产价值化输出，在数据全生命周期上夯实数据基础，为数据价值化提供有力支撑。2021.02.20 全部地域。DATABLAU数据建模计费标准 ...
代码评审
发起代码评审流程 开发人员 开发人员提交节点时将触发代码评审，选择评审人员后将生成评审单。说明 标准模式工作空间下，开发人员可通过 任务发布 界面批量发起代码评审，详情请参见 发布任务。查看与审批代码评审单 节点提交人 代码评审人...
采集数据
在 数据开发 页面，双击相应的业务流程名，进入业务流程开发面板。双击虚拟节点 WorkShop_Start。进入该节点的编辑页面，单击右侧的 调度配置。配置WorkShop_Start调度属性。通过以下配置实现调度场景下，每日00:15，由工作空间根节点触发...
DataWorks OpenAPI概述
1级 UpdateIDEEventResult 用于在数据开发过程中触发扩展点时，通过调用UpdateIDEEventResult接口，将扩展程序对扩展点事件的检查结果返回给DataWorks的数据开发系统。2级 GetIDEEventDetail 调用GetIDEEventDetail，根据DataWorks开放消息...
加工数据
发布业务流程 提交业务流程后，表示任务已进入开发环境。由于开发环境的任务不会自动调度，您需要将配置完成的任务发布至生产环境。说明 将任务发布至生产环境前，您需要对代码进行测试，确保其正确性。打开业务流程配置面板，单击工具栏中...
如何使用RPA流程开发HTTP请求
环境准备 HTTP请求依赖于Python的request库（RPA已内置），可直接在流程开发时引入 HTTP的一些参数格式的处理、请求返回体的解析等，可能涉及json处理，因此需要引入json库（RPA已内置）综上，在RPA编辑器中，引入依赖如下图 开发示例 本文...
准备数据
进入业务流程开发面板，并向面板中拖入一个虚拟节点（start）和三个离线同步节点（电量下降趋势数据同步、窃电标志数据同步和指标数据同步）分别填写相应的配置后，单击 提交。拖拽连线将start节点设置为三个离线同步节点的上游节点。配置...
- 产品推荐
- 这些文档可能帮助您