开发部署扩展程序：函数计算方式
扩展程序参数配置 DataWorks支持在扩展程序开发过程中使用参数来提高扩展程序开发和应用效率，在扩展程序代码开发时，将需要应用的参数添加至此处即可。您可直接使用DataWorks提供的典型应用场景的内置参数，也可自定义参数。支持添加多个...
开发部署扩展程序：自建服务方式
扩展程序参数配置 DataWorks支持在扩展程序开发过程中使用参数来提高扩展程序开发和应用效率，在扩展程序代码开发时，将需要应用的参数添加至此处即可。您可直接使用DataWorks提供的典型应用场景的内置参数，也可自定义参数。支持添加多个...
车辆和传感器
如需将数据集关联到某个车辆上，您需要在数据处理任务中将车辆型号或者车辆编号作为标签打上。 车辆定义：添加车型：通过设置车型名称、上传车型图片，设置车辆传感器代号、类型、品牌、型号、位置。添加车辆：通过选择车型、设置车牌...
数据开发：开发者
本文以使用MaxCompute数据源，在DataWorks上运行MaxCompute作业任务为例，为您介绍开发人员如何使用数据开发（DataStudio）创建一个周期调度任务，帮助您快速了解数据开发（DataStudio）模块的基本使用。前提条件 已完成开发前的环境准备，...
上传组件压缩包和截图
完成本地组件开发和打包后，需要上传组件zip文件到IoT Studio进行打包构建。下文介绍组件项目包构建的具体操作。前提条件 已完成组件的项目文件打包。详细内容请参见 打包本地项目文件。操作步骤 在 组件开发 页面的左侧流程的 上传zip包 ...
Midway Serverless一体化应用开发方案
如上图所示：打开README.md，了解如何进行开发。点击终端，打开云端Shell终端。安装文档里面的描述，一步步开始开发。a.首先需要安装研发依赖，执行 npm i—registry=https://registry.npmmirror.com/ 。b.等待依赖安装完成之后，执行npm ...
StarRocks
DataWorks的StarRocks节点可进行StarRocks任务的开发和周期性调度，以及与其他作业的集成操作。本文为您介绍使用StarRocks节点进行任务开发的主要流程。背景信息 StarRocks是新一代极速全场景MPP（Massively Parallel Processing）数据库，...
Oracle节点
DataWorks的Oracle节点可进行Oracle任务的开发和周期性调度，以及与其他作业的集成操作。本文为您介绍使用Oracle节点进行任务开发的主要流程。背景信息 Oracle是用于存储和处理数据的关系型数据库管理系统（RDBMS），为您提供可靠、高效且...
SQL Server节点
DataWorks的SQL Server节点可进行SQL Server任务的开发和周期性调度，以及与其他作业的集成操作。本文为您介绍使用SQL Server节点进行任务开发的主要流程。背景信息 SQL Server是用于存储和处理数据的关系型数据库管理系统（RDBMS），为您...
PostgreSQL节点
DataWorks的PostgreSQL节点可进行PostgreSQL任务的开发和周期性调度，以及与其他作业的集成操作。本文为您介绍使用PostgreSQL节点进行任务开发的主要流程。背景信息 PostgreSQL是一款功能强大、灵活的开源关系型数据库管理系统（RDBMS），...
MaxCompute数据权限控制详情
DataWorks通过空间预设角色或空间自定义角色与开发环境引擎Role映射，来让被授予空间角色的RAM用户，拥有该空间角色映射的开发引擎Role所拥有的MaxCompute引擎权限，但默认无生产权限，本文为您介绍预设角色权限基本情况、MaxCompute权限...
发布与使用
个人组件开发验证完成后，为方便开发者使用个人组件开发可视化Web应用，需要完成个人组件的发布。本文介绍如何发布个人组件。背景信息 个人组件开发完成后：支持开发者在Web可视化编辑页面的个人开发组件列表预览未发布组件。支持开发者...
MaxCompute数据访问权限控制
如果需要跨项目操作开发表或生产表，子账号需要在 安全中心 发起申请，待审批通过后，便可在数据开发界面对表进行相关操作。数据访问权限管控流程 数据访问控制功能支持您进行 权限申请、权限审批、权限审计 的操作，还支持您查看 权限申请...
Data Lake Analytics节点
如果您需要修改在 数据开发 页面测试时使用的任务执行资源，请单击工具栏中的 图标，选择相应的独享调度资源组。说明 因为访问专有网络环境的数据源需要使用独享调度资源组执行任务，所以此处必须选择测试连通性成功的独享调度资源组。单击...
DataWorks on EMR权限管控说明
在DataWorks运行EMR任务时，您需要在EMR侧及DataWorks侧进行相关的权限认证，以保证任务可以顺利执行。本文为您介绍DataWorks on EMR权限管控说明。背景信息 在DataWorks中，可通过DataWorks工作空间成员与EMR集群账号映射的方式获取EMR...
团队合作开发
云开发平台通过设计，使得您的应用在第一次被初始化，准备完环境之后，未来所有的开发者加入，都不需要额外去准备开发环境，任何一个新的开发者加入到任何一个新的应用，立即就可以开始进行业务逻辑的开发。云开发平台允许团队管理员去为每...
创建第一个企业（团队）
则会邀请您先创建一个企业（团队）完成团队的创建后，您将会看到云开发平台的服务协议，在您正式使用云开发平台提供的服务之前，需要阅读并同意签署云开发平台的服务协议，以确保您对自己的权利和义务都已知晓 在您阅读云开发服务协议并...
流程管控
DataWorks提供了全链路的数据开发治理能力，为您提供了统一的数据开发治理流程，同时也支持您在DataWorks的默认流程上基于自己的业务需求在关键的流程节点进行流程管控。本文为您介绍DataWorks在数据开发过程中支持的流程管控能力。背景...
引用SQL组件
您可通过创建数据开发（DataStudio）的SQL组件节点使用组件，基于组件快速新建数据处理节点，提高开发效率。本文为您介绍如何引用组件。前提条件 已准备所需使用的组件，详情请参见 定义SQL组件。已创建SQL组件节点，详情请参见 创建并管理...
批量操作
此界面的批量修改、提交仅对开发环境生效，如果您需要修改生产环境节点、资源、函数，批量修改并提交后，您需要进入任务发布界面，将刚刚的变更操作发布至生产环境。您可单击右上角的 历史操作记录，跳转至操作历史界面查看历史操作详情。
与本地 CI/CD hook 集成
阿里云 云开发平台 平台不仅支持在线 CloudIDE 开发、测试和 CI/CD，同时支持本地开发。在本地环境下，云开发平台在不影响原有开发流程的前提下提供 hook 文件支撑项目本地 CI/CD，让您的原有项目轻松升级到云原生 Serverless 架构。Hook ...
组件化接入方式下的环境配置
在进行客户端开发之前，您首先需要配置开发环境：配置 Windows 开发环境 配置 macOS 开发环境 配置 Linux 开发环境 配置 Windows 开发环境 参考以下说明配置 Windows 开发环境。配置 Java 8 环境 mPaaS 框架只支持 JDK 8 及以上版本。下载...
空间级模块权限管控
背景信息 序号 内容 相关文档 1 DataWorks工作空间为多角色协同开发的基本单元，所有开发工作都将在具体的工作空间内开展，若您需要RAM用户（子账号）协同开发，则需将RAM用户加入工作空间并按照职能为该用户分配空间角色。DataWorks预设...
创建手动任务
您可以在DataWorks的数据开发（DataStudio）模块创建手动任务，并在生产环境的运维中心管理手动任务。本文为您介绍如何创建手动任务，并将手动任务发布到生产环境。使用说明 若任务不需要发布生产环境操作生产环境引擎，您可选择 新建临时...
用户授权与管理
角色规划 使用数据建模并应用至数据开发的过程中，通常需要进行定义标准、数据建模、数据开发、部署运维等任务，下图为您示例不同流程中操作人员的角色以及所需的角色权限。建议您参考下图进行用户角色及权限规划。开通权限 建议您参考 ...
MaxCompute资源管理
您可以通过MaxCompute资源面板，查看在MaxCompute计算引擎中存在的资源、资源的变更历史，并可以一键添加资源文件至数据开发面板的业务流程中。使用限制 仅支持MaxCompute客户端（odpscmd）上传的不超过200M的资源通过MaxCompute资源功能...
创建CDH Hive节点
数据开发（DataStudio）基于业务流程对不同开发引擎进行具体开发操作，所以您创建节点前需要先新建业务流程，操作详情请参见 创建业务流程。已创建阿里云CDH集群，并注册CDH集群至DataWorks。创建CDH相关节点并开发CDH任务前，您需要先将...
创建CDH Presto节点
数据开发（DataStudio）基于业务流程对不同开发引擎进行具体开发操作，所以您创建节点前需要先新建业务流程，操作详情请参见 创建业务流程。已创建阿里云CDH集群，并注册CDH集群至DataWorks。创建CDH相关节点并开发CDH任务前，您需要先将...
安装 mPaaS 插件
本文将引导您安装开发者工具，同时也向您介绍安装后加载 mPaaS 插件和重装 mPaaS 插件的相关操作。mPaaS 插件失效声明 由于苹果系统安全策略的升级，从 macOS 10.15.1 版本开始加入了应用签名的强校验机制，去签名容易导致 Xcode 无法使用...
创建EMR Presto节点
Presto（即PrestoDB）是一款灵活、可扩展的分布式SQL查询引擎，支持使用标准的SQL查询语言进行大数据的交互式分析查询（Presto概述），DataWorks为您提供EMR Presto节点，便于您在DataWorks上进行Presto任务的开发和周期性调度。...
创建CDH MR节点
在DataWorks任务开发中，您可以通过创建CDH MR（MapReduce）节点处理超大规模的数据集。本文为您介绍如何在DataWorks中创建并使用CDH MR节点。前提条件 数据开发（DataStudio）中已创建业务流程。数据开发（DataStudio）基于业务流程对不同...
创建EMR函数
您需要根据实际情况完成EMR侧及DataWorks侧的准备工作。DataLake：详情请参见 DataLake集群配置、DataWorks配置。Hadoop：Hadoop集群开发前准备工作。您需要先上传资源，才可以注册函数。新建EMR资源详情可参考文档：创建和使用EMR资源 ...
通用开发流程
DataWorks将不同类型引擎任务封装为不同节点，通过创建节点来生成数据开发任务。同时，数据开发（DataStudio）支持使用资源、函数、以及不同的逻辑处理节点开发复杂任务。本文将为您介绍数据开发任务的通用开发流程。前提条件 已绑定所需...
创建EMR Kyuubi节点
DataWorks的EMR Kyuubi节点可进行Kyuubi任务的开发和周期性调度，以及与其他作业的集成操作。本文为您介绍使用EMR Kyuubi节点进行任务开发的主要流程。背景信息 Apache Kyuubi是一个分布式和多租户网关，为数据湖查询引擎（例如Spark、...
创建CDH Spark节点
数据开发（DataStudio）基于业务流程对不同开发引擎进行具体开发操作，所以您创建节点前需要先新建业务流程，操作详情请参见 创建业务流程。已创建阿里云CDH集群，并注册CDH集群至DataWorks。创建CDH相关节点并开发CDH任务前，您需要先将...
创建EMR Impala节点
数据开发（DataStudio）基于业务流程对不同开发引擎进行具体开发操作，所以您创建节点前需要先新建业务流程，操作详情请参见 创建业务流程。已创建阿里云EMR集群，并注册EMR集群至DataWorks。创建EMR相关节点并开发EMR任务前，您需要先将...
创建EMR Hive节点
数据开发（DataStudio）基于业务流程对不同开发引擎进行具体开发操作，所以您创建节点前需要先新建业务流程，操作详情请参见 创建业务流程。已创建阿里云EMR集群，并注册EMR集群至DataWorks。创建EMR相关节点并开发EMR任务前，您需要先将...
创建并使用PAI DLC节点
为避免使用DataWorks周期性调度DLC节点在PAI产生较多不易区分的同名任务，建议在DataWorks开发DLC任务时根据实际需要合理设置调度周期，同时，建议在任务名称中增加日期时间变量，并通过调度配置为该变量赋值时间调度参数，实现任务命名...
开发ODPS MR任务
任务发布：完成所有开发相关操作后，您需要将所有任务节点进行发布，发布后节点即会根据调度配置结果进行周期性运行，操作详情请参见 发布任务。MapReduce常见问题：您可了解MR任务执行过程中的常见问题，便于出现异常时快速排查解决。
开发天猫精灵智能应用
完成团队的创建后，您将会看到 云开发平台 的服务协议，在您正式使用云开发平台提供的服务之前，需要阅读并同意签署云开发平台的服务协议，以确保您对自己的权利和义务都已知晓 在您阅读云开发服务协议并选择「免费开通」后，您将会看到云...
- 产品推荐
- 这些文档可能帮助您