发布任务
标准模式工作空间提交任务后，任务仅在开发环境生效，开发环境中的任务不进行自动调度，您需要通过任务发布流程，将任务发布至生产环境后，任务才会周期调度运行。说明 在数据开发界面提交的操作都将进入任务发布界面处于待发布状态，您...
数据开发与运行
说明 如果您的DataWorks为标准模式，则开发环境和生产环境分离，在DataWorks的DataStudio删除资源时，只删除了开发环境的资源，生产环境的资源需要将删除操作发布到生产环境，生产环境的资源才会被删除下线。在开发环境中删除资源。在对应...
荣耀推送
开发环境准备，开发环境需要符合荣耀推送集成的环境，具体可以参考 开发准备-环境信息。添加配置文件。在 荣耀开发者服务平台 中下载 mcs-services.json 配置文件，具体参考 添加应用配置文件。配置 SDK 的仓库地址。具体参考官方链接文档 ...
平台安全诊断
计算引擎生产开发环境隔离 说明 标准模式工作空间下支持将计算引擎生产、开发环境进行区分隔离，避免生产环境中的数据从开发环境泄露。DataWorks工作空间引擎 此安全检测项为您扫描当前地域下哪些工作空间绑定的计算引擎实例存在开发、生产...
开发前准备：绑定数据源或集群
若您要在DataWorks中进行数据建模、数据开发或使用运维中心周期性调度任务，需先将已创建的数据源或集群绑定至数据开发（DataStudio）模块。绑定后，才可读取数据源或集群中的数据，并进行相关开发操作。前提条件 您需根据后续要开发和调度...
开发流程
对于后端逻辑流：熟悉代码模板工程，设置开发环境。在代码模板工程中，进入对应的代码开发目录，开发自定义操作的执行代码。打包构建，生成构建产物。详细操作请参见 开发前端逻辑流操作代码 和 开发后端逻辑流操作代码。步骤三、上传构建...
项目分配与安全
项目模式选择 标准模式是指一个DataWorks项目对应两个MaxCompute项目，可设置开发和生产双环境，提升代码开发规范，并能够对表权限进行严格控制，禁止随意操作生产环境的表，保证生产表的数据安全。当您在DataWorks建立项目时，建议您使用...
总览
H5 容器是一款移动端 Hybrid 解决方案 SDK（Nebula SDK），提供了良好的外部扩展功能，拥有功能插件化、事件机制、JSAPI ...您将需要 配置开发环境。参考 准备配置 获取更多信息。可用的网络访问。网络浏览器（建议您使用 Chrome 浏览器）。
数据开发功能索引
本文为您介绍DataWorks数据开发（DataStudio）界面的整体布局，以及进行开发操作的主界面（业务流程和节点）中各组件、按钮的功能作用，方便您快速了解及使用数据开发模块。进入数据开发 登录 DataWorks控制台，单击左侧导航栏的 数据建模...
MaxCompute数据离线同步至ClickHouse
说明 此处会展示ClickHouse数据源开发环境地的表列表和表结构，如果您的ClickHouse数据源开发和生产环境的表定义不同，则可能出现任务在开发环境配置正常但提交生产运行后报错表不存在、列不存在的问题。导入前准备语句、导入后完成语句 您...
调度依赖配置指引
节点唯一性相关 开发环境与生产环境节点形态不同但节点唯一：同一节点在开发环境和生产环境中的调度依赖配置可以不同，即同一个节点在开发环境和生产环境可以拥有两种不同的形态，但节点唯一。下线节点前需在开发环境与生产环境同时移除...
配置并使用调度参数
当节点最新代码提交至开发环境后，才可在开发环境使用冒烟测试功能。说明 运行（）与高级运行（）功能需手动为代码中的变量赋值常量，因此无法校验配置的调度参数是否符合预期。执行冒烟测试时，会生成相应实例产生实例费用。实例的费用...
RunSmokeTest
ProjectEnv String 是 PROD 工作空间的环境，包括PROD（生产环境）和DEV（开发环境）。简单模式的工作空间无开发环境，详情请参见 简单模式和标准模式的工作空间。Bizdate String 是 2020-05-26 00:00:00 业务日期。Name String 是 xm_...
MySQL节点
标准模式工作空间下，MySQL节点选择数据源时，无法下拉选择只配置开发环境但未配置生产环境的数据源。所以创建MySQL数据源时，您需要同时配置开发环境与生产环境的数据源。使用限制 MySQL节点仅支持对连接串模式创建的生产环境MySQL数据源...
应用提交和预览
预览应用：查看应用的设计效果，符合预期时，则可以发布到开发环境进行测试。说明 仅支持在应用设计器内预览，模块设计器内支持提交和发布。提交应用 单击页面右上角，顶部功能区的 提交，弹出 变更提交 对话框。在 变更提交 对话框中，...
准备环境
开发个人组件前，需要配置开发环境和初始化开发项目。步骤一：安装Node.js运行环境 需要安装8.9 LTS以及以上版本：单击并选择版本下载。步骤二：安装npm包管理工具 内测用户先使用bnpm,正式开放之后会迁移至aliplus源，使用npm即可。打开...
开发ODPS Spark任务
根据所使用系统类型，准备运行MaxCompute Spark任务的开发环境，详情请参见 搭建Linux开发环境、搭建Windows开发环境。开发Java/Scala代码。在ODPS Spark节点执行Java或Scala语言类型代码前，需先在本地或已有环境开发好MaxCompute Spark...
什么是主机应用部署
云开发平台部署主机应用的过程 第一步：根据语言进行机器环境分配，执行代码中的build.sh脚本 第二步：打包构建后build目录（云开发平台中可以修改）内容成压缩包，上传到流水线制品库 第三步：拉取构建包到主机应用/root/application（云...
查看版本
状态 已提交：节点已提交至开发环境，但未创建发布包并发布至生产环境。您可进入发布页面发布该节点，详情请参见 发布任务。中间版本：节点已提交至开发环境并且已创建发布包，但未发布至生产环境。节点处于待发布状态。您可进入发布页面...
数据源概述
数据源开发与生产隔离 在配置数据源时，您可以对同一个名称的数据源同时添加开发环境和生产环境两套配置，通过数据源隔离使其在不同环境隔离使用。详情请参见：数据源开发和生产环境隔离。说明 目前只有标准模式的工作空间支持数据源隔离。...
查看公共表
说明 标准模式工作空间下，公共表包括 开发环境 和 生产环境。简单模式工作空间下，公共表仅包括 生产环境。蓝色表示当前环境。表名 相应工作空间下表的名称。列信息 查看当前表的字段数量、字段类型及描述。分区信息 查看当前表的分区信息...
创建EMR Presto节点
Presto（即PrestoDB）是一款灵活、可扩展的分布式SQL查询引擎，支持使用标准的SQL查询语言进行大数据的交互式分析查询（Presto概述），DataWorks为您提供EMR Presto节点，便于您在DataWorks上进行Presto任务的开发和周期性调度。...
调度参数
FAILED:ODPS-0130161:[1,84]Parse exception-invalid token '$' params format error，please check your params（key=values）运行按钮的赋值逻辑差异 运行，高级运行和开发环境冒烟测试赋值逻辑有什么区别 调度参数运维与查看 如何查看...
批量操作
此界面的批量修改、提交仅对开发环境生效，如果您需要修改生产环境节点、资源、函数，批量修改并提交后，您需要进入任务发布界面，将刚刚的变更操作发布至生产环境。您可单击右上角的 历史操作记录，跳转至操作历史界面查看历史操作详情。
采集数据
表信息确认无误后，将ods_user_info_d表和ods_raw_log_d表分别单击 提交到开发环境 和 提交到生产环境，此操作将根据您的节点配置在开发环境与生产环境对应计算引擎项目分别创建目标引擎物理表。说明 表结构定义完成后，您需将其提交至开发...
权限管理与规范化数据开发
在标准模式空间下，DataWorks的“开发”角色因为与所绑定MaxCompute项目（dev环境）的“Role_Project_Dev”Role进行了映射，因此：DataWorks开发角色天然能够读取MaxCompute项目（dev环境）内的所有数据。由于没有和MaxCompute项目（PROD...
扩展程序概述
产品能力 DataWorks作为阿里云一站式大数据开发与治理平台，在各项能力支持上预设了很多拓展点，例如，在标准模式下，简略来看，节点创建后完成代码开发后，需先提交到开发环境中进行验证，完成后再正式发布到生产环境中，后续每天根据调度...
示例：开发中心应用
在示例应用的 应用部署 页面，您可以看到已经自动为示例项目创建了两个示例环境，环境类型分别为 开发环境 和 生产环境。关于如何创建和管理环境，请参见 创建和管理项目环境。单击 示例开发环境 卡片，在 新建实例部署-部署配置 面板，...
搭建开发环境
HaaS Studio HaaS Studio是AliOS Things配套的开发环境基于VS Code的插件。VS Code安装完成后，可在VS Code的插件市场搜索“haas-studio”，然后点击“install”安装。配置VS Code“代码修改”、“编译”以及“烧入”都是在VS Code中完成的...
加工数据
完成设置后，分别单击 提交到开发环境 和 提交到生产环境。设计业务流程 业务流程的新建及依赖关系的配置请参见 新建业务流程。进入业务流程开发面板，并向面板中拖入两个ODPS SQL节点，依次命名为 数据清洗 和 数据汇聚，并配置如下图所示...
创建并管理工作空间
生产、开发环境隔离 定义工作空间模式，即工作空间的生产环境和开发环境是否隔离。是：需隔离生产、开发环境，该方式创建的工作空间为标准模式工作空间。否：无需隔离生产、开发环境，该方式创建的工作空间为简单模式工作空间。工作空间...
创建CDH Impala节点
如果您希望在开发环境进行冒烟测试，可在执行节点提交，或节点提交后执行，冒烟测试，操作详情请参见 执行冒烟测试。后 续步骤 提交并发布节点任务。单击工具栏中的 图标，保存节点。单击工具栏中的 图标，提交节点任务。在 提交新版本 ...
数据开发：开发者
本文以使用MaxCompute数据源，在DataWorks上运行MaxCompute作业任务为例，为您介绍开发人员如何使用数据开发（DataStudio）创建一个周期调度任务，帮助您快速了解数据开发（DataStudio）模块的基本使用。前提条件 已完成开发前的环境准备，...
mPaaS 适配荣耀厂商推送
开发环境需要符合荣耀推送集成的环境，具体可以参考 开发准备>环境信息。添加配置文件。在 荣耀开发者服务平台 中下载 mcs-services.json 配置文件，具体参考 添加应用配置文件。配置 SDK 的仓库地址。具体参考官方链接文档 配置 SDK 的 ...
通用参考：切换资源组
数据开发页面 重要 数据开发中修改的资源组不会同步到生产环境中，您需要通过 发布流程 将任务发布后，才能在生产环境中生效。进入数据开发页面。登录 DataWorks控制台，切换至目标地域后，单击左侧导航栏的 数据建模与开发>数据开发，在...
GetDeployment
CheckingStatus Integer 7 当前发布包涉及节点的检查状态，当发布包的目标环境是开发环境（toEnviroment=1）时，只有发布包的Status为1并且CheckingStatus为空时，才可以继续进行文件到生产环境的发布。7：检查未通过 8：正在处于检查中的...
创建并配置发布环境
例如，简单模式工作空间的开发环境和生产环境是分隔的，您可以直接使用 跨工作空间发布，无需逐个创建即可将开发环境的节点批量发布至生产环境中进行发布调度，详情请参见 发布任务。跨云发布：用于跨账号、跨地域或跨云平台（例如，金融云...
准备环境
步骤四：配置DataWorks on EMR开发环境 在DataWorks上运行EMR作业前，您需要配置如下开发环境：购买并配置独享调度资源组。独享调度资源组是一种专门的计算资源，用于保障任务能够按时被调度执行。购买一个独享调度资源组，并与当前EMR集群...
创建CDH Presto节点
如果您希望在开发环境进行冒烟测试，可在执行节点提交，或节点提交后执行，冒烟测试，操作详情请参见 执行冒烟测试。后 续步骤 提交并发布节点任务。单击工具栏中的 图标，保存节点。单击工具栏中的 图标，提交节点任务。在 提交新版本 ...
创建CDH Hive节点
如果您希望在开发环境进行冒烟测试，可在执行节点提交，或节点提交后执行，冒烟测试，操作详情请参见 执行冒烟测试。后 续步骤 提交并发布节点任务。单击工具栏中的 图标，保存节点。单击工具栏中的 图标，提交节点任务。在 提交新版本 ...
- 产品推荐
- 这些文档可能帮助您