DataWorks On CDP/CDH使用说明
环境准备 一、资源准备 类别 描述 相关文档 版本选择 DataWorks基础版服务可满足 CDP或CDH 基本的数据上云、数据开发与调度生产、简单的数据治理工作，若需获取更专业的数据治理、数据安全解决方案，可选择相应的 标准版、专业版、企业版 ...
创建并管理工作空间
规划工作空间 选择空间模式 DataWorks工作空间分为简单模式与标准模式：简单模式：仅具有生产环境，对应一个引擎项目，无法做到数据权限隔离与开发生产隔离。标准模式：包括开发环境及生产环境，可以分别对应两个引擎项目，更好的做到开发...
场景：MaxCompute引擎在不同模式工作空间访问资源与...
细分特点 简单模式 标准模式 权限概述 在简单模式空间下，DataWorks的“开发”角色因为与所绑定MaxCompute项目的“Role_Project_Dev”Role进行了映射，因此：DataWorks开发角色天然能够读取MaxCompute项目内的所有数据。由于简单模式工作...
DataWorks On EMR使用说明
环境准备 一、资源准备 类别 描述 相关文档 版本选择 DataWorks基础版服务可满足EMR基本的数据上云、数据开发与调度生产、简单的数据治理工作，若需获取更专业的数据治理、数据安全解决方案，可选择相应的 标准版、专业版、企业版 服务。...
表管理
说明 仅标准模式工作空间的表区分 开发环境 和 生产环境，简单模式工作空间的表仅包括 生产环境。默认展示5000张数据表，建议您使用搜索功能查找表。目前仅MaxCompute、Hologres引擎支持 按引擎元数据查看 展示目标表，其余引擎（例如，EMR...
查看公共表
简单模式工作空间下，公共表仅包括 生产环境。蓝色表示当前环境。表名 相应工作空间下表的名称。列信息 查看当前表的字段数量、字段类型及描述。分区信息 查看当前表的分区信息、分区数量，MaxCompute分区数最大为6万个（如果设置了生命...
权限管理与规范化数据开发
DataWorks工作空间类型分为“简单模式”、“标准模式”两种，两种类型在权限管理上有细分区别。本实践将基于DataWorks标准模式空间完成从“数据建模”到“数据生产”的基本流程，帮助您快速掌握规范化的数据体系建设流程，提升在数据开发...
场景：工作空间模式升级（简单模式升级标准模式）
若您当前使用的是简单模式工作空间，但希望将开发与生产环境隔离，可将简单模式工作空间升级为标准模式工作空间。本文为您介绍如何升级工作空间模式。操作须知 升级工作空间模式前，您需先了解以下内容：了解简单模式与标准模式工作空间的...
什么是业务逻辑
物联网应用开发（IoT Studio）提供了物联网业务逻辑的开发工具，支持通过编排服务节点的方式快速完成简单的物联网业务逻辑的设计。应用场景 设备联动 设备数据处理 设备与服务联动 API的生成 HTTP请求开头的API，由于阿里云网关限制，业务...
实现开发生产等多套环境隔离
使用DataWorks进行大数据开发时，支持对开发、测试、生产等环境进行隔离，当您联合使用了其他阿里云产品时，也可根据环境隔离诉求进行对应业务的环境设置与隔离，本文以DataWorks联合EMR、OSS等产品为例，为您介绍如何实现开发生产等多套...
开发ODPS SQL任务
下面以一个简单示例为您介绍SQL命令的开发及运行。说明 MaxCompute 2.0扩展函数使用到新数据类型时，您需要在该函数的SQL语句前加 set odps.sql.type.system.odps2=true;并与SQL一起提交运行，以便正常使用新数据类型。2.0数据类型详情请...
数据开发与运行
本文为您介绍数据开发的相关问题。资源 如何在pyodps调用第三方包？如何在节点内使用资源？如何下载上传到DataWorks的资源？超过30M的资源如何上传？通过odpscmd上传的资源如何在DataWorks上使用？在DataWorks如何上传自己本地编写的jar并...
数据源开发和生产环境隔离
数据源隔离模式可以满足标准模式下，开发环境和生产环境的数据隔离需求。背景信息 同一个名称的数据源存在开发环境和生产环境两套配置，在配置数据源时，您可基于标准模式工作空间对应底层两个数据库或数据仓库的背景，针对不同环境设置...
基本概念
产品名词解释 名词 描述 IoT Studio 物联网应用开发（IoT Studio）是阿里云物联网平台的一部分，提供了Web可视化开发、移动可视化开发、业务逻辑开发与物联网数据分析等一系列便捷的物联网开发工具。Web可视化开发 IoT Studio提供的开发...
工作空间概述
后续：开始数据开发 创建工作空间并分配空间成员角色权限后，您可根据各角色定义的权限前往数据开发DataStudio模块开始数据开发工作，数据开发模块的入门教程详情请参见：数据开发：开发者。相关文档 在阅读工作空间的概述后，若您想创建...
创建工作空间
工作空间是DataWorks管理任务、成员，分配角色和权限的基本单元，所有开发工作都将在具体的工作空间内完成。因此，进行任务开发前您需要先创建工作空间，本文为您介绍如何创建工作空间。前提条件 已开通DataWorks服务，详情请参见 开通...
创建并管理数据源
若简单模式升级为标准模式，会将原有的一个数据源拆分为生产环境和开发环境隔离的两个数据源。详情请参见 场景：工作空间模式升级（简单模式升级标准模式）。标准模式工作空间中，任务在不同环境执行时所访问的数据源如下：在数据开发...
数据开发与运维中心：数据加工
DataWorks的 数据开发（DataStudio）是数据加工的开发平台，运维中心 是智能运维平台，基于这两个功能模块，您可以在DataWorks上规范、高效地构建和运维数据开发工作流。功能概述 DataWorks的数据开发的亮点功能如下。DataStudio支持...
平台安全诊断
DataWorks的平台安全诊断，为您提供了当前DataWorks工作空间与绑定的引擎在数据传输、存储、运算等过程中，与身份认证、访问权限控制、开发模式等功能相关的安全能力，以及诊断相关安全问题的最佳实践，帮助您及时发现平台的安全隐患，在...
数据治理中心概述
数据治理中心可自动发现平台使用过程中数据存储、任务计算、代码开发、数据质量及安全等维度存在的问题，并通过健康分量化评估，从全局、工作空间、个人等多个视角，以治理报告及排行榜呈现治理成果，帮助您高效达成治理目标。同时，提供...
配置检查项
说明 DataWorks的工作空间区分标准模式和简单模式，不同模式工作空间下任务的开发流程存在一定差异，详情请参见 必读：简单模式和标准模式的区别。本文为您介绍检查项的相关使用：注册检查项 启用检查项 配置检查项 批量操作检查项 检查项...
创建Hologres外部表
登录 DataWorks控制台，单击左侧导航栏的 数据建模与开发>数据开发，在下拉框中选择对应工作空间后单击 进入数据开发。创建 业务流程。如果您已有 业务流程，则可以忽略该步骤。鼠标悬停至 图标，选择 新建业务流程。在 新建业务流程 ...
创建Hologres内部表
登录 DataWorks控制台，单击左侧导航栏的 数据建模与开发>数据开发，在下拉框中选择对应工作空间后单击 进入数据开发。创建 业务流程。如果您已有 业务流程，则可以忽略该步骤。鼠标悬停至 图标，选择 新建业务流程。在 新建业务流程 ...
什么是移动可视化开发
移动可视化开发是物联网应用开发（IoT Studio）提供的开发工具。无需写代码，只需在编辑器中，拖拽组件到画布上，再配置组件显示样式、数据源和动作。目前支持生成HTML5应用，并绑定域名发布。适用于开发设备控制App、工业监测App等。功能...
管理数据源权限
从标准模式工作空间分享至简单模式工作空间：源工作空间的生产或开发环境下的数据源，均支持分享。分享至目标数据源后，仅保留一个数据源，且最新分享的数据源会覆盖之前的数据源。如果目标工作空间升级为标准模式工作空间，则该数据源会...
发布模型至引擎
说明 如果您使用的是简单模式的DataWorks工作空间，则仅支持发布表到生产环境。如果您使用的是标准模式的DataWorks工作空间，则支持发布表到生产环境或开发环境。发布模式 增量发布：选择该模式，发布时仅会将目标模型此次变更的内容发布至...
执行冒烟测试
完成代码开发后，您需要调试运行。本文为您介绍如何在开发环境进行冒烟测试。背景信息 为保障调度节点任务执行符合预期，建议您在发布前对任务进行冒烟测试。在使用调度参数的场景下，您也可以通过冒烟测试校验调度场景下的参数替换情况。...
数据开发：开发者
本文以使用MaxCompute数据源，在DataWorks上运行MaxCompute作业任务为例，为您介绍开发人员如何使用数据开发（DataStudio）创建一个周期调度任务，帮助您快速了解数据开发（DataStudio）模块的基本使用。前提条件 已完成开发前的环境准备，...
交通
一次开发、多次复用：Web 端与小程序的网络请求全部使用相同的框架，因此 Web 端已开发完成的业务能够快速地迁移至 mPaaS 小程序中，只需简单的调整即可满足 mPaaS 业务逻辑的处理需要，从而避免业务逻辑代码重复编写，保证双端业务逻辑...
注册CDH或CDP集群至DataWorks
DataWorks提供了与CDH（Cloudera’s Distribution Including Apache Hadoop，以下简称CDH）和CDP（Cloudera Data Platform，以下简称CDP）集群对接的能力，您可在DataWorks中注册CDH及CDP集群，进行任务开发、调度、数据地图（元数据管理）...
总览
在接入 mPaaS 进行开发的过程中，最常见的场景就是在已有的原生 Android 工程中接入 mPaaS 后再进行开发。场景介绍 在接入 mPaaS 进行开发的过程中，最常见的场景就是在已有的原生 Android 工程中接入 mPaaS 后再进行开发。故本教程也将...
离线数据加工卡点
回归测试需要您能充分模拟真实环境进行测试：对于标准模式项目，您可使用SQL语句将数据从生产环境复制到开发环境，运行业务流程，观察是否存在报错。对于简单模式的项目，您可以直接运行业务流程，观察是否存在报错。由于本教程使用简单...
如何分配开发任务
在团队协同开发任务中，管理员创建好应用之后，可以将应用的开发任务分配给不同的团队成员。为应用分配开发成员 管理员在「应用列表」找到要进行开发任务分配的应用，点击进入「应用详情页」，在左侧菜单点击「开发者管理」，点击「添加...
关于开发小助手
在将开发工程接入 mPaaS 后或基于 mPaaS 插件创建工程后，即可将开发小助手接入开发工程（点击快速了解如何使用开发小助手），使用开发小助手进行调试、帮助开发。说明 开发小助手有以下使用限制：开发小助手仅支持组件化 Portal&Bundle 接...
概述
IoT Studio提供了组件开发功能，便于开发者开发、发布和管理自己研发的组件，并将其发布到可视化工作台中用于可视化页面搭建。从而满足开发者的需求，提升组件丰富性，为可视化搭建提供无限可能。使用说明 组件开发功能升级中，暂停新用户...
发布与使用
个人组件开发验证完成后，为方便开发者使用个人组件开发可视化Web应用，需要完成个人组件的发布。本文介绍如何发布个人组件。背景信息 个人组件开发完成后：支持开发者在Web可视化编辑页面的个人开发组件列表预览未发布组件。支持开发者...
团队合作开发
云开发平台通过设计，使得您的应用在第一次被初始化，准备完环境之后，未来所有的开发者加入，都不需要额外去准备开发环境，任何一个新的开发者加入到任何一个新的应用，立即就可以开始进行业务逻辑的开发。云开发平台允许团队管理员去为每...
入门概述
本模块将指引您快速完成一个完整的数据开发和运维操作。说明 如果您是第一次使用DataWorks，请确认已经根据 准备工作 模块的操作，准备好账号和工作空间角色等内容后，登录DataWorks控制台，单击相应工作空间后的 进入数据开发，即可进行...
创建组件
开发组件前，需先创建组件来定义组件名称、类型和功能特性描述，便于组件发布后引导开发者使用。本文介绍如何在组件开发工作台创建组件。新增组件 登录 物联网应用开发控制台，在页面左上角选择对应实例后，在左侧导航栏单击 应用开发。在 ...
使用开发小助手
接入开发小助手 为保证功能的完整性和独立性，离线包中心（需先集成 H5 容器及离线包）功能需要以 离线包开发助手 的形式在 mPaaS 插件中单独接入，其余功能通过接入 开发小助手 完成接入。离线包小助手单向依赖开发小助手，离线包开发...
- 产品推荐
- 这些文档可能帮助您