ClickHouse SQL
在 新建节点 对话框中输入节点 名称，单击 确认，节点创建完成，您可在节点中进行对应任务的开发与配置。步骤二：开发ClickHouse SQL任务（可选）选择ClickHouse数据源 如果您的工作空间创建了多个ClickHouse数据源，则需先在ClickHouse ...
创建并使用AnalyticDB for PostgreSQL节点
在 新建节点 对话框中输入节点 名称，单击 确认，节点创建完成，您可在节点中进行对应任务的开发与配置。步骤二：开发AnalyticDB for PostgreSQL任务（可选）选择AnalyticDB for PostgreSQL数据源 如果您的工作空间创建了多个AnalyticDB ...
模型管理
登录 DataWorks控制台，单击左侧导航栏的 数据建模与开发>数据开发，在下拉框中选择对应工作空间后单击 进入数据开发。单击左上方的 图标，选择 全部产品>数据建模>维度建模。在 维度建模 页面单击 图标，进入 模型列表。查看模型列表及...
Oracle节点
节点创建完成，您可在节点中进行对应任务的开发与配置。步骤二：开发Oracle任务（可选）选择Oracle数据源 如果您的工作空间创建了多个Oracle数据源，则需先在Oracle节点编辑页面选择合适的数据源。如果仅创建了一个Oracle数据源，则默认...
PostgreSQL节点
节点创建完成，您可在节点中进行对应任务的开发与配置。步骤二：开发PostgreSQL任务（可选）选择PostgreSQL数据源 如果您的工作空间创建了多个PostgreSQL数据源，则需先在PostgreSQL节点编辑页面选择合适的数据源。如果仅创建了一个...
SQL Server节点
节点创建完成，您可在节点中进行对应任务的开发与配置。步骤二：开发SQL Server任务（可选）选择SQL Server数据源 如果您的工作空间创建了多个SQL Server数据源，则需先在SQL Server节点编辑页面选择合适的数据源。如果仅创建了一个SQL ...
数据开发概述
DataWorks数据开发（DataStudio）模块用于定义周期调度任务的开发及调度属性，与运维中心配合使用，面向各引擎（MaxCompute、Hologres、EMR等）提供可视化开发主界面，支持智能代码开发、多引擎混编工作流、规范化任务发布等能力，帮助您...
数据开发：开发者
背景信息 DataWorks的数据开发（DataStudio）面向各引擎（MaxCompute、Hologres、EMR、CDH等）提供可视化开发界面，包括智能代码开发、数据清洗加工、规范化任务开发与发布等，保证数据开发的高效与稳定。更多数据开发模块的使用，详情请...
创建并使用PAI Designer
后续您可在节点中进行对应工作流任务的开发与配置。步骤二：开发PAI Designer节点任务 简单示例 开发任务：编写Designer工作流 编辑PAI Designer节点任务时，如选择加载已有工作流，则需提前在PAI中创建Designer工作流，通过名称搜索，载入...
创建CDH MR节点
单击 确认，完成节点创建，后续您可在创建的节点中进行对应任务的开发与配置操作。步骤二：创建并引用CDH JAR资源 DataWorks支持您从本地先上传资源至DataStudio，再引用资源。具体操作如下：创建CDH JAR资源。在对应业务流程中，右键单击 ...
个人设置
进入个人设置 登录 DataWorks控制台，单击左侧导航栏的 数据建模与开发>数据开发，在下拉框中选择对应工作空间后单击 进入数据开发。在DataStudio界面左侧导航栏底部单击 图标，进入 设置>个人设置 页面。在该页面，您可进行如下操作：设置...
DataWorks On MaxCompute使用说明
类别 描述 相关文档 版本选择 DataWorks基础版服务可满足MaxCompute开发中基本的数据上云、数据开发与调度生产、简单的数据治理工作，若需获取更专业的数据治理、数据安全解决方案，可选择相应的标准版、专业版、企业版服务。DataWorks标准...
发布任务
登录 DataWorks控制台，单击左侧导航栏的 数据建模与开发>数据开发，在下拉框中选择对应工作空间后单击 进入数据开发。发布任务。检查通过的文件变更操作可在 任务发布>创建发布包 界面将操作发布至生产环境，有以下两种发布方式可选：单个...
创建数据脱敏场景
登录 DataWorks控制台，单击左侧导航栏的 数据建模与开发>数据开发，在下拉框中选择对应工作空间后单击 进入数据开发。单击左上方的 图标，选择 全部产品>数据治理>数据保护伞，单击 立即体验，进入数据保护伞。说明 若阿里云主账号已授权...
数据开发与运维中心：数据加工
任务监控与定位处理 计费 进行数据开发与运维可能产生的费用包括：运行任务所需的 调度资源组 费用。计费详情请参见 独享调度资源组计费说明：包年包月、公共调度资源组计费说明：按量付费。进行运维监控时，监控规则计算扫描所需的实例...
在工作空间创建数据源或注册集群
工作空间创建完成后，您需要先将您的数据库或数据仓库，通过创建数据源的方式添加至DataWorks工作空间，或将您的集群注册至DataWorks工作空间，以便进行数据同步、数据分析与开发、数据调度等操作。本文主要以使用正式开发环境为例，为您...
创建并管理数据源
标准模式工作空间中，任务在不同环境执行时所访问的数据源如下：在数据开发（DataStudio）模块与开发环境运维中心执行，默认访问开发环境的数据源。在生产环境运维中心执行，默认访问生产环境的数据源。说明 配置数据源时，请确认开发环境...
创建Hologres外部表
登录 DataWorks控制台，单击左侧导航栏的 数据建模与开发>数据开发，在下拉框中选择对应工作空间后单击 进入数据开发。创建 业务流程。如果您已有 业务流程，则可以忽略该步骤。鼠标悬停至 图标，选择 新建业务流程。在 新建业务流程 ...
创建并使用PAI DLC节点
后续您可在节点中进行对应任务的开发与配置。步骤二：开发PAI DLC任务 开发任务代码：简单示例 在PAI DLC节点编辑页面，您可通过如下方式编写DLC任务：基于已有DLC任务编写任务代码。通过名称搜索，载入在人工智能平台PAI已创建的DLC任务。...
必读：简单模式和标准模式的区别
不同模式工作空间对生产任务开发与运维的影响 DataWorks建立于对应工作空间物理属性之上的任务开发与运维机制介绍。不同模式工作空间的优劣势对比 不同工作空间模式的优劣势对比。标准模式工作空间对使用流程的影响图示 以角色扮演的方式为...
DataWorks On Hologres使用说明
类别 描述 相关文档 版本选择 DataWorks基础版服务可满足Hologres开发中基本的数据上云、数据开发与调度生产、简单的数据治理工作，若需获取更专业的数据治理、数据安全解决方案，可选择相应的标准版、专业版、企业版服务。DataWorks标准版...
查看版本
进入节点编辑页面 登录 DataWorks控制台，单击左侧导航栏的 数据建模与开发>数据开发，在下拉框中选择对应工作空间后单击 进入数据开发。进入节点编辑页面。在 数据开发 页面的左侧目录树查找目标节点，双击节点名称即可进入节点编辑页面。...
创建并使用MaxCompute表
权限类别 描述 MaxCompute开发项目权限 DataWorks通过空间级预设角色与开发环境MaxCompute引擎Role的映射关系，让被授予空间角色的RAM用户（子账号）拥有该角色映射的开发引擎权限，默认拥有开发环境对应的引擎项目权限，但无生产环境对应...
创建CDH Spark节点
单击 确认，完成节点创建，后续您可在创建的节点中进行对应任务的开发与配置操作。步骤二：创建并引用CDH JAR资源 您可以在创建的CDH Spark节点中引用JAR包资源，并编写CDH Spark节点代码，通过Spark Submit命令提交任务。具体操作如下：...
创建业务流程
提交业务流程 标准模式工作空间下，数据开发界面仅作为节点任务的开发与测试页面，如果您需要将代码发布到生产环境，您可以批量提交该业务流程下的节点，并进入任务发布界面批量发布该业务流程下的节点项。业务流程设计并完成测试后，单击...
MySQL节点
登录 DataWorks控制台，单击左侧导航栏的 数据建模与开发>数据开发，在下拉框中选择对应工作空间后单击 进入数据开发。创建 业务流程。如果您已有 业务流程，则可以忽略该步骤。鼠标悬停至 图标，选择 新建业务流程。在 新建业务流程 ...
创建EMR Impala节点
登录 DataWorks控制台，单击左侧导航栏的 数据建模与开发>数据开发，在下拉框中选择对应工作空间后单击 进入数据开发。创建 业务流程。如果您已有 业务流程，则可以忽略该步骤。鼠标悬停至 图标，选择 新建业务流程。在 新建业务流程 ...
受众与核心能力
产品定位 DataWorks致力于为数据开发者、数据分析师、数据资产管理者，打造一个具备开放自主开发与全栈数据研发能力的一站式、标准化、可视化、透明化的智能大数据全生命周期云研发平台。DataWorks赋予用户仅通过单一平台，即可实现数据...
创建EMR Hive节点
登录 DataWorks控制台，单击左侧导航栏的 数据建模与开发>数据开发，在下拉框中选择对应工作空间后单击 进入数据开发。创建 EMR Hive 节点。鼠标悬停至 图标，选择 新建节点>EMR>EMR Hive。您也可以找到相应的业务流程，右键单击业务流程，...
创建Hologres内部表
登录 DataWorks控制台，单击左侧导航栏的 数据建模与开发>数据开发，在下拉框中选择对应工作空间后单击 进入数据开发。创建 业务流程。如果您已有 业务流程，则可以忽略该步骤。鼠标悬停至 图标，选择 新建业务流程。在 新建业务流程 ...
创建手动任务
登录 DataWorks控制台，切换至目标地域后，单击左侧导航栏的 数据建模与开发>数据开发，在下拉框中选择对应工作空间后单击 进入数据开发。在 数据开发 页面左侧导航栏选择 手动业务流程。若您界面没有该菜单，请参见 改变布局：定制化展示...
DataWorks On CDP/CDH使用说明
环境准备 一、资源准备 类别 描述 相关文档 版本选择 DataWorks基础版服务可满足 CDP或CDH 基本的数据上云、数据开发与调度生产、简单的数据治理工作，若需获取更专业的数据治理、数据安全解决方案，可选择相应的 标准版、专业版、企业版 ...
创建工作空间
规划工作空间 选择空间模式 DataWorks工作空间分为简单模式与标准模式：简单模式：仅具有生产环境，对应一个引擎项目，无法做到数据权限隔离与开发生产隔离。标准模式：包括开发环境及生产环境，可以分别对应两个引擎项目，更好的做到开发...
建表并上传数据
登录 DataWorks控制台，切换至目标地域后，单击左侧导航栏的 数据建模与开发>数据开发，在下拉框中选择对应工作空间后单击 进入数据开发。在 数据开发 页面，鼠标悬停至 图标，单击 新建表>MaxCompute>表。您也可以打开相应的业务流程，右...
对接使用CDH与CDP
以下简称 CDH）与CDP（Cloudera Data Platform，以下简称CDP）集群对接的能力，在保留CDH集群或CDP集群作为存储和计算引擎的前提下，您可以使用DataWorks的任务开发、调度、数据地图（元数据管理）和数据质量等一系列的数据开发和治理功能...
代码评审
您可通过如下方式进入代码评审页面：在DataStudio页面单击顶部菜单栏左侧的 图标，选择 全部产品>数据开发与运维>代码评审。在目标节点的编辑页面，单击工具栏的 图标进入。查看并处理评审单。在代码评审页面，您可查看名下已发起或参与...
创建EMR Shell节点
登录 DataWorks控制台，单击左侧导航栏的 数据建模与开发>数据开发，在下拉框中选择对应工作空间后单击 进入数据开发。创建 业务流程。如果您已有 业务流程，则可以忽略该步骤。鼠标悬停至 图标，选择 新建业务流程。在 新建业务流程 ...
与Linux实例磁盘空间相关的常见问题
本文主要介绍与Linux实例磁盘空间相关的常见问题。常见问题 说明 阿里云提醒您：如果您对实例或数据有修改、变更等风险操作，务必注意实例的容灾、容错能力，确保数据安全。如果您对实例（包括但不限于ECS、RDS）等进行配置与数据修改，...
创建EMR Spark SQL节点
登录 DataWorks控制台，单击左侧导航栏的 数据建模与开发>数据开发，在下拉框中选择对应工作空间后单击 进入数据开发。创建 EMR Spark SQL 节点。鼠标悬停至 图标，选择 新建节点>EMR>EMR Spark SQL。您也可以找到相应的业务流程，右键单击...
设备协议
“设备采集协议”和“控制下发协议”的SDK包，如下图所示，您可在“开发协议内容”步骤获取示例。您参考示例中提供的SDK使用手册进行操作即可。创建“数据转化协议”时，您可以选择已发布的“数据采集协议”，此时相关参数会自动填充；也...
- 产品推荐
- 这些文档可能帮助您