创建CDH Presto节点
数据开发（DataStudio）基于业务流程对不同开发引擎进行具体开发操作，所以您创建节点前需要先新建业务流程，操作详情请参见 创建业务流程。已创建阿里云CDH集群，并注册CDH集群至DataWorks。创建CDH相关节点并开发CDH任务前，您需要先将...
ClickHouse SQL
数据开发（DataStudio）基于业务流程执行不同引擎的具体开发操作，因此，创建节点前需先创建业务流程，操作详情请参见 创建业务流程。已创建EMR ClickHouse或数据库ClickHouse集群，且完成相关准备工作。EMR引擎类型包括新版数据湖...
历史功能发布记录（2021年）
全部 容器网络文件系统CNFS概述 2021年06月 功能名称 功能描述 发布地域 相关文档 集群资源组支持下拉列表选择 支持您在创建集群以及创建节点池时以下拉框的方式选择资源组，集群和ECS节点归属于所选资源组，该方式代替原先在控制台吊顶...
基于模型生成ETL代码
成功创建节点后，DataWorks会根据模型表的信息为您自动生成部分代码框架，后续您可基于此代码框架快速开展数据开发的工作。选择 绑定DataStudio节点：发布至MaxCompute、EMR Hive引擎的表与已有的相应引擎类型的DataStudio节点绑定，您可在...
使用指引
集群运维 应用运维 集群管理 升级集群和独立升级集群控制面和节点池 扩容ACK集群的节点 管理组件 节点维护 添加已有节点 设置节点调度 批量运维节点 节点池管理 创建节点池 调度应用至指定节点池 配置节点池内抢占式实例和存量实例的比例 ...
使用Terraform为节点池指定部署集
通过Terraform为节点池指定部署集 使用以下示例内容，创建节点池并指定部署集。在已有集群中，创建节点池并指定部署集的配置示例如下。provider"alicloud"{ } resource"alicloud_cs_kubernetes_node_pool""test"{ name="tf-deploymentset...
创建业务流程
本文为您介绍如何创建业务流程，在业务流程中创建节点并配置依赖关系。完成创建后，您可以利用数据开发功能，对工作空间的数据进行深入分析和计算。前提条件 开始本操作前，请确保您已经在工作空间中准备好业务数据表 bank_data 和其中的...
API列表
节点管理相关API API 描述 CreateNodeGroup 创建节点分组 DeleteNodeGroup 删除节点分组 UpdateNodeGroup 更新节点分组的信息 GetNodeGroup 获取节点分组详情 ListNodeGroups 获取符合条件的节点分组列表 CountNodeGroups 获取符合条件的...
功能点示例
缓存DOM节点 从DOM检索节点或节点列表时，需要考虑是否可以在后续计算（有时甚至是下一次循环迭代）中重用它们。只要不需要在相关区域添加或删除其他节点，缓存它们便可以提高应用程序的整体效率。避免 DOM 操作 尽可能限制DOM操作。插入...
使用流程参数
已创建节点，配置的流程参数将在节点中使用，替换实际节点中的参数取值。说明 当前仅ODPS SQL、EMR Spark Shell、EMR Spark、EMR Shell、EMR Hive、EMR MR、EMR Presto、EMR Trino、EMR Spark SQL、EMR Spark Streaming、EMR Streaming SQL...
查看版本
createUser 创建节点的用户ID。createTime 创建节点的时间。lastModifyUser 最近一次编辑节点的用户ID。lastModifyTime 最近一次编辑节点的时间。owner 节点责任人的ID。您可以进入 调度配置>基础属性 页面查看，详情请参见 配置基础属性。...
升级节点池
对于操作系统，只要原镜像仍旧为创建节点池所支持，操作系统在升级后就支持版本回退，可以替换为原镜像。取消：在升级到某个阶段您需要取消升级时，您可以单击 取消。单击 取消 后，已完成升级的节点的kubelet和容器运行时在版本升级后不...
创建CDH MR节点
数据开发（DataStudio）基于业务流程对不同开发引擎进行具体开发操作，所以您创建节点前需要先新建业务流程，操作详情请参见 创建业务流程。已创建阿里云CDH集群，并注册CDH集群至DataWorks。创建CDH相关节点并开发CDH任务前，您需要先将...
创建源库为集群版RDS MySQL备节点的实例
前提条件 已为集群系列 RDS MySQL 实例的备节点创建节点直连地址，并确保可以正常连接。更多信息，请参见 查看和管理集群节点直连地址。注意事项 DTS实例运行时，若 RDS集群版备节点 中选择的节点出现异常导致无法连接，DTS会报错并会立即...
快速使用EMR on ACK
说明 推荐您使用节点池的方式来配置专属节点，如果没有节点池，请创建节点池，详情请参见 创建节点池。节点池相关的信息，请参见 节点池概述。OSS Bucket oss-spark-test 选择已有的Bucket，或者在对象存储OSS控制台新建Bucket。集群名称 ...
扩容专属集群节点
示例：2022年03月01日创建节点数为2、订购时长为1个月的DTS专属集群，2022年03月15日对该DTS专属集群进行了节点扩容操作，对于扩容的新节点而言，其费用按当月剩余天数计费，到期时间和已有节点相同，都是在2022年03月31日到期。...
创建EMR Presto节点
数据开发（DataStudio）基于业务流程对不同开发引擎进行具体开发操作，所以您创建节点前需要先新建业务流程，操作详情请参见 创建业务流程。已创建阿里云EMR集群，并注册EMR集群至DataWorks。创建EMR相关节点并开发EMR任务前，您需要先将...
存储多可用区部署的推荐配置
重要 创建节点池时，确保每个节点池对应各自不同的可用区，建议使用节点池名称区分不同的可用区。开启节点池的弹性伸缩功能。具体操作，请参见 节点自动伸缩。多可用区内尽量使用同一类型的ECS资源，或者支持同一种类型块存储的ECS资源。在...
PostgreSQL节点
数据开发（DataStudio）基于业务流程执行不同引擎的具体开发操作，因此，创建节点前需先创建业务流程，操作详情请参见 创建业务流程。已创建PostgreSQL数据源。您需先将您的PostgreSQL数据库创建为DataWorks的PostgreSQL数据源，才可通过该...
Oracle节点
数据开发（DataStudio）基于业务流程执行不同引擎的具体开发操作，因此，创建节点前需先创建业务流程，操作详情请参见 创建业务流程。已创建Oracle数据源。您需先将您的Oracle数据库创建为DataWorks的Oracle数据源，才可通过该数据源访问...
StarRocks
数据开发（DataStudio）基于业务流程执行不同引擎的具体开发操作，因此，创建节点前需先创建业务流程，操作详情请参见 创建业务流程。已创建StarRocks数据源。您需先将您的StarRocks数据库创建为DataWorks的StarRocks数据源，详情请参见 ...
AnalyticDB for MySQL
数据开发（DataStudio）基于业务流程执行不同引擎的具体开发操作，因此，创建节点前需先创建业务流程，操作详情请参见 创建业务流程。已创建AnalyticDB for MySQL数据源并绑定至数据开发（DataStudio）。您需先将您的AnalyticDB for MySQL...
创建实例
若您需要创建节点更多或者节点规格更大的实例，请 联系我们。前提条件 已注册阿里云账号。若尚未注册，请前往 阿里云官网 进行注册。阿里云账户余额大于等于 100 元。操作步骤 登录 HybridDB for MySQL 管理控制台。单击页面右上角的 新建...
创建CDH Spark节点
数据开发（DataStudio）基于业务流程对不同开发引擎进行具体开发操作，所以您创建节点前需要先新建业务流程，操作详情请参见 创建业务流程。已创建阿里云CDH集群，并注册CDH集群至DataWorks。创建CDH相关节点并开发CDH任务前，您需要先将...
创建并使用AnalyticDB for PostgreSQL节点
数据开发（DataStudio）基于业务流程执行不同引擎的具体开发操作，因此，创建节点前需先创建业务流程，操作详情请参见 创建业务流程。已创建AnalyticDB for PostgreSQL数据源并绑定至数据开发（DataStudio）。您需先将您的AnalyticDB for ...
创建并使用PAI Designer
数据开发（DataStudio）基于业务流程对不同开发引擎进行具体开发操作，因此，创建节点前需先新建业务流程，操作详情请参见 创建业务流程。步骤一：创建PAI Designer节点 进入数据开发页面。登录 DataWorks控制台，单击左侧导航栏的 数据...
蚂蚁隐私计算服务平台的审计事件
CreateAntppcDxDecisionBranchNodes 创建节点。CreateAntppcDxDecisionBranchNodesConfig 保存节点的配置。CreateAntppcDxDecisionBranchSubmit 提交或锁定决策分支。CreateAntppcDxDecisionBranchVariable 保存变量。CreateAntppcDxRule ...
SQL Server节点
数据开发（DataStudio）基于业务流程执行不同引擎的具体开发操作，因此，创建节点前需先创建业务流程，操作详情请参见 创建业务流程。已创建SQL Server数据源。您需先将您的SQL Server数据库创建为DataWorks的SQL Server数据源，才可通过该...
创建节点池
在 节点池 页面右上角，单击 创建节点池，然后在 创建节点池 对话框，完成创建节点池的配置项。普通配置 配置项 描述 节点池名称 自定义的节点池名称。托管节点池相关配置 托管节点池 是否开启托管功能。托管节点池是ACK推出的具有操作系统...
新建Flink Vvr Stream类型的公共节点
Flink Vvr Stream节点是流式节点，运行于Flink云计算资源之上，支持对RDS MySQL、Table Store、Hive、Kafka、Hbase、Phoenix、AnalyticDB MySQL和DataHub等类型的数据进行处理。...完成上述参数配置后，单击 图标，创建节点完成。
新建Flink Vvr Stream类型的公共节点
Flink Vvr Stream节点是流式节点，运行于Flink云计算资源之上，支持对RDS MySQL、Table Store、Hive、Kafka、Hbase、Phoenix、AnalyticDB MySQL和DataHub等类型的数据进行处理。...完成上述参数配置后，单击 图标，创建节点完成。
新建Flink DataStream类型的公共节点
Flink DataStream节点是流式节点，运行于Flink云计算资源之上，支持对RDS MySQL、Table Store、Hive、Kafka、Hbase、Phoenix、AnalyticDB MySQL、AnalyticDB_PostgreSQL和DataHub等类型的...完成上述参数配置后，单击 图标，创建节点完成。
新建Flink DataStream类型的公共节点
Flink DataStream节点是流式节点，运行于Flink云计算资源之上，支持对RDS MySQL、Table Store、Hive、Kafka、Hbase、Phoenix、AnalyticDB MySQL、AnalyticDB_PostgreSQL和DataHub等类型的...完成上述参数配置后，单击 图标，创建节点完成。
新建Spark Stream类型的公共节点
Spark Stream节点是流式节点，运行于Spark云计算资源之上，支持对RDS MySQL、Table Store、Hive、Kafka、Hbase、Phoenix、AnalyticDB MySQL、AnalyticDB_PostgreSQL和DataHub等类型的数据...完成上述参数配置后，单击 图标，创建节点完成。
新建Spark Stream类型的公共节点
Spark Stream节点是流式节点，运行于Spark云计算资源之上，支持对RDS MySQL、Table Store、Hive、Kafka、Hbase、Phoenix、AnalyticDB MySQL、AnalyticDB_PostgreSQL和DataHub等类型的数据...完成上述参数配置后，单击 图标，创建节点完成。
新建Flink Vvp Stream类型的公共节点
Flink Vvp Stream节点是流式节点，运行于Flink云计算资源之上，支持对ApsaraDB for RDS、Table Store、Hive、Kafka、Hbase、Phoenix、AnalyticDB MySQL和DataHub Service等类型的数据进行...完成上述参数配置后，单击 图标，创建节点完成。
新建Flink Vvp Stream类型的公共节点
Flink Vvp Stream节点是流式节点，运行于Flink云计算资源之上，支持对ApsaraDB for RDS、Table Store、Hive、Kafka、Hbase、Phoenix、AnalyticDB MySQL和DataHub Service等类型的数据进行...完成上述参数配置后，单击 图标，创建节点完成。
启用节点即时弹性
goatscaler.io/provision-task-id:{task-id} 用于标识 节点即时弹性 扩容节点的任务Task ID，以便您追踪创建节点的触发源。Node Taint Node Taint 说明 goatscaler.io/node-terminating 打上此污点的节点会被 节点即时弹性 执行缩容。Pod ...
创建EMR Shell节点
数据开发（DataStudio）基于业务流程对不同开发引擎进行具体开发操作，所以您创建节点前需要先新建业务流程，操作详情请参见 创建业务流程。已创建阿里云EMR集群，并注册EMR集群至DataWorks。创建EMR相关节点并开发EMR任务前，您需要先将...
通用开发流程
DataWorks将不同类型引擎任务封装为不同节点，通过创建节点来生成数据开发任务。同时，数据开发（DataStudio）支持使用资源、函数、以及不同的逻辑处理节点开发复杂任务。本文将为您介绍数据开发任务的通用开发流程。前提条件 已绑定所需...
- 产品推荐
- 这些文档可能帮助您