手动扩容集群
E-HPC集群支持手动扩容，当业务发展导致集群计算节点的资源不足...您可以单击 资源管理>节点与队列，在集群列表中选择扩容的集群，在 节点类型 列表中选择 计算节点，即可查看已扩容节点的状态。当该节点状态为 运行中，说明扩容集群已完成。
ES实例节点配置说明
节点类型 启动参数 数据节点-Enode.attr.box_type=hot 冷数据节点-Enode.attr.box_type=warm 协调节点 协调节点可以分担数据节点的CPU开销，提高处理性能和服务稳定性。如果您的业务是CPU密集型的业务，建议购买协调节点，例如需要进行较多...
配置基础属性
节点类型 新建数据开发节点时选择的节点类型，不可以修改。责任人 数据开发节点的责任人。默认为当前登录用户，您也可以根据实际需求修改责任人。说明 空间管理员可修改，且仅支持选择当前DataWorks工作空间中的成员为责任人。描述 调度...
计算节点配置说明
节点类型 节点的类型。版本说明 节点的版本说明，支持用户自定义。节点描述 节点的描述性信息，方便用户理解和查找。作业类型 包含SQL和算法包类型。模态 节点的模态，用于识别节点实际运行环境，可快速切换模态或者新建模态。仅当节点为...
计算节点配置说明
节点类型 节点的类型。版本说明 节点的版本说明，支持用户自定义。节点描述 节点的描述性信息，方便用户理解和查找。作业类型 包含SQL和算法包类型。模态 节点的模态，用于识别节点实际运行环境，可快速切换模态或者新建模态。仅当节点为...
ListFileType
调用ListFileType查询任务节点的类型信息，包括类型Code和类型名称。调试 您可以在OpenAPI Explorer中直接运行该接口，免去您计算签名的困扰。运行成功后，OpenAPI Explorer可以自动生成SDK代码示例。请求参数 名称 类型 是否必选 示例值 ...
管理工作流
默认情况下，系统会根据路径所对应的任务推测工作流节点的类型。节点名称 自定义节点的名称。会根据任务源自动补齐名称。上游节点 工作流节点的上游节点。上游节点必须是在当前工作流中已创建的节点。首个节点可以不需要设置上游节点。重试...
节点池概述
节点池是集群中一个或一组节点的逻辑集合，一个集群中可以创建多个不同配置和类型的节点池。节点池的配置包含节点的属性，例如节点规格、可用区、标签、污点等。这些属性可以在创建节点池时指定，也可以在创建完成后进行编辑修改。关于创建...
释放公网连接地址
分片集群的节点类型的说明请参见 分片集群架构。释放Shard或ConfigServer节点的连接地址后，对应节点的Primary节点和Secondary节点的公网连接地址均会被释放。在 公网连接 区域，单击目标节点所在行 操作 列的 释放。节点类型 说明 Mongos ...
GetTransferableNodes
调用GetTransferableNodes，指定节点类型和个数，获取可进行数据迁移的节点。调试 您可以在OpenAPI Explorer中直接运行该接口，免去您计算签名的困扰。运行成功后，OpenAPI Explorer可以自动生成SDK代码示例。请求头 该接口使用公共请求头...
GetSuggestShrinkableNodes
指定节点类型和数量，获取可缩容的节点。调试 您可以在OpenAPI Explorer中直接运行该接口，免去您计算签名的困扰。运行成功后，OpenAPI Explorer可以自动生成SDK代码示例。请求头 该接口使用公共请求头，无特殊请求头。请参见公共请求参数...
各类型节点的调度参数配置示例
SQL类型节点及离线同步节点 SQL类型节点及离线同步节点的调度参数配置与多数类型节点的配置相似，可供多数节点参考使用。本文以ODPS SQL节点为例，为您展示如何为系统内置变量及自定义参数赋值，并在代码中进行调用。说明 部分节点可能不...
各类型节点自动解析场景
节点类型 代码命令 自动解析 调度依赖配置规则 ODPS节点 CREATE INSERT 当节点代码中出现此类输出命令时，会自动为节点添加一条本节点输出配置内容。为节点自动添加的本节点输出命名规则为 odps_project_name.table_name。其中：odps_...
新建Elastic Job类型的公共节点
Elastic Job是离线服务类型的节点，提供“调用一次，执行一次”的离线类任务型服务。本文介绍如何新建Elastic Job类型的公共节点。前提条件 已准备好算法包文件。背景信息 Elastic Job节点运行于Elastic Job类型的云计算资源上，可处理...
步骤三：配置节点运行配置
当节点类型为Spark Batch、Spark SQL、Elastic Job和MaxCompue MR、Elastic Service、Blink、Blink DataStream、Flink DataStream、Flink Vvp Stream、Flink Vvp Stream、Flink Vvp SQL、Flink Vvr Stream、Flink Vvr SQL、Flink SQL和...
步骤三：配置节点运行配置
当节点类型为Spark Batch、Spark SQL、Elastic Job和MaxCompue MR、Elastic Service、Blink、Blink DataStream、Flink DataStream、Flink Vvp Stream、Flink Vvp Stream、Flink Vvp SQL、Flink Vvr Stream、Flink Vvr SQL、Flink SQL和...
管理节点组
删除节点组 重要 当Task或Core类型的节点组的 状态 为 运行中，且 节点数量 为0时，可以删除节点组。在 节点管理 页面，单击目标节点组操作列的 删除节点组。在弹出的对话框中，单击 删除。成本优化模式 该模式下，您可以制定更详细的成本...
ListInnerNodes
调用ListInnerNodes获取内部节点详情，例如查询组合节点、循环节点等节点类型的内部节点，不支持PAI节点的内部节点查询。调试 您可以在OpenAPI Explorer中直接运行该接口，免去您计算签名的困扰。运行成功后，OpenAPI Explorer可以自动生成...
降配集群
每次只能变更一种节点类型的配置，同时支持同一类型节点的多种变更。例如支持变更数据节点规格的同时，变更其存储类型。变更节点数后，集群不会自动重新规划分片，可能导致数据在分片上的分配不均匀。分片分配不均的排查方法和解决方案请...
输入节点
运行配置 运行配置用于设置输入节点的云计算资源和源数据表，关键参数说明如下：参数 说明 云计算资源类型 节点的数据源类型，可选值包括 MaxCompute、AnalyticDB for RDS、AnalyticDB MySQL、Table Store、DataHub Service、Phoenix、...
输入节点
运行配置 运行配置用于设置输入节点的云计算资源和源数据表，关键参数说明如下：参数 说明 云计算资源类型 节点的数据源类型，可选值包括 MaxCompute、AnalyticDB for RDS、AnalyticDB MySQL、Table Store、DataHub Service、Phoenix、...
数据开发功能索引
按节点类型查找：您可以单击 图标，通过筛选节点类型，查找指定类型的所有节点。指定节点类型后，则目录树将仅展示当前工作空间中该类型的节点。说明 您还可以根据业务需求选择是否需要 隐藏引擎实例 及 隐藏节点类型文件夹，隐藏后，目录...
新建PostgreSQL类型的公共节点
PostgreSQL类型的节点，运行于PostgreSQL类型的云计算资源，支持对PostgreSQL和MaxCompute类型的数据进行处理。本文介绍如何新建PostgreSQL类型的公共节点。前提条件 已新建PostgreSQL类型的云计算资源，具体操作，请参见 新建云计算资源。...
新建PostgreSQL类型的公共节点
PostgreSQL类型的节点，运行于PostgreSQL类型的云计算资源，支持对PostgreSQL和MaxCompute类型的数据进行处理。本文介绍如何新建PostgreSQL类型的公共节点。前提条件 已新建PostgreSQL类型的云计算资源，具体操作，请参见 新建云计算资源。...
新建Hive类型的公共节点
Hive类型的节点是离线节点，运行在Hive云计算资源之上，支持处理Hive、Hbase和Phoenix类型的数据。本文介绍如何新建Hive类型的公共节点。前提条件 已新建Hive类型云计算资源，具体操作，请参见 新建云计算资源。背景信息 Hive节点运行于...
新建Hive类型的公共节点
Hive类型的节点是离线节点，运行在Hive云计算资源之上，支持处理Hive、Hbase和Phoenix类型的数据。本文介绍如何新建Hive类型的公共节点。前提条件 已新建Hive类型云计算资源，具体操作，请参见 新建云计算资源。背景信息 Hive节点运行于...
配置离线管道调度
调度配置用于定义周期性调度类型的离线管道任务在调度过程中的调度规则。本文为您介绍如何配置周期性离线管道调度配置。背景信息 依赖关系是两个或多个节点之间的语义连接关系，同时上游节点的状态将影响其他下游节点的运行状态。配置了...
配置离线管道调度
调度配置用于定义周期性调度类型的离线管道任务在调度过程中的调度规则。本文为您介绍如何配置周期性离线管道调度配置。背景信息 依赖关系是两个或多个节点之间的语义连接关系，同时上游节点的状态将影响其他下游节点的运行状态。配置了...
新建AnalyticDB PostgreSQL类型的公共节点
AnalyticDB PostgreSQL类型的节点，运行于AnalyticDB PostgreSQL类型的云计算资源，支持对AnalyticDB PostgreSQL和MaxCompute类型的数据进行处理。本文介绍如何新建AnalyticDB PostgreSQL类型的公共节点。背景信息 已新建AnalyticDB ...
新建AnalyticDB PostgreSQL类型的公共节点
AnalyticDB PostgreSQL类型的节点，运行于AnalyticDB PostgreSQL类型的云计算资源，支持对AnalyticDB PostgreSQL和MaxCompute类型的数据进行处理。本文介绍如何新建AnalyticDB PostgreSQL类型的公共节点。背景信息 已新建AnalyticDB ...
数据开发
支持在开发环境场景中新建计算节点，配置计算节点的各类参数及离线计算节点的调度信息。支持在开发环境场景中新建系统节点，并配置系统节点的配置信息。支持通过可视化方式配置上下游计算节点的依赖关系，并配置输入、输出参数的对应关系。...
功能简介
支持在开发场景中新建计算节点，配置计算节点的各类参数及离线计算节点的调度信息。支持在开发场景中新建系统节点，并配置系统节点的配置信息。支持通过可视化方式配置上下游计算节点的依赖关系，并配置输入、输出参数的对应关系。支持根据...
离线任务调度属性配置
跨节点参数判断类型 跨节点参数判断类型可以通过参数类型的取值进行判断。包括文本类型和数值类型。文本类型：支持文本类型 是 或 不是 进行判断。数值类型：支持数值类型的运算符比较，包括=、!示例说明 业务日期以2022-12-06为...
功能简介
支持在开发场景中新建计算节点，配置计算节点的各类参数及离线计算节点的调度信息。支持在开发场景中新建系统节点，并配置系统节点的配置信息。支持通过可视化方式配置上下游计算节点的依赖关系，并配置输入、输出参数的对应关系。支持根据...
离线任务调度属性配置
跨节点参数判断类型 跨节点参数判断类型可以通过参数类型的取值进行判断。包括文本类型和数值类型。文本类型：支持文本类型 是 或 不是 进行判断。数值类型：支持数值类型的运算符比较，包括=、!示例说明 业务日期以2022-12-06为...
新建Elastic Job类型的公共节点
Elastic Job是离线服务类型的节点，提供“调用一次，执行一次”的离线类任务型服务。本文介绍如何新建Elastic Job类型的公共节点。前提条件 已准备好算法包文件。背景信息 Elastic Job节点运行于Elastic Job类型的云计算资源上，可处理...
升配集群
规格升配 每次只能变更一种节点类型（数据节点、冷数据节点、协调节点、专有主节点、Kibana节点、弹性节点）的规格配置。说明 如果您需要减少数据节点个数，可通过缩容数据节点功能实现。具体操作方法和限制，请参见 缩容集群数据节点。...
配置节点上下文
注意事项 节点上下文参数仅用于上游节点的 节点上下文 输出参数作为下游节点的 节点上下文 输入参数，无法直接将上游节点的查询结果传递到下游，如果您需要将上游节点的查询结果传递到下游节点，可以使用赋值节点，详情可参见文档：赋值...
释放Mongos节点或Shard节点
根据释放的节点类型，选择对应的操作。释放Mongos节点 在 Mongos列表 区域，单击目标Mongos节点所在行 操作 列的，并选择 释放。释放Shard节点 重要 释放Shard节点前，请确保剩余的Shard节点有足够的存储空间。Shard节点在释放过程中，会将...
nodepool
1 interconnect_mode string 边缘节点池的网络类型，该值只对 type 为 edge 类型的节点池有意义，取值范围：basic：基础型。private:专用型。1.22 及以上版本支持。basic interconnect_config object【该字段已废弃】边缘节点池配置。cen_...
- 产品推荐
- 这些文档可能帮助您