步骤一：选择节点类型并配置基本属性
根据待处理的数据类型，选择对应的节点类型来处理该类数据。本文介绍如何选择节点类型并配置基本属性。步骤一：选择节点类型 登录企业数据智能平台。在页面左上角，单击 图标，选择 协同。在顶部菜单栏，单击 图标，选择目标工作组，单击 ...
步骤一：选择节点类型并配置基本属性
根据待处理的数据类型，选择对应的节点类型来处理该类数据。本文介绍如何选择节点类型并配置基本属性。步骤一：选择节点类型 登录 数据资源平台控制台。在页面左上角，单击 图标，选择 协同。在顶部菜单栏，单击 图标，选择目标工作组，...
配置基础属性
节点类型 新建数据开发节点时选择的节点类型，不可以修改。责任人 数据开发节点的责任人。默认为当前登录用户，您也可以根据实际需求修改责任人。说明 空间管理员可修改，且仅支持选择当前DataWorks工作空间中的成员为责任人。描述 调度...
拓扑图
拓扑配置 参数 说明 Child节点类型 选择代表子节点类型的字段。Child节点ID 选择代表子节点ID的字段。Parent节点类型 选择代表父节点类型的字段。Parent节点ID 选择代表父节点ID的字段。说明 日志服务拓扑图中已内置13种不同类型的节点图标...
ListFileType
Keyword String 否 ODPS SQL 节点类型的名称。您可以登录DataWorks控制台，进入数据开发界面，在左侧导航栏查看某类型节点的名称。配置说明如下：支持查看中英文名称，但该参数查看的名称语言需要与Locale参数的语言类型一致。支持模糊搜索...
GetTransferableNodes
nodeType String Query 是 WORKER 需要进行数据迁移的节点类型。WORKER表示热节点，WORKER_WARM表示冷节点。返回数据 名称 类型 示例值 描述 RequestId String F99407AB-2FA9-489E-A259-40CF6DCC*请求ID。Result Array of Result 返回结果...
GetSuggestShrinkableNodes
nodeType String Query 是 WORKER 需要缩容的节点类型。可选值如下：WORKER：热节点 WORKER_WARM：冷节点 count Integer Query 是 1 期望获取可缩容节点的数量。ignoreStatus Boolean Query 否 false 是否忽略实例状态，默认为false。返回...
释放公网连接地址
分片集群的节点类型的说明请参见 分片集群架构。释放Shard或ConfigServer节点的连接地址后，对应节点的Primary节点和Secondary节点的公网连接地址均会被释放。在 公网连接 区域，单击目标节点所在行 操作 列的 释放。节点类型 说明 Mongos ...
ValidateShrinkNodes
nodeType String Query 是 WORKER 需要缩容的节点类型，可选值：WORKER：热节点 WORKER_WARM：冷节点 ignoreStatus Boolean Query 否 false 是否忽略集群健康状态：true：忽略 false（默认）：不忽略 count Integer Query 否 2 节点数量。...
新建Elastic Service在线类型的公共节点
Elastic Service是在线服务类型的节点，在线服务指的是一类“常驻”守护型服务，它的使用方式是通过某种远程过程调用RPC（Remote Procedure Call）来提供服务。本文介绍如何新建Elastic Service在线类型的公共节点。背景信息 Elastic ...
ShrinkNode
nodeType String Query 是 WORKER 需要缩容的节点类型，可选值：WORKER：热节点 WORKER_WARM：冷节点 clientToken String Query 否 5A2CFF0E-5718-45B5-9D4D-70B3FF*用于保证请求的幂等性。由客户端生成该参数值，要保证在不同请求间唯一，...
管理蓝图资源
节点类型 触发事件 这个类型是蓝图的核心部分，所有的调度触发起始点都源于这里，这个类型的节点都有比较明显的特征，为绿色的节点。说明 该类型中节点不能重复，例如click，只能触发其中一个，但可以同时触发多个不同的节点，例如click+...
DataWorks节点合集
数据开发（DataStudio）支持的节点合集 数据开发支持的节点类型汇总如下。类型 描述 数据集成同步类节点 DataWorks数据集成支持复杂网络环境下的数据同步，并提供用于离线（批量）数据周期性同步的离线同步节点，与用于单表或整库增量数据...
操作流程
新建开发节点流程图 流程说明 操作 说明 新建开发节点 根据待处理的数据类型，选择对应的节点类型，新建开发节点处理该类数据。具体操作，请参见 步骤一：选择节点类型并配置基本属性。写SQL语句 通过写算法语句或者引用自定义函数处理数据...
操作流程
新建开发节点流程图 流程说明 操作 说明 新建开发节点 根据待处理的数据类型，选择对应的节点类型，新建开发节点处理该类数据。具体操作，请参见 步骤一：选择节点类型并配置基本属性。写SQL语句 通过写算法语句或者引用自定义函数处理数据...
数据开发功能索引
新建节点时，系统会显示最近一次使用的节点类型，单击该类型，即可自动输入最近一次使用的 引擎实例 及 节点类型。如果您需要创建近期使用过的类型节点，则可使用该方式快速创建。新建表 用于快速新建各类型表。新建资源 用于快速新建各类...
配置参数说明
仅当节点类型为Spark Batch、Spark SQL、Elastic Job和MaxCompue MR、Elastic Service、Blink、Blink DataStream、Flink DataStream、Flink Vvp Stream、Flink Vvp Stream、Flink Vvp SQL、Flink Vvr Stream、Flink Vvr SQL、Flink SQL和...
新建Elastic Job类型的公共节点
Elastic Job是离线服务类型的节点，提供“调用一次，执行一次”的离线类任务型服务。本文介绍如何新建Elastic Job类型的公共节点。前提条件 已准备好算法包文件。背景信息 Elastic Job节点运行于Elastic Job类型的云计算资源上，可处理...
降配集群
每次只能变更一种节点类型的配置，同时支持同一类型节点的多种变更。例如支持变更数据节点规格的同时，变更其存储类型。变更节点数后，集群不会自动重新规划分片，可能导致数据在分片上的分配不均匀。分片分配不均的排查方法和解决方案请...
步骤三：配置节点运行配置
针对不能自动解析输入和输出参数的节点类型，当需要了解资产中字段血缘关系时，在配置好输入和输出参数后，单击 字段血缘配置，手动配置输入和输出表的字段映射关系。其中不能自动解析输入和输出参数的节点包括：MaxCompute MR、Hadoop、...
步骤三：配置节点运行配置
针对不能自动解析输入和输出参数的节点类型，当需要了解资产中字段血缘关系时，在配置好输入和输出参数后，单击 字段血缘配置，手动配置输入和输出表的字段映射关系。其中不能自动解析输入和输出参数的节点包括：MaxCompute MR、Hadoop、...
什么是流程编排
连接节点 只有某个节点上出现的节点类型才可以进行拖拽连接，从输出吸盘拖拽到待连接的输入吸盘。一键优化布局 一键优化布局，可以使比较杂乱的画布重新排列，如下图。需要注意的是，优化布局前要将节点进行连接，否则会出现未连线的节点...
释放Mongos节点或Shard节点
根据释放的节点类型，选择对应的操作。释放Mongos节点 在 Mongos列表 区域，单击目标Mongos节点所在行 操作 列的，并选择 释放。释放Shard节点 重要 释放Shard节点前，请确保剩余的Shard节点有足够的存储空间。Shard节点在释放过程中，会将...
任务中心
任务中心对数据资源平台中的数据同步、数据开发、标签加工等任务和实例进行运维管理。...查看补数据计划：支持查看补数据的运行状态、节点类型、业务日期，以及查看对应节点的运维信息，包括实例信息、任务代码、实例日志。
概述
任务中心对 数据资源平台 中的数据同步、数据开发、标签同步、质量评估等任务和实例进行运维管理。...查看补数据计划：支持查看补数据的运行状态、节点类型、业务日期，以及查看对应节点的运维信息，包括实例信息、任务代码、实例日志。
概述
任务中心对 企业数据智能平台 中的数据同步、数据开发、标签同步、质量评估等任务和实例进行运维管理。...查看补数据计划：支持查看补数据的运行状态、节点类型、业务日期，以及查看对应节点的运维信息，包括实例信息、任务代码、实例日志。
ES实例节点配置说明
节点类型 启动参数 数据节点-Enode.attr.box_type=hot 冷数据节点-Enode.attr.box_type=warm 协调节点 协调节点可以分担数据节点的CPU开销，提高处理性能和服务稳定性。如果您的业务是CPU密集型的业务，建议购买协调节点，例如需要进行较多...
各类型节点自动解析场景
节点类型 代码命令 自动解析 调度依赖配置规则 ODPS节点 CREATE INSERT 当节点代码中出现此类输出命令时，会自动为节点添加一条本节点输出配置内容。为节点自动添加的本节点输出命名规则为 odps_project_name.table_name。其中：odps_...
QueryIncidentTracingDetail-获取事件溯源图明细
auto-test-attestor Type string 当前节点的节点类型。取值包括但不限于：process:进程 file:文件 alert:告警 ip:IP 地址 domain:域名 alidetect Time string 当前节点的创建时间。2021-11-26 Timestamp long 当前节点的创建时间戳（unix ...
新建PostgreSQL类型的公共节点
PostgreSQL类型的节点，运行于PostgreSQL类型的云计算资源，支持对PostgreSQL和MaxCompute类型的数据进行处理。本文介绍如何新建PostgreSQL类型的公共节点。前提条件 已新建PostgreSQL类型的云计算资源，具体操作，请参见 新建云计算资源。...
新建PostgreSQL类型的公共节点
PostgreSQL类型的节点，运行于PostgreSQL类型的云计算资源，支持对PostgreSQL和MaxCompute类型的数据进行处理。本文介绍如何新建PostgreSQL类型的公共节点。前提条件 已新建PostgreSQL类型的云计算资源，具体操作，请参见 新建云计算资源。...
ListInnerNodes
调用ListInnerNodes获取内部节点详情，例如查询组合节点、循环节点等节点类型的内部节点，不支持PAI节点的内部节点查询。调试 您可以在OpenAPI Explorer中直接运行该接口，免去您计算签名的困扰。运行成功后，OpenAPI Explorer可以自动生成...
通用开发流程
创建并使用MaxCompute资源 创建和使用EMR资源 步骤四：新建调度节点 DataWorks基于节点进行任务开发，不同类型的引擎任务在DataWorks上被封装为不同类型的节点。您可根据业务需要，选择合适的节点开发引擎任务。同时，支持便捷的节点管理...
ListNodesByOutput
常用的节点类型如下：6（Shell）、10（ODPS SQL）、11（ODPS MR）、23（数据集成）、24（ODPS Script）、99（虚拟节点）、221（PyODPS 2）、225（ODPS Spark）、227（EMR Hive）、228（EMR Spark）、229（EMR Spark SQL）、230（EMR MR）、...
新建Elastic Service在线类型的节点并运行
Elastic Service是在线服务类型的节点，在线服务指的是一类“常驻”守护型服务，它的使用方式是通过某种远程过程调用RPC（Remote Procedure Call）来提供服务。本文介绍如何添加Elastic Service在线类型的节点并运行。背景信息 Elastic ...
新建Hive类型的公共节点
Hive类型的节点是离线节点，运行在Hive云计算资源之上，支持处理Hive、Hbase和Phoenix类型的数据。本文介绍如何新建Hive类型的公共节点。前提条件 已新建Hive类型云计算资源，具体操作，请参见 新建云计算资源。背景信息 Hive节点运行于...
新建Hive类型的公共节点
Hive类型的节点是离线节点，运行在Hive云计算资源之上，支持处理Hive、Hbase和Phoenix类型的数据。本文介绍如何新建Hive类型的公共节点。前提条件 已新建Hive类型云计算资源，具体操作，请参见 新建云计算资源。背景信息 Hive节点运行于...
新建Elastic Service在线类型的节点并运行
Elastic Service是在线服务类型的节点，在线服务指的是一类“常驻”守护型服务，它的使用方式是通过某种远程过程调用RPC（Remote Procedure Call）来提供服务。本文介绍如何添加Elastic Service在线类型的节点并运行。背景信息 Elastic ...
新建AnalyticDB PostgreSQL类型的公共节点
AnalyticDB PostgreSQL类型的节点，运行于AnalyticDB PostgreSQL类型的云计算资源，支持对AnalyticDB PostgreSQL和MaxCompute类型的数据进行处理。本文介绍如何新建AnalyticDB PostgreSQL类型的公共节点。背景信息 已新建AnalyticDB ...
新建AnalyticDB PostgreSQL类型的公共节点
AnalyticDB PostgreSQL类型的节点，运行于AnalyticDB PostgreSQL类型的云计算资源，支持对AnalyticDB PostgreSQL和MaxCompute类型的数据进行处理。本文介绍如何新建AnalyticDB PostgreSQL类型的公共节点。背景信息 已新建AnalyticDB ...
- 产品推荐
- 这些文档可能帮助您