DataWorks节点合集

DataWorks的数据开发(DataStudio)模块为您提供多种类型的节点,包括用于数据同步的数据集成节点,用于数据清洗的引擎计算节点(例如,ODPS SQL、Hologres SQL、EMR Hive),以及可对引擎计算节点进行复杂逻辑处理的通用节点(例如,可...

移除节点

如果节点池设置了期望节点数,那么节点池为了能够将节点个数维持在期望节点数,会根据相应节点池配置自动扩容其他实例至节点池,以达到期望节点数。操作步骤 登录 容器服务管理控制台,在左侧导航栏选择 集群。在 集群列表 页面,单击目标...

节点异常问题排查

本文目录 类别 内容 诊断流程 诊断流程 常见排查方法 节点故障诊断 检查节点的详情 检查节点的状态 检查节点的事件 检查节点的诊断日志 检查节点的关键组件 检查节点的监控 检查节点的安全组 常见问题及解决方案 节点关键组件异常处理 ...

创建和管理终端节点

终端节点(Endpoint)由服务使用方创建和维护,可以与终端节点服务相关联,从而建立通过 PrivateLink 私网访问外部服务的网络连接。一个终端节点只能关联一个终端节点服务,本文为您介绍如何创建和管理终端节点。背景信息 私网连接 能够...

AttachEnsInstances-加入容器集群

400 InstanceIdNotFound The input parameter instancdId that is not found.-400 ServiceConfigInvalid The specified InstanceType is not support.-400 NoPermission Permission denied.没有足够的权限,请联系云账号管理员授予您相应...

节点异常问题排查

本文目录 类别 内容 诊断流程 诊断流程 常见排查方法 节点故障诊断 检查节点的详情 检查节点的状态 检查节点的事件 检查节点的诊断日志 检查节点的关键组件 检查节点的监控 检查节点的安全组 常见问题及解决方案 节点关键组件异常处理 ...

归并节点

本文为您介绍归并节点的概念,以及如何新建归并节点、定义归并逻辑,并通过实践案例为您展示归并节点的调度配置和运行详情。背景信息 归并节点是DataStudio中提供的逻辑控制系列节点中的一类,可以对上游节点的运行状态进行归并,用于解决...

参数节点

参数节点是一种特殊的虚拟节点,用于管理业务流程中的参数和实现参数在任务节点中传递,支持常量参数、变量参数和透传上游节点的参数,需要引用参数的节点直接依赖参数节点即可。本文为您介绍如何创建参数节点,引导您高效使用DataWorks...

ModifyInstanceAttribute-修改实例属性

400 InstanceIdNotFound The input parameter InstanceId that is not found.-400 InvalidParameter.%s The specified field%s invalid.Please check it again.-400 NoPermission Permission denied.没有足够的权限,请联系云账号管理员...

DeleteSnapshot-删除快照

473469C7-AA6F-4DC5-B3DB-A3DC0DE3C83E 示例 正常返回示例 JSON 格式 {"RequestId":"473469C7-AA6F-4DC5-B3DB-A3DC0DE3C83E"} 错误码 HTTP status code 错误码 错误信息 描述 400 INSTANCE_ID_NOT_FOUND The input parameter instancdId ...

删除节点

索引 节点节点释放规则 操作步骤 常见问题 节点节点释放规则 删除节点池时,节点池是否开启了期望节点数,将影响节点的释放行为。开启期望节点数的节点节点池内所有按量付费的节点将会被释放,包年包月的节点不会被释放。如果需要...

配置for-each节点

DataWorks为您提供遍历节点(for-each节点),您可以通过for-each节点来循环遍历赋值节点传递的结果集。同时您也可以重新编排for-each节点内部的业务流程。本文以一个具体示例,通过for-each节点2次循环遍历赋值节点输出结果,并在每次循环...

新建开发环境场景并运行

说明 在搭建节点流程的过程中,如果上游节点和下游节点需要连线(即上游节点的输出数据要作为下游节点的输入数据),则要求上游节点的输出数据与下游节点的输入数据的数据格式和云计算资源类型必须一致,任意结构(星号(*))和为空的除外...

新建开发环境场景并运行

说明 在搭建节点流程的过程中,如果上游节点和下游节点需要连线(即上游节点的输出数据要作为下游节点的输入数据),则要求上游节点的输出数据与下游节点的输入数据的数据格式和云计算资源类型必须一致,任意结构(星号(*))和为空的除外...

托管节点池概述

如果您希望将节点进行分组纳管,同时降低节点的运维负担,例如操作系统(OS)CVE漏洞自动修复、kubelet自动升级、节点故障时重启节点等,您可以启用托管节点池。托管节点池是ACK推出的自动化运维型节点池,在普通节点池的基础上支持多种...

节点诊断

容器智能运维平台 提供节点诊断功能,帮助您诊断集群中存在异常的节点。本文介绍节点诊断对应的检查项以及修复方案。容器智能运维平台 构建了基于专家经验的故障诊断系统,并基于海量数据训练了AI智能故障诊断模型。基于专家经验和AI智能...

StopLoadBalancerListener-停止监听

400 ListenerNotFound The input parameter listener that is not found.-400 IncorrectListenerStatus The current status of the resource does not support this operation.-400 TooManyListeners More than 1 listener is found,please...

设备输入

本文介绍在蓝图编辑器中,配置输入设备类节点的方法。目前输入设备内的逻辑节点只包括键盘。键盘 键盘 节点用于监听键盘设备。使用场景:键盘 节点用于需要键盘参与交互的场景。例如,使用上下左右方向键控制一张图片的移动。添加 键盘 ...

数据开发

开发环境节点 支持节点任务类目的新建、编辑和删除以及支持离线、在线和流式节点注册,对节点脚本、自定义函数、节点输入、节点输出、节点变量进行配置和管理以及支持配置节点的依赖关系以及支持节点任务的部署、运行和上线。支持节点任务...

节点部署架构

PolarDB 集群版 的主可用区内包含了多个节点(计算节点),其中一个节点是主节点,其他节点为只读节点。使用限制 仅 PolarDB 集群版 支持多节点。更多关于产品系列的功能对比,请参见 企业版产品系列。多节点架构 每个 PolarDB 集群都包含...

CreateFileSystem-创建文件系统

nasFile EnsRegionId string 是 节点 ID。cn-suzhou-telecom StorgeType string 是 存储类型,取值:capacity。capacity ProtocolType string 是 存储协议。取值:nfs/smb。nfs NetworkId string 是 VPC 网络的 ID 号。vpc-xxx ...

功能简介

开发节点 支持节点任务类目的新建、编辑和删除以及支持离线节点、在线和流式节点注册,对节点脚本、自定义函数、节点输入、节点输出、节点参数进行配置和管理以及支持配置节点的依赖关系以及支持节点任务的运行和上线。支持节点任务类目的...

DeleteLoadBalancerListener-删除监听

400 ListenerNotFound The input parameter listener that is not found.-400 IncorrectListenerStatus The current status of the resource does not support this operation.-400 TooManyListeners More than 1 listener is found,please...

依赖关系

这样自动解析可以根据唯一的输出找到唯一的节点挂上节点依赖关系,所以如果实际场景有多个节点产出数据至同一张表,那么需要确定下游节点自动解析这张表时应该挂哪个节点依赖(哪个节点最晚写入这张表数据,确保下游节点取数无问题即可),...

扩缩容节点

容器服务ACK通过调整节点池的期望节点数实现节点池扩缩容,将节点数目维持在期望数量。扩容节点池保证节点数量足够支撑业务运行,缩容节省成本。扩缩容节点池均可自动化执行,提升了运维效率。本文介绍如何扩缩容节点池。前提条件 已创建...

MongoDB只读节点简介

只读节点与从节点的区别 节点 说明 适用场景 只读节点(ReadOnly)只读节点具有高可用保障,即某个只读节点故障时,系统会自动将其与隐藏节点切换,若未自动切换,您可以自行切换,只读节点的连接地址保持不变。说明 如何切换只读节点和...

删除或变更节点输出的影响

注意事项 若本节点存在下游依赖,删除本节点节点输出:当下游仅存在一个父节点依赖,可能会导致下游节点成为 孤立节点 不能正常调度。当下游节点还未形成依赖,导致早于上游节点产出表数据,从而产生数据质量问题。因此,存在输出变更的...

分支节点实现特定时间执行任务

分支节点与其它控制节点 在 数据开发 页面,您可以看到当前版本的DataWorks支持的赋值节点、分支节点和归并节点等控制节点。各类型控制节点的作用如下:赋值节点:您可以通过赋值节点把自己的结果传给下游,详情请参见 赋值节点。赋值节点...

增加或删除节点

新增的只读节点的CPU规格与主节点CPU规格对应规则如下:主节点CPU规格(core)允许只读节点最小CPU规格(core)2 2 4 4 8 4 16 8 32 16 64 32 88 32 节点高可用切换不支持切换到和主节点规格不一致的只读节点节点费用 增加节点时的计费...

功能简介

开发节点 支持节点任务类目的新建、编辑和删除以及支持离线节点、在线和流式节点注册,对节点脚本、自定义函数、节点输入、节点输出、节点参数进行配置和管理以及支持配置节点的依赖关系以及支持节点任务的运行和上线。支持节点任务类目的...

增加或删除节点

新增的只读节点的CPU规格与主节点CPU规格对应规则如下:主节点CPU规格(core)允许只读节点最小CPU规格(core)2 2 4 4 8 4 16 8 32 16 64 32 88 32 同一集群中,确保至少有一个只读节点与主节点规格保持一致。开启热备 后的只读节点需要与...

查看节点详情

节点中可用实例数量的比重(x)节点状态颜色 说明 x=1 绿色 节点可用 1/3黄色 节点部分可用 x≤1/3 红色 节点不可用 节点基本配置 在 基本配置 区域中,您可以查看以下信息:节点环境:当前节点的环境。节点名称:当前节点的名称,可编辑。...

移除节点

如果节点池设置了期望节点数,那么节点池为了能够将节点个数维持在期望节点数,会根据相应节点池配置自动扩容其他实例至节点池,以达到期望节点数。操作步骤 登录 容器服务管理控制台,在左侧导航栏选择 集群。在 集群列表 页面,单击目标...

API概览

终端节点连接 API 标题 API概述 EnableVpcEndpointConnection 接受终端节点连接请求 调用EnableVpcEndpointConnection接口,终端节点服务接受终端节点的连接请求。UpdateVpcEndpointConnectionAttribute 修改终端节点连接的属性 调用...

高级应用:实现复杂作业逻辑

使用DataWorks周期性调度MaxCompute作业时,您也可以灵活使用DataWorks已有的通用节点,例如虚拟节点、分支和归并节点、循环类节点等,与MaxCompute的其他节点联合使用可实现更复杂的业务效果,本文为您概要介绍常用的通用节点和典型应用...

托管节点节点自动恢复

托管节点池自动监控节点状态,确保节点正常运行。当节点发生异常时,ACK会自动执行恢复操作。将节点池设置为托管模式会为所有节点同时开启自动恢复功能。本文介绍节点自动恢复的应用场景和处理流程。前提条件 已创建托管节点池或开启托管...

读写分离架构

代理节点(Proxy server)客户端和代理节点建立连接后,代理节点会自动识别客户端发起的请求类型,按照权重分发流量(各节点权重相同,且不支持自定义权重),将请求转发到不同的数据节点中。例如将写请求转发给主节点,将读请求转发给主...

节点节点池FAQ

本文为您介绍节点节点池常见问题。例如,如何更改节点的Pod数量,如何更换节点池的OS镜像,如何解决节点相关timeout问题等。如何更换节点池OS镜像?是否支持关闭期望节点数功能?开启期望节点数与未开启期望节点数的节点池有什么不同?...

读写分离版

代理节点(Proxy server)客户端和代理节点建立连接后,代理节点会自动识别客户端发起的请求类型,按照权重分发流量(各节点权重相同,且不支持自定义权重),将请求转发到不同的数据节点中。例如将写请求转发给主节点,将读请求转发给主...

for-each节点逻辑原理介绍

节点组成与流程编排 DataWorks的for-each节点是包含内部节点的一种特殊节点,您在创建完成for-each节点时,同时也自动创建完成了三个内部节点:Start节点(循环开始节点)、Shell节点(循环任务节点)、End节点(循环结束判断节点),通过...
共有200条 < 1 2 3 4 ... 200 >
跳转至: GO
产品推荐
云服务器 安全管家服务 安全中心
这些文档可能帮助您
边缘节点服务 ENS 物联网平台 CDN 安全加速 SCDN (文档停止维护) 钉钉会议 弹性公网IP
新人特惠 爆款特惠 最新活动 免费试用