任务节点人工干预
在拓扑任务中，您可以通过查看单个任务节点的执行状态以快速发现和定位拓扑中的执行问题。您还可以通过对拓扑进行人工干预以控制拓扑任务的执行。任务节点状态 任务节点的生命周期如下：在拓扑任务中，单个任务节点可能处于以下状态之一：...
快速入门
PyODPS可在DataWorks等数据开发平台中作为数据开发节点调用。这些平台提供了PyODPS运行环境和调度执行的能力，无需您手动创建ODPS入口对象。PyODPS支持类似Pandas的快速、灵活和富有表现力的数据结构。您可以通过PyODPS提供的DataFrame API...
周期任务通用运维概述
区域 描述 ① 筛选及搜索区 快捷筛选支持通过输入节点ID或节点名称来筛选周期任务，适用于知晓节点ID或节点名称时进行快捷筛选出所需的周期任务。同时支持勾选我的任务、已暂停任务、空跑调度任务进行快捷筛选。我的任务：当前登录账号的...
周期任务通用运维概述
区域 描述 ① 筛选及搜索区 快捷筛选支持通过输入节点ID或节点名称来筛选周期任务，适用于知晓节点ID或节点名称时进行快捷筛选出所需的周期任务。同时支持勾选我的任务、已暂停任务、空跑调度任务进行快捷筛选。我的任务：当前登录账号的...
赋值节点
原理介绍 在DataWorks中，节点上下文参数可实现节点参数的上下游传递，赋值节点在此基础上，可将赋值节点最后一条查询结果传递给自带的输出参数（outputs），若下游节点依赖了赋值节点，则下游节点可通过添加输入参数的方式，在节点代码中...
PolarDB代理配置与流量异常
PolarDB 集群支持读写分离方式接入业务，但在实际业务场景中，经常出现节点上流量负载不均，可能导致单节点承担大量的流量从而被拖垮，最终造成整个集群雪崩。本文主要描述 PolarDB 代理的配置方法以及流量不均时如何定位处理。数据库代理...
创建CDH Impala节点
在DataWorks中，CDH Impala节点可以编写并执行Impala SQL脚本。与CDH Hive相比，CDH Impala节点为您提供了更快速的查询性能。本文为您介绍如何创建与使用CDH Impala节点。使用限制 不支持 公共调度资源组 运行该类型任务。步骤一：创建CDH ...
功能介绍
删除不可用节点 当您不再使用被 取消导出到蓝图编辑器 的资产节点时，可以单击工具栏中的 删除不可用节点 图标（），删除当前无用节点，并清除该节点的所有交互配置。重要 删除后，节点或连线都将无法恢复，请谨慎操作。搜索节点 单击工具...
计算节点配置说明
弱依赖：若依赖节点运行失败，调度不阻塞，当前节点继续按照计划继续触发执行 下游 说明 在 下游节点 页签中，查看当前节点被哪些节点或者任务依赖，即展示依赖当前节点的其他节点信息。无需配置。节点 依赖当前节点的节点名称。所属工作组...
计算节点配置说明
弱依赖：若依赖节点运行失败，调度不阻塞，当前节点继续按照计划继续触发执行 下游 说明 在 下游节点 页签中，查看当前节点被哪些节点或者任务依赖，即展示依赖当前节点的其他节点信息。无需配置。节点 依赖当前节点的节点名称。所属工作组...
部署Nginx Ingress Controller
您可以在 容器服务管理控制台 集群管理页左侧导航栏中，选择 节点管理>节点池，查看节点池列表，找到对应的云端节点池ID和边缘节点池ID。在云端节点池部署时需设置如下参数：在 service.nodeSelector 配置项中加入云端节点池的Label：...
数据湖集群
因此数据湖集群对每一个节点组增加了最多两个附加安全组，从而可以精细化控制节点组出入端口的规则。另外，EMR数据湖集群将挂载公网功能移到了节点组，这样可以更好的搭配附加安全组实现精细化的对外开放公网的管理。Spark部署 数据湖集群...
数据准备快速入门
连接节点 将输入的数据进行清洗加工，故需要将输入节点、数据加工节点等连接起来，形成任务流。本例中，将分布在两个数据库的订单合并，并进行清洗加工、聚合等操作。合并 输入数据 节点。合并节点用于将数据输入1节点和数据输入2节点中，...
升级ACK Edge集群
支持的升级模式如下：（推荐）控制面和所有云端节点池：系统将自动完成控制面和所有云端节点池的同时升级，后台实际的升级顺序为先升级控制面，再分批升级云端节点池。仅升级控制面：系统将自动完成控制面的升级。控制面升级完成后，您还...
手动升级集群
您可以通过控制台升级集群的Kubernetes版本，也可以独立升级控制面和节点池，灵活控制升级节奏。本文介绍集群升级前后的注意事项、升级流程、操作步骤等。为什么需要升级 ACK保证Kubernetes最新3个 次要版本 的稳定运行。例如，支持...
基础功能
执行该节点的下游节点 从选中节点的下一个节点开始运行工作流。查看数据 查看节点运行后产生的结果数据。模型选项 模型描述：查看模型详情。导出PMML：将组件生成的模型导出到本地。注册新模型：将组件生成的模型注册到模型管理模块，在...
添加外部节点
您在其他云平台完成Quorum节点的创建后，您需要获取到该节点的以下信息：IP：Quorum节点和节点tx-manager的公网IP地址 TMPort：节点tx-manager的服务端口 P2pPort：Quorum节点的P2P通信端口 TMPub：节点tx-manager使用的身份公钥 NodePub：...
流程控制
可通过 多路判断 节点，判断当前的输入值处于哪个范围，进而触发散点颜色的设置。例如在配置项中设置，当数值大于100时，为红色；50~100之间，为黄色；小于50，为蓝色。添加 多路判断 节点至蓝图画布中，可查看 多路判断 节点支持的事件/...
流程控制
可通过 多路判断 节点，判断当前的输入值处于哪个范围，进而触发散点颜色的设置。例如在配置项中设置，当数值大于100时，为红色；50~100之间，为黄色；小于50，为蓝色。添加 多路判断 节点至画布中，可查看 多路判断 节点支持的事件/动作，...
高可用系列
拓扑图 优势 高可用性 高可用系列实例有一个备节点，根据所选 参数模板 的不同，主节点的数据会通过 半同步 或 异步 的方式同步到备节点，当主节点出现故障无法访问时，会自动切换到备节点。高可用系列实例的主备节点可以部署在同一地域里...
历史功能发布记录（2021年）
全部 使用VPC的多路由表功能 节点池支持期望节点数 期望节点数是节点池最新添加的属性，目的是让您以面向终态的视角调整节点池中的节点数。例如设置的期望节点数大于当前节点数，提交后将会触发扩容操作，反之即为缩容操作。扩缩容会根据您...
创建EMR Impala节点
您可以创建EMR（E-MapReduce）Impala节点，对PB级大数据进行快速、实时的交互式SQL查询。前提条件 数据开发（DataStudio）中已创建业务流程。数据开发（DataStudio）基于业务流程对不同开发引擎进行具体开发操作，所以您创建节点前需要先...
多表合并
适用场景 计算链路 计算引擎 是否支持 离线 MaxCompute 是 Hive 是 HiveStorage 是 RDS/MySQL 是 Spark 是 使用说明 来源节点 多表合并算子必须指定2个或者2个以上的 来源节点（又称为输入节点，每个来源节点可视为一张表），以求取这些...
场景1：包含离线同步节点的业务流程，如何配置调度...
DataWorks的离线同步节点不支持通过自动解析自动添加调度依赖，包含离线同步节点的业务流程，如果下游节点依赖离线同步节点产生的表，您需手动添加产出表到离线同步节点的输出中，下游节点查询离线同步节点数据时，自动解析可以通过表快速...
回源概述
回源指您通过客户端请求访问资源时，如果 CDN 节点上未缓存该资源，或者您部署预热任务给 CDN 节点时，CDN 节点会回源站获取资源。您还可以根据业务的实际需要来配置回源相关功能。回源工作原理 客户端发起请求：当用户访问一个网站时，...
创建实例
说明 选择 默认模型 时计算层节点和存储层节点都使用相同的节点规格，选择 自定义模型 时可分别设置计算层节点和存储层节点的规格。节点个数 选择目标规格节点的节点个数。说明 节点个数取值范围为2~99。选择 默认模型 时计算层节点和存储...
添加和管理智能路由类型监听
您可以配置智能路由类型监听，使 全球加速 实例可以自动选择就近或健康的终端节点组进行流量转发，将客户端的网络访问请求送达至最佳终端节点。前提条件 您已经创建了标准型 全球加速 实例。具体操作，请参见 创建和管理标准型全球加速实例...
抢占式实例节点池最佳实践
开启自动伸缩的抢占式节点池在扩容时触发扩容速度更快，对闲置资源的释放更及时。在节点池内实例可弹出情况下，快速的弹出弥补了一部分抢占式节点池被动回收的不足，及时释放闲置资源加强了节省成本的优势。抢占式实例组合的选择和配置 在...
查看应用拓扑图
单击节点连线箭头即可查看节点调用信息。各节点间的连线颜色反应了应用间的调用耗时情况，可以非常直观地看到应用与应用之间的调用状态。拓扑图元素说明 拓扑是对应用间调用关系和依赖关系的可视化展示。链路拓扑图中，每个图标元素代表...
使用场景
阿里云边缘节点服务ENS的目标场景是通过业务、内容、服务的下沉和边缘节点就近处理，以此带来更高性能或更低成本的业务成果。阿里云边缘节点服务ENS使用场景包括但不限于以下场景：全网广覆盖 全网广覆盖场景包括但不限于以下：在线教育 ...
节点弹性大盘
可用节点数：集群中KubeletReady的节点数目，如果与总节点数不一致则说明有些节点处于KubeletNotReady状态，如果这些节点并非正在加入，那有可能是故障，需要特别关注。集群可扩容：集群是否处于可扩容的状态，如果这里显示 NO，表示集群中...
任务配置
将任务节点连线，形成工作流当任务流中包含多个任务节点时，连线上游节点的输出，将自动作为下游节点的输入数据集。保存工作流并发布运行。任务节点说明 下文为您说明各任务节点的配置，您可根据业务需求选择一个或多个节点构建所需任务流...
设置集群参数和节点参数
当主节点发生故障，主节点切换为只读节点后：原主节点角色变为只读节点，原主节点参数保持不变。原只读节点角色变为主节点，原只读节点参数保持不变。当主可用区故障时，备可用区的节点切换为主节点后，备可用区的节点将使用集群参数。注意...
两表并集
适用场景 计算链路 计算引擎 是否支持 离线 MaxCompute 是 Hive 是 HiveStorage 是 RDS/MySQL 是 Spark 是 使用说明 来源节点 两表并集算子必须指定两个 来源节点（又称为输入节点，每个来源节点可视为一张表），以求取这两个 来源节点 的...
节点分组
节点分组是某些拥有共同特性和数据出口的终端节点组合。凭证分配给节点分组后，分组内的节点可使用凭证接入网络。本文介绍创建节点分组、配置数据出口、添加节点...该数据反应的是节点在无线空口的信号信息，例如使用的哪个网络、信号强度等。
集群系列
MySQL集群系列 RDS MySQL集群系列实例采用计算与存储分离、一主多备的架构，支持自动故障切换、任意备节点可切换为主节点、备节点可读、按需增删节点、变更节点配置、多可用区容灾、节点粒度的监控、集群节点拓扑管理等功能，同时还可启用...
模型训练
在节点配置过程中，如果有多个节点都需要使用的一些全局参数，您可以使用全局变量来提高节点配置效率，详情请参见 高级功能：全局变量。通过连线将节点组织构建成模型工作流。拖入多个组件后，画布中即有多个节点。您可以根据规划通过连线...
高可用和容灾设计
可通过集群可读地址访问备节点，在发生故障切换时，RDS的高可用系统会自动执行以下三个步骤：将一个备节点提升为主节点，该备节点从集群可读地址中移除，同时清除该备节点上的可读连接，此时集群可读地址会发生闪断。故障主节点从集群读写...
层级生成器功能介绍
层级树节点 在层级树面板中，每一行即为一个层级节点，每一个节点内有5种节点信息，包括标题、treeID、地理数据、子节点和父节点。说明 标题、地理数据、子节点和父节点这四个信息，可由您自定义配置修改，只有treeID不可手动更改，由层级...
函数计算节点
DataWorks为您提供函数计算节点，您可通过该节点周期性调度处理事件函数，并完成与其他类型节点的集成和联合调度。本文为您介绍如何使用函数计算节点。前提条件 已开通函数计算。您需要先开通函数计算服务后，才可在DataWorks使用函数计算...
- 产品推荐
- 这些文档可能帮助您