DataWorks节点合集
DataWorks的数据开发（DataStudio）模块为您提供多种类型的节点，包括用于数据同步的数据集成节点，用于数据清洗的引擎计算节点（例如，ODPS SQL、Hologres SQL、EMR Hive），以及可对引擎计算节点进行复杂逻辑处理的通用节点（例如，可...
计算资源监控
本文将介绍如何在 PolarDB-X 控制台上查看计算资源监控信息。操作步骤 登录 PolarDB分布式版控制台。在页面左上角选择目标实例所在...查看节点性能监控：单击 节点 页签，从页面中间的下拉框中选择目标节点，并设置查询的时间段，单击 确定。
终端节点监控项
云监控 CMS（Cloud Monitor）可以从终端节点中实时收集监控指标，并生成可视化的时序曲线图。您可以通过监控图表了解终端节点的带宽和包速率状况。本文为您列举终端节点的监控项，包括监控指标、指标含义等相关说明。Metric 监控指标 指标...
性能监控
PolarDB 控制台提供了丰富的性能监控项和秒级监控频率，方便您掌握集群的运行状态并通过细粒度的监控数据快速定位运维问题。性能监控 登录 PolarDB控制台。在控制台左上角，选择集群所在地域。找到目标集群，单击集群ID。在左侧导航栏中，...
性能监控
PolarDB 控制台提供了丰富的性能监控项和秒级监控频率，方便您掌握集群的运行状态并通过细粒度的监控数据快速定位运维问题。性能监控 登录 PolarDB控制台。在控制台左上角，选择集群所在地域。找到目标集群，单击集群ID。在左侧导航栏中，...
创建业务流程
您可以基于业务流程对应引擎分组下的数据开发节点来进行具体的数据清洗工作，例如MaxCompute引擎下的ODPS SQL节点，如果代码开发过程中需要用到资源或函数，DataWorks也支持您通过可视化的方式来创建资源节点、创建函数节点。说明 目前...
全局监控
容器节点池监控 您可以在 容器节点池监控 页签，选择指定节点池，查看节点池的CPU、内存、磁盘和网络资源水位。负载均衡SLB监控 前提条件 已开通PTS服务。更多信息，请参见 开通方式。在对应地域创建Prometheus实例for云服务，并已集成SLB...
监控集群GPU资源最佳实践
GPU监控2.0基于NVIDIA DCGM实现对集群GPU节点的全方位监控。本文介绍如何使用GPU监控2.0监控ACK集群中的GPU资源。前提条件 已创建Kubernetes集群（ACK专有版集群、ACK集群基础版、ACK集群Pro版 或 ACK Edge集群），本文以 ACK集群Pro版 为...
查看监控信息
节点不可用数监控 数值 监控如下信息：计算节点掉线数 存储节点掉线数 计算内存使用率%监控如下信息：计算节点平均计算内存使用率 计算节点最大计算内存使用率 存储节点平均计算内存使用率 存储节点最大计算内存使用率 资源组监控项说明 ...
监控引擎
您可以通过单击监控图示下方的节点名称，设置是否显示该节点的数据，但必须保证图示中至少显示一个节点的数据。将光标悬停在数据图中的某个位置时，将显示3个节点指定时间（分钟粒度）的数据。单击右上角的 图标，可刷新当前监控数据。相关...
监控面板说明
Panel介绍 GPU监控2.0包含集群维度监控大盘和节点维度监控大盘。两种大盘的具体说明如下：集群维度监控大盘 Panel名称 说明 Total GPU Nodes 表示集群（或节点池）总的GPU节点数。Allocated GPUs 表示集群（或节点池）总的GPU数以及已分配...
DescribeDBClusterPerformance-查看实例性能数据
您也可以根据监控指标的高低筛选节点，取值说明：top10：监控指标最高的十个节点。top20：监控指标最高的二十个节点。bottom10：监控指标最低的十个节点。bottom20：监控指标最低的二十个节点。top10 NodeType string 否 节点类型。取值...
自定义高级监控实战
本文以配置节点维度的QPS监控、索引文档数监控以及删除文档数监控为例，为您介绍自定义监控的配置方法。配置节点维度的QPS监控 登录 阿里云Elasticsearch控制台。在左侧导航栏，单击 高级监控报警。在 高级监控报警 页面，复制默认索引QPS...
事件监控
本文介绍如何通过云监控控制台查看边缘节点服务 ENS事件监控。通过事件监控，您可以知晓ENS服务的使用状态，当您的业务出现问题时，也可以通过事件监控快速分析、定位问题。说明 所有事件类报警均按照实例触发，即同一个事件，如果影响三台...
数据开发功能索引
使用节点组：用于跨业务流程引用一批节点，您可以将业务流程内复用率较高的节点组合为一个节点组，以便在其他业务流程中快速复用该节点组（即快速克隆这批节点）。快速创建节点：您可以将数据集成、MaxCompute、E-MapReduce等目录下的节点...
查看监控信息
监控项 说明 单位 CPU使用率 所选中 集群 的所有 节点 CPU使用率。如果扩容集群或其他资源消耗性操作前，您可以从这个图表中找到集群使用率最低的时间。内存使用率 所选中 集群 的所有 节点 内存利用率。内存使用量 所选中 集群的 所有 ...
高级应用：实现复杂作业逻辑
跨节点传参 参数管理 当数据开发的业务流程中，某个下游节点的任务需要获取多个、多级上游节点的输出参数时，您可以使用参数节点，将下游节点需要获取的所有参数统一添加至参数节点中，后续下游节点可直接挂在参数节点之下，即可获取到所有...
边缘运维通道
配置监控边缘节点的非默认端口 业务上云过程中需要迁移原系统中的运维监控方案到云上，实现云下系统到云上的无缝迁移，需要访问边缘节点的非默认端口（即非10250和10255端口）来收集监控数据。以云端访问边缘节点的9051和9052端口为例说明...
查看服务监控和节点状态
E-MapReduce（简称EMR）上的StarRocks集群提供了完善的监控体系，分为服务监控和节点状态两个维度。本文为您介绍如何查看服务监控和节点状态。查看服务监控 进入指标监控页面。登录EMR on ECS控制台。在顶部菜单栏处，根据实际情况选择地域...
使用csi-plugin组件监控节点侧存储资源
容器服务 Kubernetes 版 支持对云盘和NAS存储卷的监控，通过 可观测监控 Prometheus 版 收集指标以监控当前节点侧存储的使用状况。本文介绍如何通过csi-plugin组件监控节点侧存储监控，并举例说明如何配置事件告警。前提条件 仅v1.18.8.46-...
运维中心入门
步骤六：创建自定义监控规则 节点测试验证无误后，您可为节点自定义监控规则，监控节点运行状态。当节点运行出错时DataWorks会根据配置发送相应报警，以便您及时发现并处理异常，保障节点日后可正常调度。进入运维中心。在左侧导航栏单击 ...
for-each节点逻辑原理介绍
each节点是包含内部节点的一种特殊节点，您在创建完成for-each节点时，同时也自动创建完成了三个内部节点：Start节点（循环开始节点）、Shell节点（循环任务节点）、End节点（循环结束判断节点），通过内部节点组织成内部节点流程，实现对...
主线流程
跳转节点 跳转节点主要用于配置主线流程间的串联、对话的挂机、转接等结束动作的节点。参数 说明 机器人话术 跳转前机器人播放话术的内容，最多支持添加4个话术。执行动作 当对话流转到跳转节点时执行的动作，如：挂机、转接、跳转到其他...
创建MTR丢包率报警规则
当您需要实时获知并监控ENS节点网络MTR丢包率数据时，可以通过云监控报警服务进行监控，快速得知网络质量数据异常，以便及时处理问题。背景信息 MTR丢包率是指源节点到所有同运营商节点的平均丢包率。探测规则：源节点每分钟对同运营商的...
指标含义与异常处理建议
ES实例的高级监控报警页面默认仅展示该实例指标数据在Top 20内的节点监控，不建议您在该页面过滤或切换大盘，请单击页面右上角 更多监控，跳转至高级监控控制台获取更多监控指标及相关信息。集群的主要监控指标包含（实际以控制台为准）：...
数据开发常见问题
节点删除、变更相关 为什么在节点A搜索上游节点输出名时，搜索到了节点B不存在的输出名？为什么节点删除报错当前节点存在子节点，下线失败，但是在调度配置界面看已经没有该节点的依赖？跨周期依赖场景 什么情况下配置依赖上一周期的依赖项...
do-while节点最佳实践
do-while循环节点的内部节点获取参数 根据业务需求自定义do-while循环节点的内部业务流程，并在内部流程的节点中通过变量来获取所需参数值。创建并配置赋值节点 核心操作要点为：赋值代码与上下文参数：选择赋值节点的赋值语言，并通过命令...
do-while节点逻辑原理介绍
while节点是包含内部节点的一种特殊节点，您在创建完成do-while节点时，同时也自动创建完成了三个内部节点：Start节点（循环开始节点）、Shell节点（循环任务节点）、End节点（循环结束判断节点），通过内部节点组织成内部节点流程，实现...
查看性能监控指标
PolarDB 控制台提供了丰富的性能监控项和秒级监控频率，方便您掌握集群的运行状态并通过细粒度的监控数据快速定位运维问题。操作步骤 登录 PolarDB控制台。在左侧导航栏单击 集群列表。在左上角，选择集群所在地域。找到目标集群，单击集群...
集群系列
MySQL集群系列 RDS MySQL集群系列实例采用计算与存储分离、一主多备的架构，支持自动故障切换、任意备节点可切换为主节点、备节点可读、按需增删节点、变更节点配置、多可用区容灾、节点粒度的监控、集群节点拓扑管理等功能，同时还可启用...
配置do-while节点
节点组成与流程编排。已了解循环节点内部可通过变量获取循环相关参数。详情请参见 内置变量。已了解循环节点的内部节点中Start节点代表循环开始，End节点用于自行定义循环退出逻辑。详情请参见 退出循环示例：End节点代码样例。已了解循环...
配置for-each节点
遍历节点的内部节点获取参数 根据业务需求自定义for-each遍历节点的内部业务流程，并在内部流程的节点中通过内置变量来获取所需参数值，运行循环遍历任务。内置变量的详情请参见 内置变量，配置详情请参见 配置for-each节点。遍历节点不...
监控引擎
您可以通过单击监控图示下方的节点名称，设置显示或不显示该节点的数据，但必须保证图示中至少显示一个节点的数据。将光标悬停在图示中的某个位置时，将显示3个节点指定时间（分钟粒度）的数据。单击右上角的 图标，可刷新当前监控数据。
监控引擎
您可以通过单击监控图示下方的节点名称，设置显示或不显示该节点的数据，但必须保证图示中至少显示一个节点的数据。将光标悬停在图示中的某个位置时，将显示3个节点指定时间（分钟粒度）的数据。单击右上角的 图标，可刷新当前监控数据。
为什么Redis内存报警与监控的内存使用率不一致
如果 Redis 性能监控与内存告警中的内存使用率不一致，可能是因为您的实例是 集群版，您查看的是实例全局的监控，而不是 数据节点的监控。请确认您收到的告警信息中的实例详情是否写了 nodeId=<实例ID>-db-<数字>。如果是，表示仅<实例ID>-...
配置集群报警
为避免出现集群状态不正常、节点磁盘使用率过高等问题影响Elasticsearch服务，强烈建议您配置监控报警，实时监控集群状态、节点磁盘使用率等信息，及时查收报警通知，提前做好防御措施。本文介绍如何为Elasticsearch实例配置报警，包括一键...
手动创建监控任务
说明 task：现阶段只支持对业务流程下的节点任务进行监控，对于非业务流程下的离散节点（如单独的MaxCompute SQL任务）本阶段暂不支持监控。对应的task的填写格式只能是：业务流程名称.节点任务名称。如果 任务来源 选择 任务中心：填写...
手动创建监控任务
说明 task：现阶段只支持对业务流程下的节点任务进行监控，对于非业务流程下的离散节点（如单独的MaxCompute SQL任务）本阶段暂不支持监控。对应的task的填写格式只能是：业务流程名称.节点任务名称。如果 任务来源 选择 任务中心：填写...
HTTP触发器节点
业务流程创建完成正常运行后，如果您想获取触发器节点的下游任务节点的历史时间段的运行结果，您可参见 执行补数据并查看补数据实例 进行补数据操作。补数据操作时无需外部调度系统下发调度指令，HTTP触发器节点会直接触发下游节点运行，即...
任务调度属性配置概述
当节点为业务流程根节点，或该节点无其他节点依赖时，若您希望快速发布调度任务，可选择设置该节点依赖工作空间根节点。当业务流程包含多个输入或多个输出，或工作空间业务较复杂时，可选择使用 虚拟节点 统筹管理业务流程。例如，通过虚拟...
- 产品推荐
- 这些文档可能帮助您