配置离线管道调度依赖
Dataphin通过各个节点的调度依赖配置结果，有序的运行业务流程中各个节点，保障业务数据有效、适时地产出。本文为您介绍周期离线管道调度依赖配置说明。操作步骤 请参见，进入离线集成任务 属性 面板。在 调度依赖 区域，配置集成任务 调度...
配置离线任务调度依赖
附录：跨周期依赖默认策略 本节点调度周期 上游节点 上游节点调度周期 上游节点是否自依赖 默认依赖周期 月 本节点（自依赖）- 上周期（前 1 日）周 本节点（自依赖）- 上周期（前 1 日）日 本节点（自依赖）- 上周期（前 1 日）小时...
配置离线任务调度依赖
附录：跨周期依赖默认策略 本节点调度周期 上游节点 上游节点调度周期 上游节点是否自依赖 默认依赖周期 月 本节点（自依赖）- 上周期（前 1 日）周 本节点（自依赖）- 上周期（前 1 日）日 本节点（自依赖）- 上周期（前 1 日）小时...
查看并管理明细汇总表任务
展开子节点 展开物化节点 展开当前逻辑表任务节点的物化节点，可查看该逻辑表任务节点的物化节点名称、物化节点字段和物化代码。查看操作日志 查看当前节点的操作日志。明细及汇总表节点支持的操作 明细及汇总表DAG节点支持的操作与明细及...
磁盘锁定逻辑
计算节点的存储容量决定了 AnalyticDB PostgreSQL版 实例的锁定逻辑，具体锁定逻辑如下：单个计算节点存储容量小于600 GB：实例中任一计算节点存储使用量超过90%则触发锁定。您可以在控制台查看当前实例的最大存储水位，当 实例最大存储...
功能介绍
逻辑节点：在 逻辑节点 面板中，单击 图标或选中拖动到 主画布 中添加节点。并在右侧配置面板中进行配置，详情请参见 配置逻辑节点。在蓝图画布中选中某个节点，右键单击选择 删除选中，可移除该节点。重要 删除节点时，会同时删除选中的...
查看并管理明细及汇总表实例
例如，对某个逻辑表任务节点进行补数据时，需要先了解该逻辑表任务节点归属的物化节点，并对物化节点进行逐一补数据操作，这样补数据操作过程复杂，且无法保障数据一致性。在 逻辑运维视角 下，您只需要选择需要运维的字段或逻辑表实例节点...
查看并管理明细及汇总表实例
例如，对某个逻辑表任务节点进行补数据时，需要先了解该逻辑表任务节点归属的物化节点，并对物化节点进行逐一补数据操作，这样补数据操作过程复杂，且无法保障数据一致性。在 逻辑运维视角 下，您只需要选择需要运维的字段或逻辑表实例节点...
快捷功能
编组收纳 当蓝图中节点间的逻辑较为复杂时，您可以将相似逻辑的节点进行编组，系统将自动生成一个编组框，方便您的查看和使用。您可以使用以下编组功能。添加编组：右键单击画布中的一个或多个节点，选择 添加编组，可生成一个编组框。您...
键值对操作
键值对操作节点封装了KV存储服务API。使用该节点以键值对形式进行数据的写入、获取或删除操作。节点配置 配置项 说明 节点名称 设置节点名称。支持中文汉字、英文字母、数字和下划线（_），长度不超过30个字符。操作类型 可选：KV存储获取 ...
节点部署失败
部署失败排查方法 部署中如果遇到部署失败，您可以进入应用管理中查看部署到第几个节点失败了，例如本案例，用户在部署MySQL节点时即发生了失败，可以在部署正常的最后一个节点的“日志”功能查看具体失败原因。部署失败的常见原因 应用...
时间属性配置说明
依赖关系对任务执行时间的影响 任务定时时间基于单个节点维度定义，但任务实际运行时间与节点依赖的上游节点的定时时间有关，所以即便当前节点的定时时间早于上游节点，当前节点仍需等待上游节点的定时时间到来并且执行成功后，当前节点才...
管理节点标签
您可以通过容器服务控制台对节点进行标签管理，包括批量添加节点标签、通过标签筛选节点和快速删除节点标签。前提条件 已 创建Kubernetes托管版集群。批量添加节点标签 登录 容器服务管理控制台，在左侧导航栏选择 集群。在 集群列表 页面...
流程编排
以下是这些节点的使用方法：Start节点使用说明 LLM节点说明 Script节点使用说明 逻辑节点使用说明 End节点使用说明 画布操作说明 新增节点 每个节点上会显示能创建的节点有哪些类别，点击即可创建一个该类型的新节点。如上图脚本节点可以...
项目内API
使用项目内API节点，可调用该项目下已部署成功的HTTP服务，作为当前业务服务的中间逻辑节点。前提条件 已完成业务服务的创建。详细内容请参见 创建业务服务。节点配置 在业务逻辑编辑页面的 节点 中，选择对应功能节点配置业务流，该节点...
编排逻辑流
在错误链路中添加 显示消息 或其他节点，针对开启了异常处理的节点展示错误原因或执行其他处理逻辑。在错误链路中获取两个预制变量：lastError 和 lastException。在显示消息等后续节点中，选择并处理对应节点的错误。常见错误类型如下：...
自动/手动主备切换
您也可以手动进行主备切换，指定一个只读节点为新的主节点。注意事项 不论是自动切换还是手动切换，当只读节点未开启热备时，主备切换过程中可能会出现20~30秒左右的闪断，因此切换前请务必确保应用具备重连机制；当只读节点开启了热备功能...
如何理解并使用对话工厂
机器人想：判断节点、服务调用、函数节点、赋值节点。机器人回答：回复节点。系统能力：填槽节点。针对节点，页面上可复制粘贴删除，支持Ctrl+C和Ctrl+V、Delete等快捷键。整个画布可以通过拖拽调整布局。右上角是节点的定位，可以快速定位...
如何理解并使用对话工厂
机器人想：判断节点、服务调用、函数节点、赋值节点。机器人回答：回复节点。系统能力：填槽节点。在中间的就是画布，可以通过拖拽进行布局，针对节点可复制粘贴，支持Ctrl+C和Ctrl+V、Delete这样的快捷键。右上角是节点的定位可以一键定位...
管理蓝图资源
逻辑控制 蓝图中进行判断大小、等于、与、或等逻辑节点。数学库 蓝图中引用数学库的节点，包括但不限于随机数、获取二维坐标值、加减乘除等。对象实例 蓝图中进行对象控制的节点，包括但不限于属性、层级、查询和实例化等。常量 蓝图中关于...
提交节点报错：当前节点依赖的父节点输出名不存在
问题现象 提交节点时，系统报错，提示当前节点依赖的父节点输出名不存在。以上图为例，出现此类报错说明，系统无法通过本节点配置的这条 父节点输出名称 的依赖关系，找到产出表 xc_ods_user_info_d_133 的上游节点。说明 出现此报错，说明...
查看及管理任务相关对象
节点类型：支持物理节点和逻辑表节点进行筛选。引用参数：支持根据引用参数进行筛选。节点项目/板块：支持根据下游任务的项目或数据板块进行筛选。调度周期：支持月、周、小时、分钟、日调度周期进行筛选。运维负责人：支持根据运维负责人...
查看及管理任务相关对象
节点类型：支持物理节点和逻辑表节点进行筛选。引用参数：支持根据引用参数进行筛选。节点项目/板块：支持根据下游任务的项目或数据板块进行筛选。调度周期：支持月、周、小时、分钟、日调度周期进行筛选。运维负责人：支持根据运维负责人...
使用DataWorks连接
同时，支持使用资源、函数、以及相关逻辑处理节点开发更多复杂的任务。MaxCompute任务节点包括：ODPS SQL节点、ODPS Spark节点、PyODPS 2节点、PyODPS 3节点、ODPS Script节点、ODPS MR节点。使用场景 数据分析使用场景 数据分析的 SQL查询...
查看并管理脚本实例
对于逻辑表节点，为实例对象最早开始运行的内部物化节点和最晚结束运行的内部物化节点之间的时间差。优先级 实例所属的优先等级。说明 若已开通基线功能，基线任务取所有基线中最高的作为优先级，覆盖原有配置的任务优先级。运维负责人 ...
查看并管理脚本实例
对于逻辑表节点，为实例对象最早开始运行的内部物化节点和最晚结束运行的内部物化节点之间的时间差。优先级 实例所属的优先等级。说明 若已开通基线功能，基线任务取所有基线中最高的作为优先级，覆盖原有配置的任务优先级。运维负责人 ...
管理节点污点
污点可以使Pod排斥一类特定的节点，每个节点上都可以应用一个或多个污点。本文介绍如何批量添加污点和删除污点。前提条件 已创建ACK集群。详细信息，请参见 创建Kubernetes托管版集群。批量添加污点 登录 容器服务管理控制台，在左侧导航栏...
问题汇总
数据库类节点 MySQL节点报错：暂不支持MySQL节点驱动 通用类型节点 For-each，do-while、pai等节点如何在运维中心查看日志 分支节点运行报错：error in your condition run fail FTP Check节点任务，运行报错：None Ftp connection info!...
HTTP请求
每个API有且仅有一个HTTP请求节点，中间逻辑节点可根据业务需要选择其他功能节点，但必须以HTTP返回节点作为终止节点。开发的API可被外部调用，也可用于Web可视化开发。前提条件 已完成业务服务的创建。详细内容请参见 创建业务服务。节点...
公共节点
背景信息 计算节点是用于定义不同数据类型处理逻辑的节点，而公共节点是可组成数据加工场景且能被多次复用的计算节点。公共场景支持计算引擎，提供节点统一定义、版本管理功能，提供在各个数据加工场景中跨存储/计算平台复用的能力，通过...
ListPipelineRunNodeStatus-获取工作流任务节点状态
2 Type string 否 节点类型 Logical 表示逻辑节点，用户提交节点的都是逻辑节点（默认）。Physical 表示物理节点，对应一个执行特定逻辑的容器的运行，逻辑节点在后台运行时会转换为物理节点。Logical 返回参数 名称 类型 描述 示例值 ...
通用开发流程
同时，数据开发（DataStudio）支持使用资源、函数、以及不同的逻辑处理节点开发复杂任务。本文将为您介绍数据开发任务的通用开发流程。前提条件 已绑定所需数据源。详情请参见 开发前准备：绑定数据源或集群。已拥有 开发 角色权限。授权...
废弃公共节点
当公共节点的某个线上版本不再使用时，您可将该线上版本废弃掉。一个节点废弃某个版本后，后续再发布该节点时，废弃过的版本号也不可再使用。本文介绍如何废弃公共节点。前提条件 公共节点已发布了线上版本，并且待废弃的线上版本未被任何...
废弃公共节点
当公共节点的某个线上版本不再使用时，您可将该线上版本废弃掉。一个节点废弃某个版本后，后续再发布该节点时，废弃过的版本号也不可再使用。本文介绍如何废弃公共节点。前提条件 公共节点已发布了线上版本，并且待废弃的线上版本未被任何...
周期任务补数据
对于汇总逻辑表，系统会根据指标的业务相关性原则（引用相同的业务限定或原子指标）、归属同一物化节点的一致性原则，系统提示选中进行补数据的连带字段，提供数据正确性和业务稳定性的保障。例如，指标A和指标B的业务限定相同，当该业务...
数据分析
使用该节点，可调用物联网数据分析的API作为当前服务的中间逻辑功能，并将接口的返回值作为节点的输出。前提条件 已完成业务服务的创建。详细内容请参见 创建业务服务。重要 物联网数据分析接口的每秒请求数（QPS）最大限制为1，所以当业务...
周期任务补数据
对于汇总逻辑表，系统会根据指标的业务相关性原则（引用相同的业务限定或原子指标）、归属同一物化节点的一致性原则，系统提示选中进行补数据的连带字段，提供数据正确性和业务稳定性的保障。例如，指标A和指标B的业务限定相同，当该业务...
查看监控信息
节点不可用数监控 数值 监控如下信息：计算节点掉线数 存储节点掉线数 计算内存使用率%监控如下信息：存储节点最大计算内存使用率 存储节点平均计算内存使用率 计算节点平均计算内存使用率 计算节点最大计算内存使用率 查询 查询QPS 数值 ...
业务逻辑编辑器
业务逻辑开发工具帮助您在业务逻辑编辑器中，通过编排服务节点的方式，快速完成简单的物联网业务逻辑设计。创建业务服务 创建项目。具体操作，请参见 普通项目。在项目 主页，项目开发 下，单击 业务逻辑 页签。单击应用列表上方的 新建>...
分支节点实现特定时间执行任务
分支节点是DataStudio中提供的逻辑控制系列节点之一。本文将为您介绍如何使用分支节点，在特定时间执行任务的方法。分支节点产生背景 Cron表达式无法实现一个节点需要每个月的最后一天执行的场景，分支节点产生后，您可以套用switch-case...
- 产品推荐
- 这些文档可能帮助您