周期实例通用运维概述
区域 描述 ① 搜索及筛选区 支持通过输入节点ID或节点名称来筛选周期实例，适用于知晓节点ID或节点名称时进行快捷筛选出所需的周期实例。同时支持勾选我的实例、失败实例、未完成实例或通过业务日期进行快捷筛选。我的实例：当前登录账号所...
运维中心入门
当前节点及下游节点 用于对当前节点及下游节点进行批量补数据操作，通常在当前节点的下游节点数量较少时使用该功能，支持指定部分下游节点。海量节点模式 用于对当前节点及下游节点进行批量补数据操作，通常在当前节点的下游节点数量较多时...
使用节点组
节点组用于将业务流程内复用率较高的节点进行组合，生成一个节点组，生成的节点组可在其他业务流程中直接引用，引用后该业务流程中即可快速批量克隆节点组内的节点，克隆时节点组中各节点的配置信息保持不变。本文为您介绍如何新建、引用、...
集群高可用架构推荐配置
普通节点或虚拟节点：ACK集群支持普通节点（ECS节点）和虚拟节点。节点负责执行实际的工作负载和提供运行容器所需的资源。ACK集群默认提供了多可用区（Availability Zone，AZ）的高可用集群部署架构。以 ACK托管集群 为例，集群架构示例...
节点伸缩概述
当Pod由于调度资源不足而处于Pending状态时，节点伸缩会开始模拟调度，计算在开启弹性的节点池中哪个节点池弹出节点后可容纳这些Pending Pod，并在满足需求时弹出相应的节点。说明 模拟调度将一个开启弹性的节点池当成一个抽象节点，开启...
执行补数据并查看补数据实例（旧版）
选择需要补数据的节点 区域为您展示的是当前节点及其包含的所有下游节点（包含下游节点的子节点），您可选择当前节点及其下游节点的部分或全部节点任务（包含当前节点）进行补数据。海量节点模式补数据 选择当前节点及下游节点作为本次补...
历史功能发布记录（2020年及之前）
全部 无 2020年11月 功能名称 功能描述 发布地域 相关文档 托管节点池发布 托管节点池是ACK全新推出的具有自动升级、节点自愈能力的免运维型节点池，为您提供统一的、全托管的节点生命周期管理。您无需关心节点运维操作，如节点组件版本...
依赖节点
当计算节点的运行依赖某些其他节点时，系统支持在场景运行开始时，设置节点的依赖节点。本文介绍依赖节点的配置参数说明。依赖配置 依赖节点 关键参数说明如下：参数 说明 依赖类型 自定义节点依赖：依赖所属工作区：可选择依赖所属工作区...
依赖节点
当计算节点的运行依赖某些其他节点时，系统支持在场景运行开始时，设置节点的依赖节点。本文介绍依赖节点的配置参数说明。依赖配置 依赖节点 关键参数说明如下：参数 说明 依赖类型 自定义节点依赖：依赖所属工作区：可选择依赖所属工作区...
PolarDB PostgreSQL版架构介绍
数据一致性 传统数据库的内存状态同步 传统share nothing的数据库，主节点和只读节点都有各自的内存和存储，只需要从主节点复制WAL日志到只读节点，并在只读节点上依次回放日志即可，这也是复制状态机的基本原理。基于Shared-Storage的内存...
PolarDB PostgreSQL版架构介绍
数据一致性 传统数据库的内存状态同步 传统share nothing的数据库，主节点和只读节点都有各自的内存和存储，只需要从主节点复制WAL日志到只读节点，并在只读节点上依次回放日志即可，这也是复制状态机的基本原理。基于Shared-Storage的内存...
分流方案概述
如果您的业务中既包含OLTP类业务又包含OLAP类业务，则为了实现业务的最大性能，您可以基于列存索引特性，通过数据库代理的集群地址功能，实现OLAP查询引流到列存节点、OLTP查询引流到行存节点。背景信息 PolarDB MySQL版 支持两种只读节点...
对比节点不同版本的差异
支持任意两个版本的公共节点进行脚本差异比对，方便您确认差异点，进而判断使用哪个版本的节点。本文介绍如何对比节点的不同版本的差异。前提条件 公共节点已发布一个以上版本，具体操作，请参见 发布公共节点。操作步骤 登录 数据资源平台...
数据开发：开发者
任务定时时间为单个节点维度，但任务实际运行时间与节点依赖的上游节点其定时时间有关，所以即便当前节点定时时间早于上游节点，当前节点仍需要等待上游节点定时时间到并且执行成功后，下游节点才会执行。本文示例设置 result_table 节点 ...
图层节点配置
本文介绍蓝图编辑器中图层节点的相关操作。操作 说明 添加 单击图层节点右侧的 图标或直接拖拽至蓝图中，实现添加操作。删除 在蓝图画布中，鼠标右键单击选择 删除选中 或使用快捷键可以快速删除图层节点。搜索 在蓝图页面工具栏的搜索框内...
代码评审
具体由哪个用户评审，则在提交节点时由节点提交人进行选择。指定开发角色用户：节点发起代码评审后，必须由指定开发角色的用户评审通过后才可提交发布。提交节点时默认由此处配置的评审人员进行评审。说明 仅支持选择当前工作空间下具有...
常见问题
与社区版MySQL不同，PolarDB MySQL版 的主节点和读节点是基于共享存储的，这会导致主节点在做DDL的时候，读节点可能会查询到DDL过程中的中间数据而出现错误。Q：Binlog格式和MySQL原生格式是否存在差异？A：没有差异。Q：是否支持...
do-while节点最佳实践
创建并配置赋值节点 核心操作要点为：赋值代码与上下文参数：选择赋值节点的赋值语言，并通过命令定义好 赋值节点 最终输出的结果集，赋值节点会将本节点最后一条输出语句赋值给赋值节点自带的outputs输出参数。说明 赋值节点的输出后续...
配置园区孪生体
将左侧的 孪生节点 拖拽到中间画布的指定节点上，为该指定节点添加子节点，然后双击节点修改节点名称，如下图所示。配置孪生节点 在画布中，单击孪生节点 温度传感器1，然后在 孪生节点 面板，单击 编辑物模型。在弹出的 孪生节点物模型 ...
配置代码模板
代码模板是在创建节点后，默认展示在该节点代码编辑器界面最前端的内容，包括节点类型、节点的创建用户、节点的创建时间等信息，帮助您快速标记该节点。通常用于业务层进行节点管理。本文为您介绍DataWorks支持的代码模板类型及如何设置...
运维中心概述
依赖的所有父节点实例状态都为成功状态 配置节点依赖关系可以保障节点在运行时能取到正确的数据（读取上游表数据时，上游表的最新数据已产生），避免当前节点读取数据时，上游表数据还未产出，导致当前节点读取数据出现问题，所以，当节点...
资源组编排
DataWorks的资源组编排功能，帮助您在数据开发阶段，批量修改指定业务流程下目标节点使用的调度资源组。当您的工作空间中有多个调度资源组时，可以根据实际业务需求，使用该功能快速为目标节点重新分配资源组，促进资源的合理使用。本文为...
导出开源引擎任务
SubProcess节点本身转换为DataWorks的虚拟节点，Start节点会依赖该虚拟节点，原先SubProcess节点的下游节点均依赖End节点。Conditions节点 归并节点 Conditions节点的依赖配置中，每一个依赖项和条件关系会转换为DataWorks的一个归并节点...
添加和管理加速区域
BGP精品：BGP精品线路是一种优化海外回中国内地流量的公网线路，可以提高国际业务访问质量。相比普通BGP（多线）线路，BGP（多线）_精品线路在为中国内地终端客户（不包括中国内地数据中心）提供服务时，通过运营商精品公网直连中国内地，...
常见问题
E-HPC集群节点是基于ECS实例组建，但E-HPC控制台提供了额外的部署流程，包括且不限于以下流程：E-HPC帮助您按节点配比和指定实例规格配置集群节点，为各类节点批量创建ECS实例。E-HPC创建各个节点对应的ECS实例后，会进一步部署管控系统。E...
开发环境场景画布概览
您可以在开发环境场景画布中编排节点工作流、配置节点属性参数、运行参数和调度参数。本文介绍开发环境场景画布的各功能区以及场景中各类型的节点，方便您快速熟悉开发环境场景画布功能，为新建开发环境场景做准备。序号 区域 说明 ① 左侧...
开发环境场景画布概览
您可以在开发环境场景画布中编排节点工作流、配置节点属性参数、运行参数和调度参数。本文介绍开发环境场景画布的各功能区以及场景中各类型的节点，方便您快速熟悉开发环境场景画布功能，为新建开发环境场景做准备。序号 区域 说明 ① 左侧...
调试代码片段：快捷运行
DataWorks的快捷运行功能，帮助您在节点编辑页面，快速运行选中的代码片段。您可以通过该功能测试代码片段编写是否正确。本文为您介绍如何快捷运行目标代码。前提条件 已创建ODPS SQL或EMR Hive节点，并编写任务代码。创建ODPS SQL节点，...
连接保持
PolarDB 新增支持连接保持功能，避免由于一些运维操作（如升级配置、主备切换或升级小版本等）或非运维操作故障（如节点所在服务器故障）导致的连接闪断或新建连接短暂失败的问题，进一步提高 PolarDB 的高可用性。前提条件 PolarDB 数据库...
查看开发环境节点信息
创建完节点任务以后，可以查看已创建的节点任务的基本信息、部署状态、部署日志信息和计算资源等信息。本文介绍如何查看节点任务信息。前提条件 已新建节点。操作步骤 登录 数据资源平台控制台。在页面左上角，单击 图标，选择 协同。在...
查看开发环境节点信息
创建完节点任务以后，可以查看已创建的节点任务的基本信息、部署状态、部署日志信息和计算资源等信息。本文介绍如何查看节点任务信息。前提条件 已新建节点。操作步骤 登录企业数据智能平台。在页面左上角，单击 图标，选择 协同。在顶部...
通用开发流程
DataWorks将不同类型引擎任务封装为不同节点，通过创建节点来生成数据开发任务。同时，数据开发（DataStudio）支持使用资源、函数、以及不同的逻辑处理节点开发复杂任务。本文将为您介绍数据开发任务的通用开发流程。前提条件 已绑定所需...
管理节点标签
节点标签可以给节点定义不同的属性，通过这些标签可以快速的了解各个节点的特点，便于节点的管理和工作负载的调度。前提条件 已创建集群 或 已导入集群 添加标签 登录控制台，在左侧导航栏单击 集群管理>集群详情，进入集群列表页。单击...
术语
节点（Node）PolarDB 集群由多个物理节点构成，每个集群中的节点可分为两类，每一类节点关系对等，规格相同。这两类节点分别叫主节点和只读节点。主节点（Primary node）PolarDB 主节点，也叫读写节点，一个集群中只有一个主节点。只读节点...
采集数据
说明 工作空间根节点为空间创建后默认生成节点，一般情况下，空间下所有任务均会挂在该节点下，工作空间根节点默认从0点开始调起挂在其下游的所有一级子节点，且该节点不支持变更。步骤六：配置OSS数据同步节点（ods_raw_log_d）此步骤中，...
采集数据
说明 工作空间根节点为空间创建后默认生成节点，一般情况下，空间下所有任务均会挂在该节点下，工作空间根节点默认从0点开始调起挂在其下游的所有一级子节点，且该节点不支持变更。步骤六：配置OSS数据同步节点（ods_raw_log_d）此步骤中，...
如何理解并使用对话工厂
机器人想：判断节点、服务调用、函数节点、赋值节点。机器人回答：回复节点。系统能力：填槽节点。针对节点，页面上可复制粘贴删除，支持Ctrl+C和Ctrl+V、Delete等快捷键。整个画布可以通过拖拽调整布局。右上角是节点的定位，可以快速定位...
功能简介
开发节点 支持节点任务类目的新建、编辑和删除以及支持离线节点、在线和流式节点注册，对节点脚本、自定义函数、节点输入、节点输出、节点参数进行配置和管理以及支持配置节点的依赖关系以及支持节点任务的运行和上线。支持节点任务类目的...
功能简介
开发节点 支持节点任务类目的新建、编辑和删除以及支持离线节点、在线和流式节点注册，对节点脚本、自定义函数、节点输入、节点输出、节点参数进行配置和管理以及支持配置节点的依赖关系以及支持节点任务的运行和上线。支持节点任务类目的...
数据开发
开发环境节点 支持节点任务类目的新建、编辑和删除以及支持离线、在线和流式节点注册，对节点脚本、自定义函数、节点输入、节点输出、节点变量进行配置和管理以及支持配置节点的依赖关系以及支持节点任务的部署、运行和上线。支持节点任务...
- 产品推荐
- 这些文档可能帮助您