任务未运行
分析：下游B节点定时时间为0点，此时已经到了任务定时时间，但由于上游父节点定时时间未到，所以下游节点B需要等到上游父节点A2，A3定时时间到了并且任务执行成功后，B任务才会执行。如果上游A2、A3任务有一个失败，那下游B任务将不会调度...
调度依赖配置指引
配置调度依赖后，可保障调度任务在运行时能获取到正确的数据（即当前节点依赖的上游节点成功运行后，DataWorks通过节点的运行状态识别到上游表的最新数据已产生，下游节点再去取数），避免下游节点取数据时，上游表数据还未正常产出，导致...
查看周期实例
周期任务的实例均依赖于该节点，如果冻结该节点，周期任务实例将无法运行。等待资源、等待时间、运行中（例如，节点代码运行中、数据质量检验中）状态不支持冻结操作。恢复（解冻）：用于将冻结状态的实例解冻。如果该实例还未运行，则上游...
导出开源引擎任务
SubProcess节点本身转换为DataWorks的虚拟节点，Start节点会依赖该虚拟节点，原先SubProcess节点的下游节点均依赖End节点。Conditions节点 归并节点 Conditions节点的依赖配置中，每一个依赖项和条件关系会转换为DataWorks的一个归并节点...
设置调度依赖最佳实践
配置调度依赖时，需要根据本节点输出名称作为关联项来给任务间设置依赖关系。本文将为您介绍如何配置任务调度依赖的输入输出。配置任务的本节点输入 您可以通过以下两种方式配置本节点输入：使用代码自动解析功能，解析出任务的依赖。手动...
基本概念
节点 节点的全称为隐私计算节点，是一台计算机、一台虚拟计算机或一个集群，计算方将多方安全计算协议或算法逻辑的软件执行在节点中。节点均被部署在机构本地，通过节点实现机构原始数据连接及本地计算。脚本文件 脚本文件是在联邦建模控制...
产品定价
计算节点规格 元/每个节点/每小时 最低购买节点数量 2C16G 0.9147395833 4 4C32G 1.8041479167 4 8C64G 3.60829583 4 16C128G 14.4331833333 4 高性能（基础版）系列 包年包月 计算节点规格 元/每个节点/每月 最低购买节点数量 2C8G 382.5 ...
DataWorks节点合集
DataWorks的数据开发（DataStudio）模块为您提供多种类型的节点，包括用于数据同步的数据集成节点，用于数据清洗的引擎计算节点（例如，ODPS SQL、Hologres SQL、EMR Hive），以及可对引擎计算节点进行复杂逻辑处理的通用节点（例如，可...
创建集群
说明 为保证E-HPC节点间的网络通讯效率，所有开通的节点均位于同一地域同一可用区.更多信息，请参见 地域和可用区。付费类型 按量付费 集群中各节点的计费方式。此处以按量付费为例，即按实际开通时长以小时为单位进行收费。更多付费类型...
可视化编排
物联网边缘计算针对容器应用，提供可视化编排功能，通过拖拽节点和连线的方式，建立应用节点的先后启动关系。前提条件 已创建容器应用，详细操作，请参见 创建容器应用。若需要为应用配置存储日志的路径，请按照如下步骤，提前开启边缘一体...
Multi-Master基础架构
AnalyticDB PostgreSQL版 Multi-Master通过水平扩展Master节点突破了原架构单Master的限制，配合Segment节点（计算节点）的弹性，系统整体能力尤其是连接数及读写性能得到进一步提升，更好地满足实时数仓及HTAP等业务场景的需求。...
执行测试并查看测试实例
您可以根据 节点名称、节点ID、节点类型、运行日期、业务日期、调度资源组、我的节点、我今天测试的节点 和 暂停（冻结）等条件进行精确筛选。说明 默认筛选的业务日期是当前时间的前一天。任务列表 在上图的模块2区域，以列表方式展示满足...
企业版产品系列
PolarDB MySQL版 目前支持 集群版 和 多主集群（库表）2种不同的产品系列。本文将简要介绍2种产品系列的产品架构、优势和适用场景等信息。2种产品系列的适用场景对比如下表所示：系列 说明 适用场景 集群版 使用计算与存储分离的架构，提供...
WAL日志并行回放
背景信息 在 PolarDB PostgreSQL版（兼容Oracle）的一写多读架构下，只读节点（Replica 节点）运行过程中，LogIndex后台回放进程（LogIndex Background Worker）和会话进程（Backend）分别使用LogIndex数据在不同的Buffer上回放WAL日志，...
WAL日志并行回放
假设回放子任务集合如下：TASK ∗,∗ =[Task 0,∗ ,Task 1,∗,Task 2,∗ ]，其中：Task 0,∗ =[Task 0,0 ,Task 0,1 ,Task 0,2 ]Task 1,∗ =[Task 1,0 ,Task 1,1 ]Task 2,∗ =[Task 2,0 ]并且，Block 0,0 =...
创建与释放全球多活数据库集群
双向同步任务时，DTS会在中心节点和单元节点中建立名为 dts 的库，以避免数据循环同步，任务运行期间，请勿修改该库。rdsdt_dtsacct是全球多活数据库的同步账号，请勿修改账号的密码，否则导致数据同步失败。执行数据同步前需评估源库和...
指标含义与异常处理建议
阿里云Elasticsearch为运行中的集群提供了多项基础监控指标（例如集群状态、集群查询QPS、节点CPU使用率、节点磁盘使用率等）和高级监控报警指标（例如Cluster、Index、Note Resource等），用来监测集群的运行状况。您可以根据这些指标，...
一致性级别
每个读请求到达 PolarDB 数据库代理时，代理都会先去主节点确认当前最新的LSN位点，假设为LSN0（为了减少每次读请求都去获得主节点的最新LSN，内部做了批量优化），然后等待所有只读节点的LSN都更新至主节点的LSN0位点后，代理再将读请求...
基本概念
概念 说明 集群 集群是带有灵骏优化套件的高性能的异构加速计算节点的集合，集群中的各节点间通过800 Gbps高速低延迟RDMA网络进行互联通信。用户可以使用原生的物理集群服务，也可以在原生服务基础上结合阿里云提供的其他云产品一起使用...
任务运行诊断
任务实际执行时，除了受数据开发（DataStudio）中定义的定时调度时间影响外，还受多方因素影响。例如，上游任务的定时时间、上游任务实际执行完成时间、任务执行资源组所剩资源等。本文为您介绍如何使用运行诊断功能快速定位任务未运行成功...
高可用性与容灾
但是 PolarDB-X 并不需要所有节点都拥有全部的功能，对部分节点的功能进行了裁剪，每个节点的功能介绍如下：通常有一个相对稳定的Leader角色的节点用于处理读写请求。如果Leader角色的节点因为某些意外情况发生宕机或超时，Follower角色的...
配置云蜜罐
} upstream proxy1337 {#蜜罐管理节点IP可在云蜜罐>配置管理的管理节点页签下的目标管理节点的管理节点IP列查看 server#蜜罐管理节点IP#:1337;} server { listen 1338;proxy_timeout 10m;proxy_connect_timeout 60s;proxy_pass proxy1338;}...
主备切换
当 云数据库Redis版 监测到实例的主节点不可用时，会自动触发主备切换，将备节点提升为主节点，保障实例的高可用性。若您收到短信、邮件、控制台站内信等通知，告知您 Redis 实例已完成主备切换，您可以参考本文了解主备切换的原因、影响和...
主备切换
当 云原生内存数据库 Tair 监测到实例的主节点不可用时，会自动触发主备切换，将备节点提升为主节点，保障实例的高可用性。若您收到短信、邮件、控制台站内信等通知，告知您 Tair 实例已完成主备切换，您可以参考本文了解主备切换的原因、...
管理媒体
智能封面、视频审核、视频DNA等页签是视频文件执行工作流后，工作流中的节点信息，也是媒体信息的一部分。媒体发布 媒体发布状态默认按工作流发布节点中的配置进行设置，您可通过控制台进行修改。发布：设置媒体所有播放资源，截图文件的...
开发PyODPS 3任务
DataWorks为您提供PyODPS 3节点，您可以在该节点中直接使用Python代码编写MaxCompute作业，并进行作业的周期性调度。本文为您介绍如何通过DataWorks实现Python任务的配置与调度。前提条件 已创建PyODPS 3节点，详情请参见 创建并管理...
开发PyODPS 3任务
DataWorks为您提供PyODPS 3节点，您可以在该节点中直接使用Python代码编写MaxCompute作业，并进行作业的周期性调度。本文为您介绍如何通过DataWorks实现Python任务的配置与调度。前提条件 已创建PyODPS 3节点，详情请参见 创建并管理...
基本概念
可根据延时因素，自动选择就近或健康的终端节点组进行流量转发，将客户端的网络访问请求送达至最佳终端节点。自定义路由：可根据监听端口和后端目标交换机网段的映射关系，确定性地将流量路由到指定交换机中特定的IP地址和端口。您可以根据...
多租户和资源划分
Doris的多租户和资源隔离方案，主要目的是为了多用户在同一Doris集群内进行数据操作时，减少相互之间的干扰，能够将集群资源更合理的分配给各用户。该方案主要分为两部分，一是集群内节点级别的资源组划分，二是针对单个查询的资源限制。...
查看并管理已生成实例
操作 描述 一键终止 Dataphin自动选中当前文件夹下运行状态为 等待中 和 运行中 的节点、状态为 未运行、运行中 和 等待中 的逻辑表字段及其连带字段执行终止操作。同时对其他运行状态的节点或逻辑表字段无影响。一键重跑失败实例 Dataphin...
技术原理
2->Parallel Seq Scan on pgbench_accounts(cost=0.00.216018.33 rows=1 width=97)Filter:(filler~'%x%':text)(4 rows)在所有的情形下，Gather 或 Gather Merge 节点都只有一个子计划，它是将被并行执行的计划的一部分。如果 Gather 或 ...
查看并管理已生成实例
操作 描述 一键终止 Dataphin自动选中当前文件夹下运行状态为 等待中 和 运行中 的节点、状态为 未运行、运行中 和 等待中 的逻辑表字段及其连带字段执行终止操作。同时对其他运行状态的节点或逻辑表字段无影响。一键重跑失败实例 Dataphin...
使用Stage和Task详情分析查询
AnalyticDB for MySQL 在前端接入节点接收到查询请求后，会将查询切分成多个Stage，在存储节点（Worker节点）和子任务执行节点（Executor节点）分布式进行数据的读取和计算。部分Stage可以并行执行，但部分Stage之间存在依赖关系，只能串行...
使用跨 zone 网关
在任务拓扑中，您可以通过使用跨 zone 网关，将多个 zone 的节点任务添加到一个拓扑编排中，实现任务跨 zone 编排。说明 跨 zone 网关仅适用于开启了共享 LDC 功能的用户。操作步骤 创建拓扑子任务。创建两个或两个以上的简单或集群任务，...
新功能发布记录
DMS控制台切换 07月 功能名称 变更类型 功能描述 相关文档 离线集成 新增 离线集成是一种低代码开发数据加工任务的工具，您可以组合各类任务节点，形成数据流，通过周期调度运行达到数据加工、数据同步的目的。离线集成概述 DevOps 新增 ...
创建同步任务
本文为您介绍如何通过创建同步任务，导出MaxCompute中的数据至MySQL数据源中。前提条件 已通过RDS创建MySQL实例，获取RDS实例ID，并在RDS控制台添加白名单。详情请参见 快速创建RDS MySQL实例 和 添加白名单。说明 如果是通过自定义资源组...
创建和管理终端节点
终端节点（Endpoint）由服务使用方创建和维护，可以与终端节点服务相关联，从而建立通过 PrivateLink 私网访问外部服务的网络连接。一个终端节点只能关联一个终端节点服务，本文为您介绍如何创建和管理终端节点。背景信息 私网连接 能够...
基于MaxCompute实现拉链表
拉链表是数据仓库设计中用来处理数据变化的一种技术，它允许保存历史数据，记录一个事物从开始到当前状态的所有变化信息，可以反映任意时间点数据的状态。本文将为您介绍基于MaxCompute引擎在DataWorks上实现拉链表ETL的案例。前提条件 已...
确认表血缘
任务配置上下游节点依赖前，您需先确认当前节点的表血缘关系（例如，表数据间的血缘关系、表产出的分区数据），基于血缘关系配置节点的调度依赖。本文为您介绍如何确认表血缘，以及未基于表血缘配置节点依赖的影响。背景信息 确认表血缘，...
术语
本文介绍 云原生数据库PolarDB 使用过程中遇到的术语。地域（Region）数据中心所在的地理位置。可用区（Zone）可用区是指在某一地域内，具有独立电力和网络的物理区域。同一可用区内实例之间的网络延时更小。集群（Cluster）PolarDB 采用多...
- 产品推荐
- 这些文档可能帮助您