附录:调度器插件的常用OpenAPI说明

流程说明 调用DeleteNodes接口,计算节点将开始进行资源释放,此时调度器节点开始执行节点从调度器删除(NodeDel)的操作。流程图如下:插件功能说明 说明 以下仅说明需要您自行实现的插件功能。NodeDel 功能:在调度节点上将该节点从调度...

多租户和资源划分

设置完成后,user1在发起对UserTable表的查询时,只会访问group_a资源组内节点上的数据副本,并且查询仅会使用group_a资源组内的节点计算资源。而user3的查询可以使用任意资源组内的副本和计算资源。通过对节点的划分,以及对用户的资源...

设置调度器参数

调度器是集群上调度作业的软件,负责分发作业、处理作业优先级、按需分配计算节点资源(如vCPU、内存、节点个数)等。您可以根据作业大小,预估使用的节点资源和作业完成时间,设置集群的调度器参数,从而提高资源使用率。本文介绍如何在...

名词解释

计算节点为用户可购买的计算资源单位,包括固定的 CPU核,内存,存储。每个计算节点规格包含1个MPP的数据分区(Segment)。计算节点个数 集群实例所购买的计算节点数量,单实例最大支持4096个节点。集群实例的存储空间和计算资源随计算节点...

输入节点

运行配置 运行配置用于设置输入节点的云计算资源和源数据表,关键参数说明如下:参数 说明 云计算资源类型 节点的数据源类型,可选值包括 MaxCompute、AnalyticDB for RDS、AnalyticDB MySQL、Table Store、DataHub Service、Phoenix、...

输入节点

运行配置 运行配置用于设置输入节点的云计算资源和源数据表,关键参数说明如下:参数 说明 云计算资源类型 节点的数据源类型,可选值包括 MaxCompute、AnalyticDB for RDS、AnalyticDB MySQL、Table Store、DataHub Service、Phoenix、...

步骤四:运行节点

前提条件 已设置开发计算资源、生产计算资源节点输入和节点输出参数,具体操作请参见 步骤三:设置运行配置参数。操作步骤 单击画布工具栏的 图标,运行节点。这里以运行离线节点的SQL语句为例介绍。在 SQL解析 对话框,确认参数类型和...

计费项

根据实际使用的计算资源进行计量,每小时内消耗的计算资源CCU等于该小时内每秒消耗的计算资源CCU的总和。计算资源的费用按小时出账单,无需提前购买计算资源。计量单位:CCU/每小时。计算资源费用=计算资源单价×使用时长。存储资源 按量...

基本概念

节点类型:任务流中包含的同步节点、MaxCompute_SQL节点、Flink_Vvp节点、自定义计算节点等在不同计算资源上运行的计算任务节点。补数据计划:通常情况下,对于离线周期任务,当前序任务失败或任务第一次上线,需要通过补数据计划同步或...

步骤四:运行节点

前提条件 已设置开发计算资源、生产计算资源节点输入和节点输出参数,具体操作请参见 步骤三:设置运行配置参数。操作步骤 单击画布工具栏的 图标,运行节点。这里以运行离线节点的SQL语句为例介绍。在 SQL解析 对话框,确认参数类型和...

就绪检测节点

运行属性 运行属性 用于设置数据检测节点的云计算资源和所要检测的数据表,关键参数说明如下:参数 说明 云计算资源类型 节点的云计算资源类型。必须与下游节点的云计算资源类型相同。数据结构 数据模型指代您已经在云资源中创建的物理表。...

就绪检测节点

运行属性 运行属性 用于设置数据检测节点的云计算资源和所要检测的数据表,关键参数说明如下:参数 说明 云计算资源类型 节点的云计算资源类型。必须与下游节点的云计算资源类型相同。数据结构 数据模型指代您已经在云资源中创建的物理表。...

PolarDB-X 1.0实例中的连接

前端连接 前端连接的数量理论上仅受限于 PolarDB-X 1.0计算资源实例 节点可用的内存大小和网络连接数。但在实际的应用场景中,应用程序连接到 PolarDB-X 1.0计算资源实例 时,通常会管理有限数量的连接来执行请求的操作,并不会维持很高...

扩缩容

A:PolarDB 采用计算与存储分离的架构,购买的只读节点计算资源,因此存储容量不会增加。存储空间采用Serverless方式,购买时无需选择容量,随着数据增长而在线自动扩容,只按实际数据量大小收费。每个集群规格都有对应的最大存储容量。...

灵骏节点池概述

集群内的计算节点可进一步细化节点分组,您可以通过对应用环境、集群、计算节点的规划来提高计算节点资源利用率。为了更便捷地管理智能计算灵骏的分组以及灵骏节点,ACK灵骏托管版集群提供了一种新的节点池类型:灵骏节点池。功能介绍 ...

节点异常问题排查

NodePIDPressure 节点磁盘空间不足-DiskPressure 节点IP资源不足-InvalidVSwitchId.IpNotEnough 节点网络异常处理 节点网络异常 节点其他异常处理 节点异常重启 如何解决auditd进程占用大量磁盘IO或者系统日志中出现audit:backlog limit ...

节点异常问题排查

NodePIDPressure 节点磁盘空间不足-DiskPressure 节点IP资源不足-InvalidVSwitchId.IpNotEnough 节点网络异常处理 节点网络异常 节点其他异常处理 节点异常重启 如何解决auditd进程占用大量磁盘IO或者系统日志中出现audit:backlog limit ...

将调度失败的Pod调度到ECI

在ACK集群中创建的Pod默认会调度到真实节点(即ECS节点)上,当ECS节点计算资源不足时,Pod会调度失败。基于该场景,您可以在ACK集群中部署virtual-kubelet-autoscaler插件,该插件会自动将因为资源不足而调度失败的Pod二次调度到虚拟...

复制公共节点

复制公共节点过程中,公共节点计算资源需要重新设置,除此以外其他参数均与蓝本一样,您可根据实际需要修改。本文介绍如何复制公共节点。前提条件 已存在公共节点,具体操作,请参见 添加公共节点。操作步骤 登录 数据资源平台控制台。在...

基于ECI运行Job任务

本文主要为您介绍通过虚拟节点运行Job任务的方式,您可以用最小的运维成本(无需调整节点数量)来应对集群计算资源高峰压力。背景信息 Kubernetes集群的节点资源配置不足会导致Pod无法及时运行,购买过多的节点又会导致资源的闲置浪费。而...

复制公共节点

复制公共节点过程中,公共节点计算资源需要重新设置,除此以外其他参数均与蓝本一样,您可根据实际需要修改。本文介绍如何复制公共节点。前提条件 已存在公共节点,具体操作,请参见 添加公共节点。操作步骤 登录企业数据智能平台。在...

扫描并发控制

外表的扫描效率受数据源的限制,当扫描任务并发数超过限制后,增加扫描任务并发数并不会加快扫描速度,反而会占用计算节点资源,影响其他查询。为解决以上问题,AnalyticDB for MySQL 推出了扫描并发控制功能,该功能默认开启。基本概念 ...

产品优势

本文介绍云原生关系型数据库 PolarDB PostgreSQL版(兼容Oracle)的...跨机并行查询 支持跨机并行查询计算引擎,多个节点跨机并行执行SQL,充分发挥所有计算节点的CPU、内存、网络的硬件资源,加速 分析型查询性能。具体可参见 跨机并行查询。

云计算资源类型

通过了解数据开发支持的云计算资源类型,并在系统设置模块添加数据开发需要使用的云计算资源类型对应资源,以备在运行离线节点或者部署运行测试场景和线上场景时使用。本文介绍数据开发中支持使用的云计算资源类型。节点模式 支持的云计算...

创建节点

基于机构节点环境、机构节点引擎的隐私计算节点资源配置要求请参见 单节点资源配置。网络配置 在创建节点时,网络配置是可选配置。您可以在客户端节点部署完成后,再为该节点配置相关的网络信息。通讯线路:您可以根据您的业务需求,为...

计算节点变配

当数据量和计算量动态增长,计算资源(CPU、磁盘、内存以及数据处理节点数量)成为数据处理速度的瓶颈时,您可以对实例动态扩展,在线变更实例规格和计算节点。目前 AnalyticDB PostgreSQL版 不同的 实例资源类型 对计算节点变配的支持程度...

节点

节点组用于对依赖计算资源的算法节点进行组合,组合的算法节点在部署和运行时会被打包在一起进行调度。本文介绍节点组的配置参数说明。节点属性 节点属性 关键参数说明如下:配置项 说明 节点组名称 节点组的名称。节点组标识 节点组的唯一...

节点

节点组用于对依赖计算资源的算法节点进行组合,组合的算法节点在部署和运行时会被打包在一起进行调度。本文介绍节点组的配置参数说明。节点属性 节点属性 关键参数说明如下:配置项 说明 节点组名称 节点组的名称。节点组标识 节点组的唯一...

节点伸缩概述

节点即时弹性 支持无侵入式地将资源供给策略、节点生命周期管理与您的自定义行为进行联动,提供更多二次开发的可能性。调度策略 除支持 节点自动伸缩 所有的调度特性之外,节点即时弹性 还支持以下特性:Topology:常用于满足跨可用区维度...

实例扩缩容

随着您的数据量和计算量的动态增长,一些计算资源如CPU、磁盘、内存以及数据处理节点数量将成为数据处理速度的瓶颈。为了支持实例的动态扩展,AnalyticDB PostgreSQL版 提供在线变更实例规格的功能。本教程以Serverless版本为例,带您体验...

数仓版(3.0)产品定价

集群形态 计费项 包年包月价格 按量付费价格 单机版 计算资源 8核32 GB 935元/月 1.948元/小时 16核64 GB 1,870元/月 3.896元/小时 集群版 计算资源 32核128 GB及以上规格 3,369.5元/节点/月 7.01985元/节点/小时 弹性IO资源 24核192 GB...

单实例快速恢复

实例规模和允许故障的Worker数量如下表所示:计算资源数量 实例节点数量 允许故障的Worker数量 160CU实例计算资源实例节点数量实例计算资源 20实例节点数量 2 由于临时使用了其他正常的Worker快速加载故障Worker原始分配Shard的元数据,...

开发环境场景画布概览

序号 区域 说明 ① 左侧节点选择区 节点区域导航栏:系统节点:同步节点:在两个算法节点间传输与同步数据,支持不同计算资源的数据转换。就绪检测节点:检测公共节点流程的数据源是否已准备就绪。只有数据准备就绪后,节点流程才可以正常...

规格及选型

8C32G ESSD云盘 PL1 16C64G ESSD云盘 PL2 表 2.Serverless 实例系列 调度模式 节点规格/计算资源阈值(ACU)存储磁盘类型 适配场景 高可用 手动调度 4C16G 共享存储 新产品形态,支持秒级变配、按需存储及数据共享。适合如下场景:业务负载...

开发环境场景画布概览

序号 区域 说明 ① 左侧节点选择区 节点区域导航栏:系统节点:同步节点:在两个算法节点间传输与同步数据,支持不同计算资源的数据转换。就绪检测节点:检测公共节点流程的数据源是否已准备就绪。只有数据准备就绪后,节点流程才可以正常...

术语

跨机并行查询(Parallel Execution)支持多个节点跨机并行执行SQL,充分发挥所有计算节点的CPU、内存、网络的硬件资源,加速 分析型查询性能。具体可参见 跨机并行查询。硬件压缩盘(Smart-SSD)硬件压缩盘使用阿里巴巴自研的Aliflash ...

部署前检查

节点资源配置 关于隐私计算节点资源配置要求,请参见下表内容。服务 节点环境 节点类型 服务器配置 数量(个)备注 MPC 测试 训练节点 8 核 16 GB,磁盘空间 500 GB 以上 1 期望多模型并行训练,需增加机器。预测节点 1-生产 训练...

GetAutoScaleConfig-获取自动伸缩配置信息

如果某一轮次需扩容节点数量小于所设置的最小计算节点数,自动伸缩为保证资源的正常交付,会将该轮次的最小计算节点数自动调整为当前轮次需要扩容节点数量。说明 该调整仅对当前轮次的最小计算节点数生效。5 AutoMinNodesPerCycle boolean ...

异构计算集群概述

支持GPU拓扑感知调度功能:通过Node节点获取异构计算资源的拓扑结构,调度器端基于节点的拓扑信息,完成调度决策,为NVLINK、PCIe Switch、QPI和RDMA NIC提供最佳的调度选择,实现最优的运行性能。更多信息,请参见 GPU拓扑感知调度概述。...

7.0经济版

不同实例系列和节点规格的计算资源价格如下:包年包月 实例系列 节点规格 单价(元/节点/月)高性能(基础版)2C8G 283.631 高性能(基础版)4C16G 539.455 高性能(基础版)8C32G 1051.104 高性能(基础版)16C64G 2074.400 高可用版 2C16...
共有200条 < 1 2 3 4 ... 200 >
跳转至: GO
产品推荐
云服务器 安全管家服务 安全中心
这些文档可能帮助您
负载均衡 共享流量包 云服务器 ECS 弹性公网IP 短信服务 人工智能平台 PAI
新人特惠 爆款特惠 最新活动 免费试用