WAL日志并行回放
Hold List：并行执行框架中，每个子进程调度执行回放子任务所使用的链表。原理介绍 概述 一条WAL日志可能修改多个数据块Block，因此可以使用如下定义来表示WAL日志的回放过程：假设第 i 条WAL日志LSN为 LSN i ，其修改了 m 个数据块，则...
WAL日志并行回放
Hold List：并行执行框架中，每个子进程调度执行回放子任务所使用的链表。原理介绍 概述 一条WAL日志可能修改多个数据块Block，因此可以使用如下定义来表示WAL日志的回放过程：假设第 i 条WAL日志LSN为 LSN i ，其修改了 m 个数据块，则...
Shared Server
支持配置Shared Server调试日志，方便排查后端进程调度相关的任何问题。参数说明 Shared Server的典型配置参数说明如下：参数 说明 polar_enable_shm_aset 是否开启全局共享内存。默认关闭，重启生效。取值如下：on：开启全局共享内存。off...
Shared Server
支持配置Shared Server调试日志，方便排查后端进程调度相关的任何问题。参数说明 Shared Server的典型配置参数说明如下：参数 说明 polar_enable_shm_aset 是否开启全局共享内存。默认关闭，重启生效。取值如下：on：开启全局共享内存。off...
使用Gang scheduling
功能介绍 Gang scheduling策略可在并发系统中将多个相关联的进程调度到不同处理器上同时运行。最主要的原则是保证所有相关联的进程能够同时启动，防止部分进程的异常，避免整个关联进程组的阻塞。例如，当您提交一个包含多个任务的批量Job...
使用Gang scheduling
功能介绍 Gang scheduling策略可在并发系统中将多个相关联的进程调度到不同处理器上同时运行。最主要的原则是保证所有相关联的进程能够同时启动，防止部分进程的异常，避免整个关联进程组的阻塞。例如，当您提交一个包含多个任务的批量Job...
Linux实例系统总体负载的查询及分析
nice：通过nice改变了进程调度优先级的进程，在用户模式下消耗的CPU时间比例。system：系统模式下消耗的CPU时间比例。iowait：CPU等待磁盘I/O导致空闲状态消耗的时间比例。steal：利用Xen等操作系统虚拟化技术，等待其它虚拟CPU计算占用的...
ConfigSchedruleOnDemand-修改代播实例的调度规则
修改代播实例的调度规则。调试 您可以在OpenAPI Explorer中直接运行该接口，免去您计算签名的困扰。运行成功后，OpenAPI Explorer可以自动生成SDK代码示例。调试 授权信息 下表是API对应的授权信息，可以在RAM权限策略语句的 Action 元素中...
CreateSchedruleOnDemand-为代播实例创建一条调度规则
为代播实例创建一条调度规则。调试 您可以在OpenAPI Explorer中直接运行该接口，免去您计算签名的困扰。运行成功后，OpenAPI Explorer可以自动生成SDK代码示例。调试 授权信息 下表是API对应的授权信息，可以在RAM权限策略语句的 Action ...
自定义弹性资源优先级调度
自定义弹性资源优先级调度是阿里云提供的弹性调度策略。您可以在应用发布或扩容过程中，自定义资源策略（ResourcePolicy），设置应用实例Pod被调度到不同类型节点资源的顺序。同时，在缩容过程中按照原调度顺序逆序缩容。重要 自调度器版本...
SetSchedulerInfo-设置调度器信息
为指定集群设置调度器配置信息。调试 您可以在OpenAPI Explorer中直接运行该接口，免去您计算签名的困扰。运行成功后，OpenAPI Explorer可以自动生成SDK代码示例。调试 授权信息 下表是API对应的授权信息，可以在RAM权限策略语句的 Action ...
GetSchedulerInfo-查询指定集群的调度器配置
调用GetSchedulerInfo查询指定集群的调度信息。调试 您可以在OpenAPI Explorer中直接运行该接口，免去您计算签名的困扰。运行成功后，OpenAPI Explorer可以自动生成SDK代码示例。调试 授权信息 下表是API对应的授权信息，可以在RAM权限策略...
RunServiceSchedule-执行设备服务调度
调用RunServiceSchedule根据客户ID&IP基本信息，为终端设备最优调度空闲资源（实例设备/容器POD），并完成虚拟设备环境的初始化。调试 您可以在OpenAPI Explorer中直接运行该接口，免去您计算签名的困扰。运行成功后，OpenAPI Explorer可以...
资源组
资源组（Resource Group）是 PolarDB PostgreSQL版（兼容Oracle）提供的可以对进程、数据库和用户三种粒度所使用资源进行限制的机制，可以对CPU，内存资源实现精细化的控制。背景信息 如果在同一个节点上存在多个实例或者一个实例存在复杂...
资源组
资源组（Resource Group）是 PolarDB PostgreSQL版（兼容Oracle）提供的可以对进程、数据库和用户三种粒度所使用资源进行限制的机制，可以对CPU，内存资源实现精细化的控制。背景信息 如果在同一个节点上存在多个实例或者一个实例存在复杂...
如何使用Prometheus监控Windows
进程指标 进程是操作系统进行资源分配和调度的基本单位，也是操作系统结构的基础，您可以关注以下主要指标。指标名称 指标级别 指标来源 指标说明 进程CPU占用时间 Major WMI（PercentPrivilegedTime/PercentUserTime）该指标可以直观体现...
如何使用Prometheus监控Windows
进程指标 进程是操作系统进行资源分配和调度的基本单位，也是操作系统结构的基础，您可以关注以下主要指标。指标名称 指标级别 指标来源 指标说明 进程CPU占用时间 Major WMI（PercentPrivilegedTime/PercentUserTime）该指标可以直观体现...
SysOM内核层容器监控
该指标提供了与CPU调度相关的统计数据，包括在当前CPU的调度队列中等待被调度运行的进程的消耗时间，以及当前CPU中运行的时间片长度。sysom_cpu_dist gauge-查看节点的总体调度情况。该指标提供了从进程让出CPU到下一次被调度到CPU上运行...
部署和配置Terway网络插件
场景三：本地数据中心容器网络为Host网络 由于本地数据中心内的容器网络使用的是Host网络，所以只需保证云上Terway网络插件的守护进程集不被调度到云下即可。云上Terway网络插件默认只调度到拥有节点标签为 alibabacloud....
场景：切换调度时区
在创建DataWorks工作空间时，您需要选择工作空间所在地域，...重要 数据集成同步进程时区属于 DataWorks工作空间当地Region时区，同步进程时间不随DataWorks调度时区进行切换，部分数据源同步时会和同步进程时区有关，也请您留意此处约束。
通过Docker安装并使用cGPU服务
原生调度（policy=5）只用来做显存的隔离。原生调度表示NVIDIA GPU驱动本身的调度方式。算力调度策略支持阿里云所有的异构GPU实例，以及GPU实例所配备的NVIDIA显卡，其型号包含Tesla P4、Tesla P100、Tesla T4、Tesla V100、Tesla A10。...
新建补数据任务
暂停调度任务对应实例 配置暂停调度的任务生成的补数据实例的运行状态：暂停运行（可能会阻断补数据进程）：即暂停调度的任务生成的补数据实例均暂停运行，会阻断下游实例正常运行。说明 适用于当前任务及其下游任务均不需要运行的场景。...
新建补数据任务
暂停调度任务对应实例 配置暂停调度的任务生成的补数据实例的运行状态：暂停运行（可能会阻断补数据进程）：即暂停调度的任务生成的补数据实例均暂停运行，会阻断下游实例正常运行。说明 适用于当前任务及其下游任务均不需要运行的场景。...
调度周期：年调度
年调度是指调度任务在每年的特定几天，在特定的时间点自动运行一次。例如，调度任务设置为每年一月的最后一天执行。注意事项 在非指定的调度时间内，为保证下游实例正常运行，年调度节点会生成空跑的周期实例。重要 空跑现象：系统直接返回...
Dataphin天调度任务如何依赖小时调度任务
概述 本文为您介绍Dataphin中天调度任务依赖小时任务调度是如何调度的。详细信息 判断下游天任务与上游小时任务是否是同周期。同周期：判断上游小时任务是否是自依赖：上游小时任务如果不是自依赖（即小时任务本身没有配置依赖上周期）,则...
调度周期：周调度
任务调度周期是基于单个任务维度的配置，任务最终是否每天调度与任务本身定义的调度周期有关，与上游节点调度周期无关，但上游节点定义的调度时间将影响下游节点实际开始调度的时间。配置示例 配置路径 您需要进入数据开发节点的编辑页面，...
周期任务补数据
暂停调度任务对应实例 配置暂停调度的任务生成的补数据实例的运行状态：暂停运行（可能会阻断补数据进程）：即暂停调度的任务生成的补数据实例均暂停运行，会阻断下游实例正常运行。说明 适用于当前任务及其下游任务均不需要运行的场景。...
周期任务补数据
暂停调度任务对应实例 配置暂停调度的任务生成的补数据实例的运行状态：暂停运行（可能会阻断补数据进程）：即暂停调度的任务生成的补数据实例均暂停运行，会阻断下游实例正常运行。说明 适用于当前任务及其下游任务均不需要运行的场景。...
其他问题
当两个节点的调度周期不同时，即上游节点5分钟调度一次，下游节点20分钟调度一次，下游节点如何获取数据？为何周期调度中某个节点的实例实际运行时间和计划时间有差异？任务执行是按照业务连线的先后顺序执行，即当前一节点运行结束，后一...
调度周期：月调度
任务调度周期是基于单个任务维度的配置，任务最终是否每天调度与任务本身定义的调度周期有关，与上游节点的调度周期无关，但上游节点定义的调度时间将影响下游节点实际开始调度的时间。月调度支持将 指定时间 配置为 每月最后一天，则每...
Dataphin补数据任务空跑调度了是什么原因
补数据选择的是业务日期，而调度周期配置的是调度日期，如果补数据时选择的业务日期是20220930，那么对应的调度日期就是20221001，而调度周期是月调度，并没有包含每个月的1日，所以补数据选择20220930时任务是空跑运行的。解决方案 在调度...
使用ECI弹性调度
ECI弹性调度是阿里云提供的弹性调度策略。您可以在部署服务时通过添加Annotations来声明只使用ECS或ECI弹性资源，或者是在ECS资源不足时自动申请ECI资源。通过ECI弹性调度可以满足您在不同工作负载的场景下对弹性资源的不同需求。本文介绍...
调度Pod到x86架构的虚拟节点
对于 ACK Serverless集群，所有Pod均运行在虚拟节点（默认x86架构）上，无需进行调度；对于ACK集群，即混合使用标准节点（ECS）和虚拟节点（ECI，基于VK）的模式下，默认会将Pod调度到ECS节点，您可以根据需要将Pod调度到虚拟节点。本文...
创建安全沙箱应用
Init Container可以包括一些应用镜像中不存在的实用工具和安装脚本，用来初始化应用容器的运行环境，例如设置内核参数、生成配置文件。更多信息，请参见 Init Containers。（可选）端口设置 设置容器的端口。参数 描述 名称 设置容器端口...
BUILD
配置BUILD调度优先级 BUILD调度是按照单表某个一级分区新增数据量排序下发任务，新增数据量大的分区先下发任务，根据下发时间的先后排序执行任务。当需要按业务紧急程度调度BUILD任务时，可以通过Hint或者 SET ADB_CONFIG 调整单表或多表...
通过ack-co-scheduler组件实现协同调度
与原生的Kubernetes调度器相比，容器服务ACK的调度器扩展出更多其他功能，例如Gang Scheduling、CPU拓扑感知、ECI弹性调度等。本文介绍通过为注册集群安装ack-co-scheduler组件的方式，以实现在您的本地集群中使用阿里云容器服务ACK的调度...
集群概述
调度服务：主要作用是运行PBS或Slurm等调度工具的服务端，处理作业提交、管理调度等。域账号服务：集中管理E-HPC集群内用户信息。重要 管控节点负责作业的管理调度和域账号解析，请勿在管控节点进行编译软件、上传下载打包数据等操作，以免...
通过ack-co-scheduler实现多级弹性调度
在混合云场景下，通过多级弹性调度，可以使您线上线下混合部署的业务能更好的发挥混合云的优势，实现业务高可用，并能根据波峰波谷进行弹性资源申请等。本文介绍如何通过ack-co-scheduler进行多级弹性调度。前提条件 已创建注册集群，并将...
智能解析调度不准问题
使用阿里云解析DNS服务器的域名，如果您设置的智能解析线路出现调度不准的情况，可以参考如下内容进行排查。说明 如果您不知道当前域名是否使用了阿里云解析DNS服务器，请参考 如何获知云解析DNS分配的DNS服务器。1.查看LocalDNS的出口IP ...
使用负载感知调度
ACK集群Pro版 调度器的负载感知调度功能会根据节点的实际负载情况，将Pod优先调度到负载较低的节点，以实现节点负载均衡，降低节点故障风险。前提条件 已安装ack-koordinator组件，且版本为1.1.1-ack.1及以上。具体操作，请参见 ack-...
- 产品推荐
- 这些文档可能帮助您