调度Pod到x86架构的虚拟节点
对于 ACK Serverless集群，所有Pod均运行在虚拟节点（默认x86架构）上，无需进行调度；对于ACK集群，即混合使用标准节点（ECS）和虚拟节点（ECI，基于VK）的模式下，默认会将Pod调度到ECS节点，您可以根据需要将Pod调度到虚拟节点。本文...
工作原理
本文介绍文本分析功能的背景信息、功能介绍、基本概念、调度与执行场景、使用建议等信息。背景信息 服务在运行过程中会生成大量的日志，包括系统日志和业务日志等。日志被广泛地应用在系统监控和故障定位中，传统的日志分析手段以分析日志...
K8s任务
如下所示，获取SchedulerX任务参数值：优势 相较于K8s原生的Job功能，采用SchedulerX调度K8s Job具有以下显著优势：可在线编辑的脚本Pod K8s Job常用场景是用来做数据处理和运维，一般以脚本实现居多。原生的使用方式需要把脚本打包到镜像...
无服务器弹性（ECI弹性调度）
无服务器弹性（ECI弹性调度）是阿里云提供的弹性调度策略。您可以在部署服务时通过添加Annotations来申明只使用ECS或ECI弹性资源，或者是在ECS资源不足时自动申请ECI资源。通过无服务器弹性（ECI弹性调度）可以满足您在不同工作负载的场景...
调度参数
本文为您介绍调度参数的相关问题。调度参数典型场景 调度参数往前取一个小时，如何处理跨天参数替换的问题 如何处理表的分区格式年月日时分秒间带空格情况：pt=yyyy-mm-dd hh24:mi:ss 节点定时时间为每天20:00，节点内参数取值为定时时间...
调度周期：周调度
任务调度周期是基于单个任务维度的配置，任务最终是否每天调度与任务本身定义的调度周期有关，与上游节点调度周期无关，但上游节点定义的调度时间将影响下游节点实际开始调度的时间。配置示例 配置路径 您需要进入数据开发节点的编辑页面，...
ACK集群Pro版概述
更智能的容器调度：集成更强调度性能的Kube Scheduler，支持多种智能调度算法，优化在大规模数据计算、高性能数据处理等业务场景下的容器调度能力。SLA保障：提供赔付标准的SLA保障，集群API Server的可用性达到99.95%。产品计费 关于 ACK...
路由算法
定义 路由算法是减少路由时开销的一种算法，可以通过给逻辑库配置路由算法，实现条件定位查询，提高操作效率。说明 若未配置路由算法，则在对逻辑表的数据进行操作时，会遍历逻辑表对应的每一个物理表，整体操作时间会成倍增加。路由算法由...
CreateRouteStrategy-创建路由策略
label名称，若 targetType为"worker"，则列表中配置 worker的IP地址 targetType：调度目标类型，可配置为"label"或"worker"，表示调度到指定label的机器上或者调度到指定IP的机器上 返回参数 名称 类型 描述 示例值 object Schema of ...
调度中心字段说明
创建调度组填写字段详解 名称 含义 说明 调度组名称 调度组的名称，标识不同的调度组 同一账号的调度组名称 不允许重复。并发数 标识该调度组最多可以同时执行多少任务 取值范围：1～100。建议按照实际业务的带宽，估算 最大 支持多少实例...
ACK Edge集群Pro版介绍
更智能的容器调度：集成更强调度性能的kube-scheduler，支持本地存储LVM调度，支持多种智能调度算法，支持NPU调度，优化在大规模数据计算、高性能数据处理等业务场景下的容器调度能力。SLA保障：提供赔付标准的SLA保障，集群API Server的...
创建算法实例
您可根据业务需求，购买目标算法。购买完成后，会自动在当前企业版实例中创建对应算法的实例。本文介绍如何购买算法完成创建算法实例。背景信息 物联网平台数据服务针对每个数据智能算法提供以下额度，作为算法运行的规格资源。算法实例的...
CPU拓扑感知调度
ACK基于新版的Scheduling framework实现CPU拓扑感知调度，针对CPU敏感型的工作负载提供更好的性能。本文介绍如何使用CPU拓扑感知调度。前提条件 您已创建ACK Pro版集群。具体步骤，请参见 创建ACK Pro版集群。重要 目前CPU拓扑感知调度仅...
集群概述
调度服务：主要作用是运行PBS或Slurm等调度工具的服务端，处理作业提交、管理调度等。域账号服务：集中管理E-HPC集群内用户信息。重要 管控节点负责作业的管理调度和域账号解析，请勿在管控节点进行编译软件、上传下载打包数据等操作，以免...
kube-scheduler组件监控指标说明
kube-scheduler 组件是Kubernetes集群的默认调度器，负责将Pod调度到合适的集群节点上运行。本文介绍 kube-scheduler 组件的监控指标清单、大盘使用指导以及常见指标异常解析。使用前须知 操作入口 请参见 查看集群控制面组件监控大盘。...
通过ack-co-scheduler组件实现协同调度
与原生的Kubernetes调度器相比，容器服务ACK的调度器扩展出更多其他功能，例如Gang Scheduling、CPU拓扑感知、ECI弹性调度等。本文介绍通过为注册集群安装ack-co-scheduler组件的方式，以实现在您的本地集群中使用阿里云容器服务ACK的调度...
工作原理
本文介绍智能巡检的背景信息、工作原理、功能特性、基本概念、调度与执行场景和使用建议。背景信息 基于时间的数据（例如日志、指标）日积月累后会积累大量的数据。例如，某个服务每天产生1000万条数据，则一年大约为36亿条数据。对于这些...
自定义弹性资源优先级调度
自定义弹性资源优先级调度是阿里云提供的弹性调度策略。您可以在应用发布或扩容过程中，自定义资源策略（ResourcePolicy），设置应用实例Pod被调度到不同类型节点资源的顺序。同时，在缩容过程中按照原调度顺序逆序缩容。重要 自调度器版本...
配置算法实例
算法实例是根据算法模板创建的具体实例，可以根据您设置的检测参数结合算法模型，完成对相关数据中异常信息的检测及诊断，协助您更好地解读设备数据，监测设备运行状态，及时发现潜在故障。前提条件 已创建算法实例。具体操作，请参见 创建...
CPU拓扑感知调度
ACK基于新版的Scheduling framework实现CPU拓扑感知调度，针对CPU敏感型的工作负载提供更好的性能。本文介绍如何使用CPU拓扑感知调度。原理介绍 Kubernetes的节点会运行多个Pod，其中部分Pod属于CPU密集型工作负载。在这种情况下，Pod之间...
创建并管理工作空间
调度PAI算法任务 如需进行周期性调度算法任务，则可启用该功能。您也可在创建工作空间后，进入管理中心，在 工作空间 页面开启。说明 该功能开启后无法关闭，请根据需要开启。调度PAI算法任务详情，请参见 机器学习。描述 用于辅助标识工作...
SetLoadBalancerUDPListenerAttribute-修改UDP协议...
说明 仅有性能保障型实例支持 sch、tch 和 qch 的调度算法。CLB 不支持 wrr 和 rr 算法变更为一致性哈希算法，也不支持一致性哈希算法互转。wrr HealthyThreshold integer 否 健康检查连续成功多少次后，将后端服务器的健康检查状态由 fail...
XxlJob任务
SchedulerX 2.0兼容XXL-JOB任务接口，支持@XxlJob 新注解和@JobHandler 老注解方式，您不需要修改代码，即可将XXL-JOB任务在SchedulerX 2.0平台上进行调度。背景信息 XXL-JOB是一个开箱即用的轻量级分布式任务调度系统，其核心设计目标是...
ALIYUN:FNF:Schedule
ALIYUN:FNF:Schedule类型用于创建一个定时调度。语法 {"Type":"ALIYUN:FNF:Schedule","Properties":{"Description":String,"FlowName":String,"Enable":Boolean,"Payload":String,"CronExpression":String,"ScheduleName":String } } 属性 ...
梯度提升回归树算法（GBRT）
简介 GBRT算法是集成学习Boosting家族的成员，使用了前向分布算法，但是弱学习器限定了只能使用CART回归树模型。前向分布算法的思想是基于当前模型和拟合函数来选择合适的决策树函数，从而最小化损失函数。GBRT主要有以下两部分组成：回归...
调度周期：年调度
年调度是指调度任务在每年的特定几天，在特定的时间点自动运行一次。例如，调度任务设置为每年一月的最后一天执行。注意事项 在非指定的调度时间内，为保证下游实例正常运行，年调度节点会生成空跑的周期实例。重要 空跑现象：系统直接返回...
配置任务流依赖检查节点
按天且开始调度时间为8点10分的任务流A依赖按天且开始调度时间为7点的调度任务流B的上一个调度周期，任务流A的依赖检查配置，开始不变，结束时间偏移点增加+1日、减少-1小时、减少-10分。说明 您可在当前配置页面上方，单击 预览，在 时间...
使用RSA密钥无法登录ECS实例问题
背景信息 RSA加密算法是一种非对称加密算法，在公开密钥加密和电子商业中RSA被广泛使用。非对称加密算法包含公钥（Public Key）和私钥（Private Key），公钥和私钥是一种通过算法得到的密钥对，在ECS中创建的密钥对默认采用RSA加密方式。更...
什么是分布式任务调度SchedulerX
分布式任务调度SchedulerX是阿里巴巴自研的分布式任务调度平台，兼容开源XXL-JOB、ElasticJob、Spring Schedule，K8s Job，支持Cron定时、一次性任务、可视化工作流任务编排和分布式跑批，具有高可用、可观测、可运维和低延时等能力。...
如何在SchedulerX 2.0平台上托管XXL-JOB任务
阿里巴巴商业化任务调度平台SchedulerX 2.0兼容XXL-JOB任务接口，支持@XxlJob新注解和@JobHandler老注解方式。您无需修改代码，即可以将XXL-JOB任务在SchedulerX 2.0平台上托管。本文介绍在SchedulerX 2.0平台上托管的优势和方法。功能优势...
调度周期：月调度
任务调度周期是基于单个任务维度的配置，任务最终是否每天调度与任务本身定义的调度周期有关，与上游节点的调度周期无关，但上游节点定义的调度时间将影响下游节点实际开始调度的时间。月调度支持将 指定时间 配置为 每月最后一天，则每...
SimRank+相似度计算算法
本文介绍了推荐系统中一个常用的协同过滤算法SimRank，包括它的算法原理，及其应用在个性化推荐场景时的改进。同时，本文还描述了如何在生产环境部署SimRank+算法。算法简介 SimRank算法是一种用于衡量结构上下文中个体相似度的方法，其...
离线调度
本工作流数据集是通过Random算法随机生成的，因此不对工作流结果进行评估，仅介绍如何构建工作流及大数据开发套件调度。步骤一：准备数据集 本工作流训练数据集包括2016年09月19日和2016年09月20日的历史数据，针对2016年09月21日的数据...
场景：切换调度时区
在创建DataWorks工作空间时，您需要选择工作空间所在地域，默认情况下DataWorks工作空间所在地域对应的时区即为调度时区（即任务定时调度时间所使用的时区）。同时，还支持您切换工作空间的调度时区，本文为您介绍如何切换调度时区。背景...
离线模式调度配置
调度配置用于定义节点在生产环境的周期调度方式。您可以通过配置属性中调度属性，配置任务调度周期与生效日期等。本文为您介绍如何配置流批一体任务的调度配置。操作步骤 请参见 离线模式配置入口，进入实时任务的 离线模式 配置页面。在...
离线模式调度配置
调度配置用于定义节点在生产环境的周期调度方式。您可以通过配置属性中调度属性，配置任务调度周期与生效日期等。本文为您介绍如何配置流批一体任务的调度配置。操作步骤 请参见 离线模式配置入口，进入实时任务的 离线模式 配置页面。在...
导出DMS操作日志到阿里云日志服务
周期调度 配置项 说明 调度周期 选择调度任务的周期：日：按每日一次的频率执行任务调度，需要配置每日调度的具体时间。周：以周为周期，每个指定天执行一次任务调度，需要配置指定时间和具体时间。月：以月为周期，每个指定天执行一次任务...
调度参数配置最佳实践
背景信息 调度参数配置的相关应用场景及最佳实践如下：调度参数配置最佳实践 调度参数在数据集成的典型应用场景 各类型节点的调度参数配置示例：SQL类型节点及离线同步节点 PyODPS节点 通用Shell节点 自定义参数取值差异对比示例：不同格式...
工作原理
本文介绍时序预测的背景信息、功能、调度与执行场景、使用建议等信息。背景信息 服务在运行过程中会产生各种各样的时序数据，记录了服务的各种指标随时间的变化情况。时序数据的监控分析被广泛地应用在系统监控和故障定位中。对于时序数据...
离线任务调度属性配置
调度属性用于定义节点在生产环境的周期调度方式。您可以通过配置属性中调度属性，配置任务调度周期与生效日期等。本文为您介绍如何配置任务的调度属性。操作步骤 在Dataphin首页，单击顶部菜单栏的 研发。按照以下操作指引，进入离线集成...
- 产品推荐
- 这些文档可能帮助您