等待资源
为什么会出现等待资源？为什么任务一直在等待gateway调度资源？为什么数据集成任务一直显示wait？为什么会出现等待资源？问题现象 调度将任务下发到对应执行引擎上，此过程可能会出现以下等待资源问题：等待调度资源组。数据集成任务等待...
预测式外呼
调度算法会综合考虑当前坐席的在线数量、空闲情况、外呼号码的呼叫频率限制、电话接通率、通话等待时长、通话时长、话后处理时长等因素，并考虑呼损（客户接通后等待坐席服务过程中挂机）的情况下，通过自动尝试、自动调整、自动学习来控制...
提交节点报错：当前节点依赖的父节点输出名不存在
不是DataWorks每天调度产出的表数据，是不需要设置节点依赖关系的，这类表依赖可以删除，删除后提交节点时，会出现血缘关系与调度依赖配置不一致的提示，您可确认一下，是否除了删除的非周期性生成数据表的依赖关系外，有没有其他血缘与...
使用限制
注意事项 在使用DMS任务编排功能时，可能会出现任务调度延迟或由于SQL及脚本缺少幂等性而影响下游数据正确性的情况。如下为您说明出现这种情况的场景以及处理方案。任务调度延迟 在每日凌晨和每小时整点的任务调度高峰期，可能会出现任务...
BUILD
即某任务在该时间内调度，会出现因执行时间较长，超出该时间段的情况。示例 配置0~6点和18~24点调度BUILD任务。SET ADB_CONFIG RC_CSTORE_BUILD_SCHEDULE_PERIOD=`0,6;18,24`;配置BUILD调度优先级 BUILD调度是按照单表某个一级分区新增数据...
服务端发布记录
本文介绍分布式任务调度SchedulerX产品发布的功能变更，包括新增功能、功能优化、重要问题修复等，帮助您了解SchedulerX的发布动态。发布记录 2024-02-29 功能名称 变更类型 功能描述 相关文档 Java版本SDK v1.11.1 修复 Netty、Logback等...
使用Gang scheduling
例如，当您提交一个包含多个任务的批量Job时，可能会出现多个任务全部调度成功或者都调度失败的情况。这种All-or-Nothing调度场景，就被称作Gang scheduling。ACK将一组需要同时调度的Pod称为PodGroup。您在提交All-or-Nothing作业时，可以...
使用Gang scheduling
例如，当您提交一个包含多个任务的批量Job时，可能会出现多个任务全部调度成功或者都调度失败的情况。这种All-or-Nothing调度场景，就被称作Gang scheduling。ACK将一组需要同时调度的Pod称为PodGroup。您在提交All-or-Nothing作业时，可以...
开发PyODPS 3任务
DataWorks为您提供PyODPS 3节点，您可以在该节点中直接使用Python代码编写MaxCompute作业，并进行作业的周期性调度。本文为您介绍如何通过DataWorks实现Python任务的配置与调度。前提条件 已创建PyODPS 3节点，详情请参见 创建并管理...
算法应用
绘制区域 区域检测类型的算法模型，例如区域入侵、人群聚集、离岗检测等会出现该功能按钮。单击 绘制区域 后，在弹出对话框中单击 绘制矩形 或者 绘制多边形，并根据您的需求，画出矩形或多边形，设置检测区域。单击 图标，保存绘制的内容...
功能特性
并且，CLB 已经在大部分地域支持了多可用区部署，当主可用区出现故障时，可自动切换到备可用区上提供服务。✔ ✔ 安全防护 结合云盾，可提供5 Gbps的防DDoS攻击能力。✔ ✔ 网络类型支持 CLB 提供公网和私网类型的负载均衡服务。您可以创建...
迁移CLB
迁移中：迁移时将MSE云原生网关的节点挂载到用户SLB的指定虚拟服务器组中，并设置新挂载节点的总权重值，例如设置为10%，然后将SLB的调度算法调整为加权轮询，此时Client请求SLB的流量就会按照权重值进行分流，会有10%的流量进入MSE云原生...
ALB服务器组概述
如果同一个服务器组中仅包含健康检查异常的服务器时，ALB仍会尝试根据调度算法将请求路由至这些服务器，而不考虑这些服务器的运行状况，以最大可能避免您的业务受损。更多信息，请参见 同一个服务器组的所有后端服务器健康检查均异常时，...
订阅常见问题
调度状态会按照设置的时间定时发送邮件，调度状态下会出现邮件发送成功或者失败的现象。邮件订阅发送失败，日志信息提示“has no valid receiver”。邮件发送对象未绑定邮箱。您需要登录 Quick BI控制台，在个人设置中绑定邮箱。
添加TCP监听
调度算法 选择调度算法。加权轮询(WRR)：权重值越高的后端服务器，被轮询到的概率越高。轮询(RR)：按照访问顺序依次将外部请求分发到后端服务器。一致性哈希（CH）：四元组：基于四元组（源IP、目的IP、源端口和目的端口）的一致性哈希，...
负载均衡调度算法介绍
负载均衡会根据配置的调度算法，将来自客户端的请求按照对应的算法规则转发至相应的后端服务器。负载均衡支持轮询、加权轮询、加权最小连接数、一致性哈希等多种调度算法，用于支持不同的业务场景。本文列出所有负载均衡系列产品支持的调度...
代码解析结果对比
若该节点代码中配置了依赖A表的数据，但未将产出A表数据的节点作为当前节点依赖的上游，则可能会出现A表数据未产出，当前节点便开始执行，最终导致当前节点产出的表数据出现问题。影响示例：本节点产出的表变更 当前节点提交时，与生产环境...
使用负载均衡SLB时为何出现请求分布不均衡的现象
问题描述 在使用负载均衡SLB时，后端ECS实例出现请求分布不均衡的情况。问题原因 请求分布不均衡可能有以下几种原因：总体的请求数较少。例如，总请求数为7，后端服务器组*有3台ECS实例，不考虑其他功能的影响，3台ECS实例中将有1台被分配...
补数据
为什么补数据选择业务时间昨天和今天，也会出现等待时间的情况？为什么补数据选择补0点~1点生成了多个实例？为什么进行大量补数据操作时，会出现等待资源情况（实例显示黄色，实例状态为等待资源）？为什么补数据报错调起的节点运行时间不...
为什么会空跑
本文为您介绍空跑的相关问题。什么是空跑？为什么会空跑？场景一：周月实例空跑周期 场景二：实时生成的过期实例 场景三：设置成功实例 场景四：实例属性为空跑 场景五：临时工作流中未被选择的实例 日调度任务空跑排查方法 什么是空跑？...
添加负载均衡CLB
该SLB已有的监听信息 当您选择已有SLB时，该参数才会出现。您可以查看网络协议、端口号和容器端口（Target port）。TCP|HTTP 协议 SLB端口（应用名）：私网负载均衡前端端口，通过该端口访问应用，可设置范围为1~65535。容器端口...
任务实例状态异常
等待调度资源（日志中会显示），若出现此类等待说明当前项目下正在运行的任务达到上限，可以右键实例在运行诊断的调度资源部分查看任务等待资源时，哪些任务正在占用资源。实例状态：灰色（待运行）请继续右键灰色实例，查看上游父节点，看...
添加安全加速规则
建议您在修改DNS解析前，先通过修改本地计算机的 hosts 文件配置，验证流量调度规则，避免因回源策略不一致出现不兼容问题。例如，在CDN和高防联动且回源到OSS的场景，由于CDN回源支持修改 回源HOST，而DDoS高防不支持，导致发生攻击自动...
创建工作空间
调度PAI算法任务 如需进行周期性调度算法任务，则可启用该功能。您也可在创建工作空间后，进入管理中心，在 工作空间 页面开启。说明 该功能开启后无法关闭，请根据需要开启。调度PAI算法任务详情，请参见 机器学习。描述 用于辅助标识工作...
其他常见问题
单实例部署多个客户端，导致找不到连接 一个实例（ECS、虚拟机、Pod）不允许部署多个 AntScheduler 客户端，否则会出现连接互踢的问题。AntVIP 地址配置错误 问题现象 出现[AntVIPRouter]Get scheduler servers failed 报错。问题原因 ...
存储多可用区部署的推荐配置
通过存储多可用区部署优化，可以帮您最大限度地减少应用发布中断，确保关键业务系统和应用在各种故障情况下能持续运行。本文介绍存储在多可用区部署时的推荐配置。背景信息 Kubernetes强大的容器编排能力，使得用户在Kubernetes上构建大...
工作原理
使用文本分析功能后，您只需要配置具体的监控项和少量的算法参数，算法会自动帮您识别日志中的异常情况，使您聚焦需要关注的日志内容。功能介绍 目前，文本分析支持通过消费组方式拉取日志中的文本内容，不需要配置索引。文本分析作业按照...
SimRank+相似度计算算法
在推荐系统中的应用 原始的SimRank+算法是在计算广告领域做Query Rewrite的，一般会用最近一段时间的累计点击行为数据来计算Query-Query、Ad-Ad之间的相关性。由于Query所表达的查询意图短期内能够保持稳定，所以用多天的行为数据来计算...
添加HTTPS监听
调度算法 选择调度算法。加权轮询（WRR）：权重值越高的后端服务器，被轮询到的次数（概率）也越高。轮询（RR）：按照访问顺序依次将外部请求分发到后端服务器。开启会话保持 选择是否开启会话保持。开启会话保持功能后，负载均衡会把来自...
容器网络FAQ
早于2022年10月创建的集群节点可能未默认启用所有IPVS调度算法，您需要手动在所有集群节点上启用IPVS调度算法内核模块（以最小连接数调度算法lc为例，如果选用其他算法，请替换lc关键字），逐台登录每个节点，并运行 lsmod|grep ip_vs_lc ...
Alibaba Cloud Linux 2系统中TCP拥塞控制算法BBR对...
该算法会在CPU使用率高、网络数据包（PPS）高的情况下，对网络性能产生一定影响。例如，Redis数据库的性能降低。镜像：aliyun_2_1903_64_20G_alibase_20190619.vhd 及之前所有的镜像版本。内核：kernel-4.19.48-14.al7 及之前所有的内核...
多终端节点组流量调配原理及应用场景
您可以分别为北京和上海地域的终端节点组开启健康检查，当上海地域终端节点组健康检查出现异常时，监听会自动将访问流量调度至健康检查正常的北京地域终端节点组；而当上海地域终端节点组恢复正常后，监听会自动恢复上海客户端的流量调配，...
Dataphin中小时调度的任务可以依赖天调度的任务吗？
详细信息 不建议小时调度的任务上游依赖天调度的任务，可能会出现每个小时跑的数据都一样的情况。对于这种情况，建议上游任务也是小时调度。或者上游任务中数据是定时更新的。比如逻辑表上游是管道任务，管道任务给逻辑表的来源主表中同步...
调度依赖配置指引
默认节点的上下游产出表存在强依赖关系（即下游表数据的产出需要依赖上游产出的表数据），因此，任务在配置调度依赖时，需确认是否存在强血缘依赖，即确认当前任务是否会因为上游数据未产出而导致当前任务取数出现问题。若下游节点中表数据...
组件参考：所有组件汇总
条件随机场预测 该组件是基于linearCRF在线预测模型的算法组件，主要应用于处理序列标注问题。Split Word（生成模型）该组件基于AliWS（Alibaba Word Segmenter）词法分析系统，根据参数和自定义词典生成分词模型。词频统计 该组件是指输入...
确认表血缘
导致下游取数出现问题 若当前节点 Job_B 代码中配置了依赖A表的数据，但未将产出A表数据的节点 Job_A 作为当前节点依赖的上游，则可能会出现A表数据未产出，当前节点便开始执行，最终导致 Job_B 节点产出的表数据出现问题。虽然 Job_A 的...
其他问题
任务执行是按照业务连线的先后顺序执行，即当前一节点运行结束，后一节点才能运行，所以当前一节点运行时间过长，运行结束时间大于后一节点计划执行时间点，这样后一节点就会出现实际运行时间可能和计划的时间不一致。当两个节点的调度周期...
调度设置
若您的任务需要周期性运行，则在配置任务的调度属性前，需先进入DataStudio的调度设置页面开启调度功能，开启后，周期任务的调度配置才会生效。同时，DataWorks支持设置周期任务默认使用的资源组，支持设置任务的默认重跑属性、重跑次数、...
云产品联动
云产品联动表示通过自定义规则，联动使用DDoS高防与阿里云公网IP资源，解决网站业务接入高防防护后，正常业务访问延时增加的问题。前提条件 业务使用阿里云公网IP资源，具体包括拥有公网IP的云服务器ECS或负载均衡SLB、弹性公网IP、Web应用...
常见问题
为什么实例停止之后还会执行？如何进行任务管理高级配置？机器繁忙（all workers are busy）该怎么办？任务常见问题 如何接入链路追踪？任务常见问题 应用发布过程，任务执行卡住或变慢 单击运行一次后，系统提示输入实例参数，如何处理？...
- 产品推荐
- 这些文档可能帮助您