未来规划
如何对海量数据进行在线分析和计算，支持实时在线交互式分析，需要做并行处理（DSP 模型、MPP 模型等等），对并行调度计算进行优化。系统能力提升：智能化+安全（使用方便可靠、运维简易）。如在管控平台的层面如何做智能化的调度、监控...
概述
功能简介 弹性并行查询（Elastic Parallel Query，ePQ）目前支持单机并行和多机并行两种并行引擎，单机并行引擎等效于原有的并行查询，多机并行引擎支持集群内跨节点的自适应弹性调度。PolarDB MySQL版 8.0.1版本支持单机并行查询，查询时...
PolarDB MySQL版8.0版本内核参数发布日志
loose_pq_mpp_allow_imci_node Global/Session 用于设置弹性并行查询（ePQ）是否允许向列存节点调度并行的workers任务。取值范围如下：OFF（默认）：弹性并行查询（ePQ）不允许向列存节点调度并行的workers任务。ON：弹性并行查询（ePQ）...
搜索引擎线路
概述 搜索引擎是指搜索引擎爬虫（又被称为网页蜘蛛，网络机器人），是一种按照一定的规则、自动地抓取万维网信息的程序或者脚本。应用场景 网站被搜索引擎爬虫访问会耗费服务器的流量和带宽，可通过设置 搜索引擎线路 专门指向一个服务器...
快速开始
设置阈值控制多机并行引擎的自适应弹性调度 PolarDB提供了两个阈值来控制是否选择多机并行，SQL语句只要满足如下任意一个条件，并行查询会考虑弹性扩展为多机并行。records_threshold_for_mpp 若查询语句中存在扫描记录超过该阈值的表，...
识别规则及识别方式
调度任务并行度 用于控制同时扫描的资产对象数量，默认为16，支持配置1~100的正整数。说明 增大并行度可加快扫描进度，但会占用更多的集群计算资源，请您根据业务需求进行合理配置。调度黑名单 默认关闭，开启后，可以设置调度黑名单，在...
识别规则及识别方式
调度任务并行度 用于控制同时扫描的资产对象数量，默认为16，支持配置1~100的正整数。说明 增大并行度可加快扫描进度，但会占用更多的集群计算资源，请您根据业务需求进行合理配置。调度黑名单 默认关闭，开启后，可以设置调度黑名单，在...
什么是自动驾驶开发平台
数据管理提供自动驾驶采集数据在云上数据预处理、预标注、管理、检索、重组、回放、输出到仿真或训练系统中的能力：非结构化数据处理针对非结构化数据处理提供DAG调度和并行计算能力，构建自动调度的10倍加速的自动驾驶数据工作流 多模态...
并行资源控制策略配置
并行查询排队策略参数 max_parallel_workers 为单个节点内允许同时运行的最大并行worker线程数，超过 max_parallel_workers 后新的并行查询将进入排队等待，任务队列调度策略为先入先出（FIFO）。queuing_parallel_degree_limit 为队列中...
如何创建秒级调度任务
秒级任务适合对实时性要求比较高的业务，例如不停做轮询的准实时业务，通过内存网格和秒级调度，可以让您不停地处理海量的数据。本文介绍如何创建秒级调度任务并将设置固定延迟。SchedulerX的秒级别任务属于定时调度类型，适用于简单Java...
应用管理
且可以同时配置多个Webhook机器人，机器人链接用英文半角逗号（,）分割。Webhook配置需要在钉钉机器人增加关键字 SchedulerX（区分大小写），否则会收不到告警信息。如果是自定义Webhook，您需要确保其Webhook能够正确地解析和处理以下格式...
Fixed rate
Cron原生不支持无法被60整除的分钟间隔调度，例如每40分钟执行一次的任务。为解决此类精细化定时需求，可采用Fixed rate定期轮询机制，它能够简洁地表达非标准时间间隔的定期任务执行，且表达式简单，但不支持秒级别。Fixed rate定时配置...
API调度
您可以使用API触发任务调度。关于API触发的使用方式，请参见 服务接入点。
Second delay
Second delay具有以下优势：高可靠：SchedulerX的秒级别任务具有高可靠的特性，如果某台机器宕机了，可以在30秒内在另一台机器上重新运行。丰富的任务类型：SchedulerX的秒级别任务属于定时调度类型，可以适用于所有的任务类型和执行方式。...
欠费说明
本文介绍分布式任务调度SchedulerX的欠费停机策略。欠费停机影响 欠费后，控制台无法新建调度任务。欠费超过7天后，控制台自动释放调度任务实例。结清账单后，被释放的实例不可恢复。如果欠费影响了业务，例如调度任务被禁用，需要加入钉群...
Cron
6#3 每月的第三个周五10:15触发 Cron定时调度配置示例 在创建调度任务时可以使用Cron定时调度，创建调度任务的详细操作步骤请参见 创建调度任务。本文仅介绍在创建调度任务时如何配置Cron定时调度。进入 定时配置 页签，详情请参见 创建...
如何重刷数据
重刷调度任务 如果您的业务发生变更，如数据库增加一个字段或者上一个月数据有错误，需要把过去一段时间的任务重新执行一遍，可以重刷调度任务数据。说明 任务和工作流都支持重刷数据（只支持天级别的调度周期）。如果您之前执行的某个调度...
产品功能
通过SchedulerX可以管理定时调度任务、查询任务执行记录和运行日志。本文介绍SchedulerX调度、执行和运维三个方面的功能。定时调度 Crontab 支持Unix Crontab表达式，不支持秒级别调度。更多信息，请参见 Cron。Fixed rate Crontab必须被60...
如何重刷数据
重刷调度任务 如果您的业务发生变更，如数据库增加一个字段或者上一个月数据有错误，需要把过去一段时间的任务重新执行一遍，可以重刷调度任务数据。说明 任务和工作流都支持重刷数据（只支持天级别的调度周期）。如果您之前执行的某个调度...
什么是分布式任务调度SchedulerX
分布式任务调度SchedulerX是阿里巴巴自研的分布式任务调度平台，兼容开源XXL-JOB、ElasticJob、Spring Schedule，K8s Job，支持Cron定时、一次性任务、可视化工作流任务编排和分布式跑批，具有高可用、可观测、可运维和低延时等能力。...
创建资源
且可以同时配置多个Webhook机器人，机器人链接用英文逗号（,）分割。需要在钉钉机器人增加关键字“SchedulerX”（区分大小写），否则会收不到告警信息。获取Webhook的方法请参见 钉钉开发文档、企业微信开发文档 和 飞书开发文档。手机号 ...
创建CDH Impala节点
访问公网或VPC网络时，请选择与目标节点网络连通的调度资源组作为周期调度任务使用的资源组。详情请参见 配置资源组与网络连通。步骤四：调试代码任务（可选）选择运行资源组、赋值自定义参数取值。在工具栏单击 图标，在 参数 对话框选择...
任务管理高级配置参数说明
1 子任务单机并发数 并行计算 内存网格 网格计算 分布式模型，单台机器并发消费子任务的个数。5 子任务失败重试次数 并行计算 内存网格 网格计算 分布式模型，子任务失败自动重试的次数。0 子任务失败重试间隔 并行计算 内存网格 网格计算 ...
资源包（专业版）
背景信息 SchedulerX针对 任务调度CU 推出了一种预付费资源包模式，帮助您以更优惠的价格享受同等的任务调度CU数量，从而减少费用支出。资源包类型与定价 SchedulerX目前只提供一种类型的资源包，即任务调度CU资源包，用于抵扣SchedulerX...
操作记录
您可以通过操作记录页面，查看应用分组、调度任务和流程的操作记录。操作步骤 登录 分布式任务调度平台，在顶部菜单栏选择地域，在左侧导航栏，单击 操作记录，在 操作记录 页面选择目标命名空间，查看操作记录。说明 操作记录 页面仅记录...
和开源产品对比
在分布式任务调度领域中，Quartz、ElasticJob和XXL-JOB是广受欢迎的开源解决方案。为了更深入地理解分布式任务调度技术并全面评估SchedulerX在此领域的优势与特点，本文将对比SchedulerX与这些主流开源产品的特性与功能。项目 Quartz ...
如何指定标签
任务调度时，机器被随机分配，所以灰度任务被分配到正常机器时，可能无法找到实现类。传统解决方案 传统解决方案下，往往会创建多个应用分组，例如为灰度机器专门配置一个Group ID。但这种解决方案具有以下局限性。正常的任务无法调度到...
One Time
One Time即一次性任务调度，配置完成后任务将在设置的时间点执行一次，执行完成后调度平台会自动清理任务，您无需在客户端执行删除任务的操作。一次性任务调度适用于订单超时未支付、自动关闭定时日历提醒等场景。本文介绍如何通过API创建...
创建CDH Hive节点
访问公网或VPC网络时，请选择与目标节点网络连通的调度资源组作为周期调度任务使用的资源组。详情请参见 配置资源组与网络连通。步骤四：调试代码任务（可选）选择运行资源组、赋值自定义参数取值。在工具栏单击 图标，在 参数 对话框选择...
创建CDH Presto节点
访问公网或VPC网络时，请选择与目标节点网络连通的调度资源组作为周期调度任务使用的资源组。详情请参见 配置资源组与网络连通。步骤四：调试代码任务（可选）选择运行资源组、赋值自定义参数取值。在工具栏单击 图标，在 参数 对话框选择...
基础版商业化公告（2021年07月30日）
为提供更优质的服务，阿里云分布式任务调度SchedulerX将于2021年09月01日正式商业化。对于公测期间创建的实例，如果2021年09月01日00:00:00前没有释放，那么我们将默认您所创建的集群采用按量付费模式开始收费。开通商用实例 分布式任务...
资源包（专业版）推出公告
阿里云分布式任务调度SchedulerX专业版于2023年02月01日推出任务调度CU预付费资源包，帮助您以更优惠的价格享受等量的任务调度CU，从而减少费用支出。更多信息，请参见 资源包（专业版）。
联系我们
如果您在使用分布式任务调度SchedulerX的过程中有任何疑问和建议，欢迎使用钉钉搜索群号 23103656 加入钉钉群与我们交流。
开通SchedulerX
背景信息 阿里云分布式任务调度SchedulerX已于2021年09月01日正式商业化。操作步骤 登录 分布式任务调度平台。首次使用并登录分布式任务调度平台，在弹出的对话框中单击 开通。在 分布式任务管理 页面，单击 立即购买。在 确认订单 页面 ...
MySQL节点
网络联通说明 网络连通说明 MySQL节点需要访问MySQL服务，您需要确保独享调度资源组和MySQL数据库的网络已连通，关于独享调度资源组网络连通方案，详情请参见：绑定专有网络。配置白名单 若MySQL数据库存在白名单访问控制，您需要在MySQL...
如何使用定时任务的灰度
方案二：一个任务通过自动调度和手动调度来进行灰度 如果您希望在灰度发布时，将定时任务在灰度机器上 运行一次 进行验证，则不用复制任务。您可继续使用之前的任务，在SchedulerX控制台手动 运行一次 指定Label。您也可以使用Jenkins等...
工作流调度
使用说明 工作流中的Job没有独立调度时间，跟随工作流的时间开始调度。工作流调度至少要有2个Job，且有依赖关系。如果只有一个Job，请直接使用任务管理。工作流支持跨应用编排，可以将不同应用下的任务进行编排。使用限制 当前只有Java任务...
DataWorks任务
SchedulerX可支持定时调度DataWorks任务，并将DataWorks任务与其他任务在SchedulerX上进行混合依赖编排，完成相应的定期任务数据处理。前提条件 SchedulerX客户端升级至1.3.4及以上版本。接入客户端，将具备访问DataWorks（需开通企业版）...
创建EMR Presto节点
Presto（即PrestoDB）是一款灵活、可扩展的分布式SQL查询引擎，支持使用标准的SQL查询语言进行大数据的交互式分析查询（Presto概述），DataWorks为您提供EMR Presto节点，便于您在DataWorks上进行Presto任务的开发和周期性调度。...
命名空间管理
创建命名空间 登录 分布式任务调度平台。在顶部菜单栏选择地域。在左侧导航栏，单击 命名空间。单击 创建命名空间。在 创建命名空间 面板，输入命名空间的 名称 和 描述，然后单击 确定。命名空间创建成功，会提示 创建成功。返回 命名空间...
- 产品推荐
- 这些文档可能帮助您