任务触发与执行问题
问题原因 仅当任务处于“启用”状态时重试策略才会生效，“禁用”时执行失败不会进行重试。解决方案 登录 任务调度 控制台。单击 任务配置，然后在任务列表中启用该任务。任务触发时间间隔过短 问题现象 出现 the interval for tasks of ...
多语言版本分片模型
SchedulerX可以对多重任务进行调度（定时、编排、重刷历史数据等），提供Java、Python、Shell和Go等多语言分片模型，帮助您处理大数据业务需求。背景信息 分片模型主要包含静态分片和动态分片。静态分片：主要场景是处理固定的分片数，例如...
如何保证幂等性
您在调用 AnalyticDB PostgreSQL版 API时，如果发生请求超时或服务器内部错误，客户端可能会尝试重发请求。您可以在请求中设置 ClientToken 参数避免多次重试带来重复操作的问题。什么是幂等性 在数学计算或者计算机科学中，幂等性...
JobContext参数说明
String instanceParameters 通过API触发的动态实例参数 int maxAttempt 实例最大重试次数 int attempt 实例当前重试次数 int taskMaxAttempt 子任务最大重试次数 int taskAttempt 子任务当前重试次数 List<JobInstanceData>upstreamData ...
如何保证幂等性
您在调用ECS API时，如果发生请求超时或服务器内部错误，客户端可能会尝试重发请求。您可以在请求中设置 ClientToken 参数避免多次重试带来重复操作的问题。什么是幂等性 在数学计算或者计算机科学中，幂等性（idempotence）是指相同操作或...
One Time
也适用所有分布式模型，例如单机、广播、分片、MapReduce等。可视化运维：SchedulerX的一次性任务和其他任务一样，具有可视化的界面，方便您观测和查询。并且支持在调度时间到达之前修改任务参数，支持失败自动重试等功能。通过API创建一次...
如何保证幂等性
您在调用弹性伸缩的API时，如果发生请求超时或服务器内部错误，客户端可能会尝试重发请求。您可以在请求中设置 ClientToken 参数避免多次重试带来重复操作的问题。什么是幂等性 在数学计算或者计算机科学中，幂等性（idempotence）是指相同...
功能架构
基于系统丰富数据和强大功能，可以支撑容灾巡检、故障重放、弹性扩缩、微服务治理和全链路压测等场景。应用监控 系统能同时监控容器应用和经典应用，并通过 LDC、IDC 和单机实例等多视角、多维度逐层下钻分析，实时展现服务实例、依赖的...
如何保证幂等性
您在调用ROS API时，如果发生请求超时或服务器内部错误，客户端可能会尝试重发请求。您可以在请求中设置ClientToken参数避免多次重试带来重复操作的问题。什么是幂等性 在数学计算或者计算机科学中，幂等性（Idempotence）是指相同操作或...
创建调度任务
最多重试三次：失败后立即进行重试，但最多重试三次。优先级 用于识别任务的重要性，暂无其他作用。默认为 中等。高级选项 选择是否配置高级选项。开启后，可根据需要配置如下参数：当 通信方式 设置为 单向 ONEWAY 时，可配置如下参数：单...
功能特性
多种失败重试模式 支持的失败重试模式包括手动重试、不重试、重试三次、重试到下次触发，并支持配置超时时间。多种漏触发处理策略 漏触发处理策略包括不处理、立即触发、时间充裕则立即触发三种。支持在线配置调度任务入参 支持配置自定义...
错误代码
ERROR 1003:Transaction error,need to rollback 问题描述：在事务中执行时如果出现了 SQL 执行异常，数据访问代理为了数据安全，会强制将事务状态设置为中断，需要显式调用 rollback 后才能继续执行其他 SQL。排查方法：确认是否有数据库...
One Time
也适用所有分布式模型，例如单机、广播、分片、MapReduce等。可视化运维：SchedulerX的一次性任务和其他任务一样，具有可视化的界面，方便您观测和查询。并且支持在调度时间到达之前修改任务参数，支持失败自动重试等功能。通过API创建一次...
重保应急原则
常见的被攻击风险包括：攻击类型 攻击原理 风险说明 DDoS攻击 DDoS全名是Distributed Denial of service（分布式拒绝服务攻击），是指借助于客户/服务器技术，将多个计算机联合起来作为攻击平台，对一个或多个目标发动拒绝服务攻击，从而...
列表去重
1.组件介绍 说明 必要前置组件：无 利用本组件可以列表去重 2.输入项 说明 请参照可视化编辑器内组件面板中各输入项的帮助信息 3.输出项 说明 请参照可视化编辑器内组件面板中各输出项的帮助信息 4.组件使用示例 4.1.组件配置示例 在 目标...
功能特性
微服务有高性能分布式服务框架、微服务治理中心、高可靠的轻量级配置中心、多活数据中心等特性，本文主要介绍这些特性。高性能分布式服务框架 提供高性能和透明化的 RPC 远程服务调用，具有高可伸缩性、高容错性的特点。支持多协议、多序列...
重试机制
最后将 Conditions 配置到 RetryPolicy 中：RetryPolicy retryPolicy=RetryPolicy.builder().maxNumberOfRetries(3)/最大重试次数.maxDelayTimeMillis(20*1000)/最大重试间隔时间，单位为 ms，超过这个时间则不再重试.retryConditions...
重命名文件
1.组件介绍 说明 必要前置组件：无 利用本组件可以实现重命名文件 2.输入项 说明 请参照可视化编辑器内组件面板中各输入项的帮助信息 3.输出项 说明 请参照可视化编辑器内组件面板中各输出项的帮助信息 4.组件使用示例 4.1.组件配置示例 在...
正则解析
Logtail正则解析插件支持通过正则表达式提取日志字段，并将日志解析为键值对形式。功能入口 当您需要使用Logtail插件处理日志时，您可以在创建或修改Logtail配置时，添加插件。具体操作，请参见 概述。配置说明 参数名称 说明 原始字段 ...
功能特性
服务高可用 支持客户端限流，集群容错（失败重试），服务熔断（故障剔除），故障注入，服务降级等保障服务高可用。服务安全 支持 CRC 校验，调用加解密，黑白名单等保障服务的安全。服务的监控 支持 Metrics 2.0 规范的日志埋点，支持成功...
SOFAMQ 常见问题
每次重试的间隔时间如下：第几次重试 每次重试间隔时间 1 10 秒 2 30 秒 3 1 分钟 4 2 分钟 5 3 分钟 6 4 分钟 7 5 分钟 8 6 分钟 9 7 分钟 10 8 分钟 11 9 分钟 12 10 分钟 13 20 分钟 14 30 分钟 15 1 小时 16 2 小时 广播消费方式 广播...
和开源产品对比
在分布式任务调度领域中，Quartz、ElasticJob和XXL-JOB是广受欢迎的开源解决方案。为了更深入地理解分布式任务调度技术并全面评估SchedulerX在此领域的优势与特点，本文将对比SchedulerX与这些主流开源产品的特性与功能。项目 Quartz ...
监控项表达式编写
在 Node.js 性能平台的监控设置中，有两项表达式需要用户进行输入，阈值表达式 和 报警表达式。监控系统会根据阈值表达式来进行是否进行报警的判定。当判定完成，决定发送警报时，会使用报警表达式来描述警报的详情。阈值表达式 阈值表达式...
UpdateJob
TimeType Integer 是 1 时间配置类型，目前支持以下几种配置类型：cron：1 fix_rate：3 second_delay：4 api：100 TimeExpression String 否 30 时间表达式，根据选择的时间类型设置时间表达式。cron：填写标准的cron表达式，支持在线验证...
数据科学计算概述
MaxFrame是由阿里云自研的分布式科学计算框架，是对历史相关产品功能（PyODPS、Mars）的重大升级，在MaxCompute之上提供一套完全兼容Pandas接口的API，让用户用更为熟悉、更符合Python社群习惯的方式使用MaxCompute。本文为您介绍...
BITMAP精准去重
本文介绍 云数据库 SelectDB 版 提供的Bitmap去重功能，帮助您进行数据去重，加速查询。概述 云数据库 SelectDB 版 支持Bitmap类型，在Aggregate数据模型中，Bitmap类型的Value字段可以和集合的交并集聚合函数配合，实现数据的精确去重功能...
CREATE POLICY
按命令类型应用的策略 命令 SELECT/ALL策略 INSERT/ALL策略 UPDATE/ALL策略 DELETE/ALL策略 USING表达式 WITH CHECK表达式 USING表达式 WITH CHECK表达式 USING表达式 SELECT 现有行—SELECT FOR UPDATE/SHARE 现有行—现有行—INSERT—新...
多语言版本分片模型
SchedulerX可以对多重任务进行调度（定时、编排、重刷历史数据等），提供Java、Python、Shell和Go等多语言分片模型，帮助您处理大数据业务需求。背景信息 分片模型主要包含静态分片和动态分片。静态分片：主要场景是处理固定的分片数，例如...
任务拓扑相关问题
人工干预操作对象错误 问题现象 节点触发错误：can not trigger activity when topology is PAUSED or CANCEL 节点恢复错误：only allowed to resume PAUSED trigger instance 节点重试错误：activity instance could not be retried which...
JobContext参数说明
String instanceParameters 通过API触发的动态实例参数 int maxAttempt 实例最大重试次数 int attempt 实例当前重试次数 int taskMaxAttempt 子任务最大重试次数 int taskAttempt 子任务当前重试次数 List<JobInstanceData>upstreamData ...
LOD函数
表达式说明 基本公式 三种LOD表达式的使用结构和语法分别如下：使用结构 lod_fixed{<维度声明>:<聚合表达式>} lod_include{<维度声明>:<聚合表达式>} lod_exclude{<维度声明>:<聚合表达式>} 示例：lod_fixed{[订单日期]:sum([订单金额])} ...
什么是经典应用服务
强大的发布部署能力：提供分组发布、Beta 发布、灰度发布、单机房发布、蓝绿发布等多种灵活的部署策略，从各种需求层面，支持可视化、自动化、可重试、可回滚的发布部署。灵活的运维管道能力：提供录入，执行用户自定义的运维命令和脚本...
流程管理
说明 目前工作流调度仅支持Cron表达式。登录 EDAS控制台。在左侧导航栏单击 任务调度。在顶部菜单栏选择地域。在左侧导航栏单击 流程管理。在 流程管理 页面选择目标命名空间，然后单击 创建工作流。在 创建工作流 面板，设置工作流的 名称...
执行列表
登录 分布式任务调度平台。在顶部菜单栏选择地域。在左侧导航栏单击 执行列表。在 执行列表 页面的 所属命名空间 列表选择具体的命名空间，然后单击 任务实例列表 或 流程实例列表 页签。默认显示 全部 执行记录。可以对执行记录进行筛选和...
基础术语
说明 任务重跑时可能会重复产生差异。差异数据 也叫差异，指核对任务执行时（执行 SQL）发现的不匹配核对规则的数据。您可以在异常详情里查看在某个核对周期中发现的抽样差异数据。差异数量 核对任务执行时发现的差异数据的总数。说明 您在...
流程管理
创建工作流 登录 分布式任务调度平台。在顶部菜单栏选择地域。在左侧导航栏，单击 流程管理。在 流程管理 页面选择目标命名空间，然后单击 创建工作流。在 创建工作流 面板，设置工作流的 名称、描述、应用ID 和 时间类型 等配置项，然后...
API概览
本产品（分布式任务调度/2019-04-30）的OpenAPI采用 RPC 签名风格，签名细节参见 签名机制说明。我们已经为开发者封装了常见编程语言的SDK，开发者可通过 下载SDK 直接调用本产品OpenAPI而无需关心技术细节。如果现有SDK不能满足使用需求，...
DST 埋点上报
分布式链路跟踪 DST 的服务端目前已不提供服务，使用实时监控 RMS 的分布式链路服务代替。埋点上报依然使用 SOFATracer 里的 DST 上报插件。操作步骤 引入依赖。您需要在工程中引入 SOFATracer 依赖：<dependency><groupId>...
导入Amazon S3文件
跨行文本日志特有参数 参数 说明 正则匹配位置 设置正则表达式匹配的位置，具体说明如下：首行正则：使用正则表达式匹配一条日志的行首，未匹配部分为该条日志的一部分，直到达到最大行数。尾行正则：使用正则表达式匹配一条日志的行尾，未...
GetJobInfo
时间表达式，目前支持以下几种时间表达类型：api：无时间表达式。fix_rate：具体固定频率值，如30表示每隔30s触发一次。cron：标准的cron表达式。second_delay：固定延迟多少秒执行一次（1s~60s可选）。TimeType Integer 1 时间配置类型，...
- 产品推荐
- 这些文档可能帮助您