在ACK集群部署多租户任务调度管理
为了解决批处理任务的调度问题，企业需要自上而下地解决任务管理、配额管理、任务调度、用户隔离、日志收集、集群监控、资源供给等多方面问题。为解决以上问题，您可以使用ACK集群来管理大规模集群的管理系统，其较为完善的生态为企业打造...
新增多表实时任务
数据同步支持实时任务新增多表任务，并支持一键启动多个上云任务，实现全量任务自动建表。本文介绍如何新增多表实时任务。前提条件 已新建Oracle和DataHub数据源，请参见 新建数据源。说明 当前仅支持Oracle LogMiner（11G）到DataHub多表...
新增多表实时任务
数据同步支持实时任务新增多表任务，并支持一键启动多个上云任务，实现全量任务自动建表。本文介绍如何新增多表实时任务。前提条件 已新建Oracle和DataHub数据源，请参见 新建数据源。说明 当前仅支持Oracle LogMiner（11G）到DataHub多表...
任务（Task）
任务（Task）是模板中最重要的组成部分，它定义了每一个具体的运维操作，每一个任务的类型叫做动作。OOS提供了非常丰富的动作供您使用，这些动作包括了一些常见的云产品动作，如ECS，RDS等。如您需要其他云产品常见动作但是OOS暂未提供，您...
计划管理
常见问题 如果两个计划任务发生冲突时，解决方案如下：当前任务状态（任务A）触发任务（任务B）解决方案 暂停任务已启动，实例状态为 暂停中。暂停任务 任务B失败，且不主动通知。暂停任务已启动，实例状态为 暂停中。启动任务 任务B会等待...
产品相关问题
可视化任务编排：简化多任务调度的运维管理，并支持暂停/恢复、跳过、加锁/解锁、重置、失败重试等多种人工预操作。任务监控：支持实时查看任务的执行状态及执行进度，执行时长，执行的客户端 IP、执行是否成功、执行失败原因等信息。更多...
如何修复异常DBS备份计划
问题原因 DBS备份计划状态显示异常，表示该DBS备份计划下至少存在一个异常任务，通常可能是全量备份任务异常或增量备份任务异常，也可能是其他类型任务出现异常。说明 任务出现异常时，DBS不会直接启动异常任务，以免影响客户业务。为了...
调度策略
如果第一个任务等待出队时间超过预定时间（一般为几分钟），则系统会按照 遍历策略 尝试对第一个任务和第二个任务进行出队操作。如果第二个任务等待出队时间也超过预定时间，系统会对第一个、第二个和第三个任务按照 遍历策略 尝试出队操作...
数据及时性监控
基于MaxCompute的离线任务对数据产出有严格的时间要求，在确保数据准确性的前提下，还需要让数据能够及时提供服务。本文为您介绍如何使用DataWorks智能监控的规则管理功能监控数据的及时性。前提条件 如果您想使用完整的智能监控功能，需要...
数据及时性监控
基于MaxCompute的离线任务对数据产出有严格的时间要求，在确保数据准确性的前提下，还需要让数据能够及时提供服务。本文为您介绍如何使用DataWorks智能监控的规则管理功能监控数据的及时性。前提条件 如果您想使用完整的智能监控功能，需要...
API概览
CancelAutoSnapshotPolicy 取消一个或者多个文件系统的自动快照策略 取消一个或者多个文件系统的自动快照策略。DescribeAutoSnapshotPolicies 查询已创建的自动快照策略 查询已创建的自动快照策略。DescribeAutoSnapshotTasks 查询自动快照...
业务切换流程
由于创建的反向迁移任务会将目标库产生的增量数据实时迁移回源库，如果业务运行出现问题，可随时将业务切换回源库。后续步骤 业务切换至目标数据库并稳定运行一段时间，测试所有业务涉及的功能并确认无问题，可结束反向数据迁移的任务，...
业务切换流程
由于创建的反向迁移任务会将目标库产生的增量数据实时迁移回源库，如果业务运行出现问题，可随时将业务切换回源库。后续步骤 业务切换至目标数据库并稳定运行一段时间，测试所有业务涉及的功能并确认无问题，可结束反向数据迁移的任务，...
功能特性
创建操作系统迁移任务 操作系统迁移（Linux）操作系统迁移（Windows）创建VMware无代理迁移任务 导入迁移源信息后，SMC控制台会自动生成迁移源记录，您需要在控制台为迁移源创建VMware无代理迁移任务，并启动任务进行迁移。创建VMware无...
出错提示“Anolis OS does not provide i686 packages...
问题描述 在操作系统迁移时，出错提示“Anolis OS does not provide i686 packages,please remove them before migration”。问题原因 Anolis或Alibaba Linux及其衍生版本不再提供i686的软件包，如果待迁移的操作系统存在i686的软件包，...
全球消息路由
批量启停任务 云消息队列 RocketMQ 版 支持批量启停任务，当您的业务使用了多个消息路由任务，为了提高维护操作效率，您可以使用批量启停功能一键启停多个任务。在 全球消息路由 页面的任务列表中，选中需要批量启停的多个任务，单击列表...
查看并管理脚本任务
脚本任务页面包含计算任务、同步任务和集成任务，每个任务对应一个调度节点，本文以节点视角为您介绍如何查看并管理脚本任务。脚本任务页面入口 在Dataphin首页，单击顶部菜单栏的 研发。默认进入数据 开发 页面。按照下图操作指引，进入 ...
如何解决备份客户端OOM问题
背景信息 使用 云备份 备份数据时，在极端大数据量以及系统资源不足的备份场景，备份客户端会占用较多的系统资源，可能会出现OOM问题，即备份进程触发OOM被系统终止而导致备份失败。重要 当遇到OOM问题时，您可以根据实际情况为备份客户端...
配置迁移演练
操作系统迁移 关键参数说明如下表所示，其他参数可保持默认。更多信息，请参见 创建服务器迁移任务。参数 说明 迁移任务类型 选中 操作系统迁移。当前操作系统 默认显示当前操作系统，不可修改。例如：CentOS 7。目标操作系统 在下拉列表中...
基本概念
本文介绍OOS的几个基本概念，以便于您更好地理解 系统运维管理 OOS（CloudOps Orchestration Service）产品。名称 定义 模板 一个YAML或JSON格式的文件，包括一个或多个任务。任务 模板的主要组成部分，定义了具体的动作细节。每一个任务都...
异地多活常见问题
本文介绍异地多活的常见问题以及解决方案。微服务在多活场景下如何解决？消息在多活场景下如何解决？Redis等缓存在多活场景下怎么解决？分布式调度任务在多活场景下如何解决的？MSHA数据面的性能指标是怎样的？是否做好入口流量分发和数据...
索引
本文汇总使用SchedulerX过程中的常见问题和对应解决方法。报警常见问题 killed from server don't update progress more than 30s 任务管理常见问题 Spring应用找不到Bean怎么办？任务失败，报错“submit jobInstanceId to worker timeout...
概述
任务调度 TS（Task Scheduler）提供分布式任务调度框架，实现任务的分布式处理，并能规范化、自动化、可视化和集中化对金融企业不同业务系统的任务进行统一的调度和全方位监控运维管理，达到所有任务有序、高效运行的目的，极大降低开发和...
Windows系统实例的宕机问题排查
当Windows操作系统的ECS实例在运行过程中出现内核panic、内存溢出OOM（Out Of Memory）、蓝屏卡死等问题或收到系统事件通知实例出现操作系统崩溃时，说明该ECS实例发生宕机，您可以通过自助诊断工具或系统事件来定位原因并解决。...
出错提示S2磁盘分区文件数据同步出错
本文主要介绍在使用SMC迁移时，迁移任务出错提示“S2_*磁盘分区文件数据同步出错”的问题描述、问题原因及其解决方案。问题描述 在SMC迁移时，迁移任务出错提示“S2_*磁盘分区文件数据同步出错”。其中S2_*可能的错误码如下：S2_R255 S2_R...
兼容Spring定时任务
例如，需自行解决集群中重复执行问题、任务无可视化管控能力、无报警能力等等。通过对接SchedulerX任务调度可在不改变原有定时任务业务代码的情况下，可快速实现企业化运用的支持。功能优势 白屏管控和运维 提供白屏控制台可以动态新增、...
索引
本文汇总使用SchedulerX过程中的常见问题和对应解决方法。报警常见问题 killed from server don't update progress more than 30s 任务管理常见问题 Spring应用找不到Bean怎么办？任务失败，报错“submit jobInstanceId to worker timeout...
服务端发布记录
本文介绍分布式任务调度SchedulerX产品发布的功能变更，包括新增功能、功能优化、重要问题修复等，帮助您了解SchedulerX的发布动态。发布记录 2024-04-28 功能名称 变更类型 功能描述 相关文档 任务调度增强 新增 Cron、Fixed rate、Second...
实例启动/停止异常常见问题
正常启动：ECS可能因操作系统本身启动任务比较多，或者系统配置不高导致操作系统启动反应慢，所以启动时间比较长。异常启动：ECS启动有异常，比如Windows启动时，进入后修复模式或安全模式，需要手动修复；或者Linux有多个内核版本，启动时...
配置任务常见错误码及排查方法
本文介绍了用户在使用控制台或OpenAPI配置任务时系统返回的错误码、出现报错的场景及解决方法。用户配置使用类错误码 错误码 报错场景 原因及解决方法 DTS.Msg.LXCreateOrderError 购买DTS实例时创建订单不成功。原因：未将UID添加至白名单...
索引
本文汇总使用SchedulerX过程中的常见问题和对应解决方法。报警常见问题 killed from server don't update progress more than 30s 任务管理常见问题 Spring应用找不到Bean怎么办？任务失败，报错“submit jobInstanceId to worker timeout...
基本概念
本文为您介绍DataWorks中，工作空间、业务流程、解决方案、组件、任务、实例、业务日期、定时时间、提交、脚本开发、资源、函数和输出名称等基本概念。工作空间 工作空间 是DataWorks管理任务、成员，分配角色和权限的基本单元。工作空间...
语义意图标注
句子字数限制：填写后，系统将满足字数条件限制的会话语句进入待标注任务 最多标注语句数：即表中任务中包含待标注语句数的最大量。说明 包含关键词：可以输入多个关键词，关键词之间用逗号隔开，包含其中任意一个关键词都可命中，最多输入...
管理发布任务
基于Dev-Prod开发模式，开发环境生成的规范建模、数据处理、数据集成类任务，需要发布到生产环境进行调度。本文为您介绍如何发布任务及查看任务的发布记录。背景信息 如果您选择了Dev-Prod开发模式，提交后的任务进入 发布 模块的待发布...
管理发布任务
基于Dev-Prod开发模式，开发环境生成的规范建模、数据处理、数据集成类任务，需要发布到生产环境进行调度。本文为您介绍如何发布任务及查看任务的发布记录。背景信息 如果您选择了Dev-Prod开发模式，提交后的任务进入 发布 模块的待发布...
离线任务监控概述
离线任务监控功能支持您通过配置监控规则实现对离线任务的运行状态进行监控。在离线任务触发所配置的监控规则时，系统将根据所配置的接收人发送报警，以协助您 保障 任务的正常运行和数据的产出。功能介绍 离线任务中支持对Basic项目或者...
离线任务监控概述
离线任务监控功能支持您通过配置监控规则实现对离线任务的运行状态进行监控。在离线任务触发所配置的监控规则时，系统将根据所配置的接收人发送报警，以协助您 保障 任务的正常运行和数据的产出。功能介绍 离线任务中支持对Basic项目或者...
巡检任务
编辑任务 编辑基本信息 在 巡检任务 页面，单击目标任务 操作 列下的 编辑，可对任务名称、描述以及关联的钉钉机器人进行修改。修改关联规则 在 巡检任务 页面，单击目标任务名称进入任务详情页。在 关联规则 标签页上，进行以下规则操作：...
操作流程
本文从节点任务和场景任务两个使用场景来介绍数据开发的任务操作流程。节点模式操作流程 节点模式主要适用于计算节点相对独立，整个流程由单个节点组成的这类简单数据处理场景。新建开发节点流程图 流程说明 操作 说明 新建开发节点 根据待...
操作流程
本文从节点任务和场景任务两个使用场景来介绍数据开发的任务操作流程。节点模式操作流程 节点模式主要适用于计算节点相对独立，整个流程由单个节点组成的这类简单数据处理场景。新建开发节点流程图 流程说明 操作 说明 新建开发节点 根据待...
- 产品推荐
- 这些文档可能帮助您