计费概述
本文介绍分布式任务调度SchedulerX的各计费项及其计费规则。基本概念 任务类型：调度任务的类型。包含单机任务和非单机任务（广播、分片、并行和网络任务等）。任务调度总量：通过SchedulerX配置并启用的分布式任务调度总规模，单位为CU...
我是DBA
任务编排 任务编排主要用于编排各类任务并进行调度执行，通过创建一个或多个任务节点组成的任务流，实现复杂的任务调度，提高数据开发效率。离线集成 离线集成是一种低代码的数据开发工具，可以组合各类任务节点，形成数据流，通过周期调度...
我是管理员
任务编排 任务编排主要用于编排各类任务并进行调度执行，通过创建一个或多个任务节点组成的任务流，实现复杂的任务调度，提高数据开发效率。离线集成 离线集成是一种低代码的数据开发工具，可以组合各类任务节点，形成数据流，通过周期调度...
到期提醒与停机策略
您可以通过运维中心调度任务的补数据功能恢复历史数据。如果您336小时（14天）内未完成续费，系统将会清空所有任务并释放资源空间。系统会在实例到期的2小时、5小时、24小时、48小时、72小时，以短信方式提醒您续费，保证数据不丢失。
任务编排之电商打标
您可以通过创建一个或多个任务节点组成的任务流，实现复杂的任务调度，提高数据开发效率。背景信息 电商做大促活动时，常会推出优惠活动，例如用户累计消费达到一定额度，发放对应额度的优惠券。本文使用任务编排中的 单实例SQL赋值节点、...
表结构配置管理
查看调度任务 对于已设置调度任务的表结构配置，选择>查看调度任务，可以查看其所属调度任务的执行记录，如下图所示。单击 图标，可展开该表的执行情况。调度相关说明，请参见 调度任务。移除表结构配置 单击 移除，确认移除后，将移除该表...
API调度
您可以使用API触发任务调度。关于API触发的使用方式，请参见 服务接入点。
Quick BI v4.3版本说明
企业门户新增排行榜、活跃达人和排序筛选。导航结构和列表优化升级。编辑抢锁机制优化。请参见 协同编辑仪表板 颜色选择器升级。若已有图表的默认色系为 当前仪表板 时，已有图表的色系随主题色系变化而变化。Quick引擎 抽取加速支持Oracle...
计费说明
本文介绍分布式任务调度SchedulerX的各计费项及其计费规则。基本概念 任务类型：调度任务的类型。包含单机任务和非单机任务（广播、分片、并行和网络任务等）。任务调度总量：通过SchedulerX配置并启用的分布式任务调度总规模，单位为CU...
创建Hologres数据源
根据使用场景不同，资源组分为 数据集成（用于数据同步）、数据调度（用于任务调度）、数据服务（用于数据服务任务）这些类型。各类资源组的详细介绍请参见 DataWorks资源组概述。您需根据数据源后续的用途，在对应资源组类型页签下，测试...
创建MaxCompute数据源
根据使用场景不同，资源组分为数据集成（用于数据同步）、数据调度（用于任务调度）、数据服务（用于数据服务任务）三种类型。各类资源组的详细介绍，请参见 DataWorks资源组概述。您需根据数据源后续的用途，在 连接配置 区域对应资源组...
DMS作业调度
功能介绍 本次作业调度使用OSS作为中间态的存储，调度任务会将数据从RDS PostgreSQL数据库加载到OSS上，再使用 AnalyticDB PostgreSQL版Serverless模式 对该数据进行分析。整个ETL（Extract-Transform-Load）链路调度均通过DMS实现。作业...
计算任务资源配置
您可以为计算任务配置所属资源组，任务调度时将使用该资源组资源进行任务调度。本文将为您介绍如何配置计算任务调度资源。操作步骤 请参见 离线任务属性入口，进入任务 属性 抽屉。在任务 属性 抽屉 资源配置 区域，配置任务的资源配置信息...
到期提醒与停机策略
您可以通过运维中心调度任务的补数据功能恢复历史数据。如果您336小时（14天）内未完成续费，系统将会清空所有任务并释放资源空间。系统会在实例到期的2小时、5小时、24小时、48小时、72小时，以短信方式提醒您续费，保证数据不丢失。
资源包（专业版）
背景信息 SchedulerX针对 任务调度CU 推出了一种预付费资源包模式，帮助您以更优惠的价格享受同等的任务调度CU数量，从而减少费用支出。资源包类型与定价 SchedulerX目前只提供一种类型的资源包，即任务调度CU资源包，用于抵扣SchedulerX...
通过OpenAPI创建、修改、删除离线同步任务
本文为您介绍如何使用OpenAPI创建、修改、删除数据集成同步任务，同步来源端数据至去向端。前提条件 已创建Maven项目，详情请参见 创建Maven项目。已创建业务流程，详情请参见 创建周期业务流程。已创建同步任务需要的数据源，详情请参见 ...
通过OpenAPI创建、修改、删除离线同步任务
本文为您介绍如何使用OpenAPI创建、修改、删除数据集成同步任务，同步来源端数据至去向端。前提条件 已创建Maven项目，详情请参见 创建Maven项目。已创建业务流程，详情请参见 创建周期业务流程。已创建同步任务需要的数据源，详情请参见 ...
巡检任务
在 任务调度 标签页上，选择目标任务调度。单击 编辑 对当前调度进行修改。执行任务 执行任务前，确保该任务关联的规则以及相关参数已设置好。在左侧导航栏上，单击 日常巡检>巡检任务。单击目标任务 操作 列下的>执行。克隆任务 日常巡检...
功能特性
离线集成 数据开发与调度 任务编排主要用于编排各类任务节点并进行周期或事件调度执行，可以通过创建一个或多个任务节点组成的任务流，实现复杂的任务调度，提高数据开发效率。概述 快速入门 逻辑数仓 逻辑数仓具有强大的数据源管理能力，...
联系我们
如果您在使用分布式任务调度SchedulerX的过程中有任何疑问和建议，欢迎使用钉钉搜索群号 23103656 加入钉钉群与我们交流。
命名空间管理
创建命名空间 登录 分布式任务调度平台。在顶部菜单栏选择地域。在左侧导航栏，单击 命名空间。单击 创建命名空间。在 创建命名空间 面板，输入命名空间的 名称 和 描述，然后单击 确定。命名空间创建成功，会提示 创建成功。返回 命名空间...
需求分析
d 网站访问日志原始数据表：ods_raw_log_d 网站访问日志明细表数：dwd_log_info_di 用户网站访问信息宽表：dws_user_info_all_di 用户画像数据：ads_user_info_1d 根据规范设计数据流：本实验使用数据集成离线同步任务将用户信息数据与用户...
需求分析
info_d 网站访问日志原始数据表：ods_raw_log_d 网站访问日志明细表：dwd_log_info_di 用户网站访问信息宽表：dws_user_info_all_di 用户画像数据：ads_user_info_1d 根据规范设计数据流：本实验使用数据集成离线同步任务将用户信息数据与...
调度设置
调度时区 任务调度时区默认为服务器时区，如果您使用海外地域并需将任务调度时区设置为东八时区，请 提交工单 联系技术支持人员处理。说明 修改调度时区前，请务必提前参考：创建工作空间，了解修改调度时区后的影响。定时调度时间 默认...
变更规格操作
说明 生产任务包括：生产环境运维中心的实时同步任务、实时计算任务、周期调度任务和补数据任务，不包括DataStudio中临时运行的测试任务。被平台终止的周期调度任务和在变更后自动重跑的周期调度任务将在实例操作记录界面分别产生操作记录...
资源组说明
说明 实际任务执行数量取决于网络速率、数据库读写速度、数据量大小、任务调度周期等。通用任务执行资源占比1c2g，支持10个SQL任务并发，日均任务量参考值10w次。说明 实际任务数量取决于数据库SQL执行速度，任务调度周期等。数据服务资源...
如何指定标签
任务调度时，机器被随机分配，所以灰度任务被分配到正常机器时，可能无法找到实现类。传统解决方案 传统解决方案下，往往会创建多个应用分组，例如为灰度机器专门配置一个Group ID。但这种解决方案具有以下局限性。正常的任务无法调度到...
资源组说明
说明 实际任务执行数量取决于网络速率、数据库读写速度、数据量大小、任务调度周期等。通用任务执行资源占比1c2g，支持10个SQL任务并发，日均任务量参考值10w次。说明 实际任务数量取决于数据库SQL执行速度，任务调度周期等。数据服务资源...
文档更新动态（2024年）
配置MySQL输出组件 配置AnalyticDB for MySQL 3.0输出组件 配置TiDB输出组件 配置OSS输出组件 配置Amazon S3输出组件 通过整库迁移配置集成任务 数据开发-编码研发-离线任务开发 支持基于MySQL、Oracle数据源的数据库SQL任务调度和即席查询...
专业版公测（2022年01月26日）
阿里巴巴分布式任务调度平台SchedulerX 2.0的专业版于2022年01月26正式公测，本次公测带来了全新的可视化功能，兼容开源XXL-JOB任务，支持一次性任务，融合大数据DataWorks任务。可视化 日志服务 在当前微服务和容器化越来越流行的情况下，...
OpenEvent概述
如下场景会触发调度任务状态变更事件：调度任务下发至数据质量进行数据校验。调度任务校验分支条件。任务定时触发、手动触发或事件触发。任务状态将从 等待资源 变更为 运行中。调度任务执行完成（即执行成功或失败）。任务状态将从 运行中...
SLS的OSS投递数据源
本文介绍如何通过向导创建SLS的OSS投递数据源发现任务，自动发现您当前区域下所有的Logstore投递到OSS的日志数据（包括新增的投递到OSS的日志数据，以及增量的分区及数据），并自动创建DLA库表映射到投递的OSS日志数据上。前提条件 当前...
功能更新动态（2024年）
配置FTP输出组件 配置MySQL输出组件 配置AnalyticDB for MySQL 3.0输出组件 配置TiDB输出组件 配置OSS输出组件 配置Amazon S3输出组件 通过整库迁移配置集成任务 离线研发 支持基于MySQL、Oracle数据源的数据库SQL任务调度和即席查询。...
数据导入快速入门
导入数据表操作由配置表结构、创建调度任务两部分组成：配置表结构：选择工作空间>配置管理>数据接入管理>数据导入>表结构配置。单击右上角 新建 表配置>用户标签，进入 新建用户标签配置 页面。选择要导入的计算源、数据表。若包含时间...
控制台总览
您可以在任务调度产品控制台总览页面查看所有任务的动态和统计信息。任务统计 显示当前环境中已存在的各类任务数量统计：任务总数：当前环境中已配置的任务总数，包括简单任务、集群任务。将鼠标悬浮在图标上方以查看每个任务类型的数量...
EMR旧版数据开发迁移公告
说明 迁移阶段的导出和导入均不影响原有EMR旧版数据开发中的任务调度。阿里云EMR团队+客户 1小时 三、验证阶段 在EMR Workflow上导入的工作流默认处于下线状态，需要您逐一进行手动执行或定时调度，以测试和观察作业的运行结果。说明 如果...
通知历史
当通知发生后，您可以按照应用ID、任务ID、通知类型、通知渠道、通知状态...查看通知历史 登录 分布式任务调度平台。在顶部菜单栏选择地域。在左侧导航栏选择 通知管理>通知历史。在 通知历史 页面，通过筛选或搜索功能查找目标通知历史记录。
调度设置
若您已熟悉DataWorks的调度配置，则可参考本章节了解更多调度相关的高阶功能；若您才开始使用DataWorks的调度配置，请先前往 任务调度配置概述，了解调度配置的基础功能。
新建VIRTUAL任务
属性包括任务的 基本信息、参数配置、调度属性（周期任务）、调度依赖（周期任务）、运行配置、资源配置。基本信息 用于定义调度任务的名称、对应责任人、描述等基本信息。配置说明，请参见 配置任务基本信息。参数配置 若您的任务中调用了...
DataWorks On Hologres使用说明
DataWorks为Hologres提供离线任务调度、元数据管理、数据治理、数据安全管控等能力，但任务计算、数据存储仍在Hologres中。标准模式工作空间下，DataWorks为不同环境绑定不同的Hologres实例，实现DataWorks开发环境与生产环境存储、资源等...
- 产品推荐
- 这些文档可能帮助您