任务管理
初始化：资产治理模块每天实例化过程中状态。执行中：调度系统开始调度执行，反馈给到资产治理模块的状态。已终止：暂停后调度系统中反馈实际任务的状态。业务日期：当前任务对应执行元数据、日志的时间。执行日期：任务实际执行的日期。...
Hologres整库周期性增全量同步至MaxCompute
表粒度周期性调度参数配置，支持批量修改/单表定制化修改。您可以设置调度周期、需要使用的调度资源组等，更多调度参数配置详情请参见 调度属性配置。完成上述所有任务配置后，单击 完成配置，完成同步任务的配置。其他参数配置详情请参见 ...
任务管理
初始化：资产治理模块每天实例化过程中状态。执行中：调度系统开始调度执行，反馈给到资产治理模块的状态。已终止：暂停后调度系统中反馈实际任务的状态。业务日期：当前任务对应执行元数据、日志的时间。执行日期：任务实际执行的日期。...
如何使用定时任务的灰度
每个任务可以在静态配置或动态运行时，指定调度到某个Label的Worker上。方案一：复制一个灰度任务 复制一个任务，生产的任务指定生产的标签，灰度任务指定灰度的标签，通过灰度的任务进行灰度测试。方案二：一个任务通过自动调度和手动调度...
弹性伸缩概述
精细调度场景 适用于在线业务精细化控制的场景。例如，一个Deployment部分的应用运行在ECS上，而超出的部分运行在ECI上。安装Elastic Workload 资源层弹性组件介绍 组件名称 组件介绍 适用场景 资源交付速度 参考文档 cluster-autoscaler ...
快速使用EMR Workflow
它提供了易于使用的调度服务，您可以通过可视化的操作界面轻松地管理工作流和任务，高效构建数据仓库，并为生产任务的稳定运行提供保障。本文以HIVECLI任务类型为例，为您介绍如何快速使用EMR Workflow。前提条件 已完成系统角色授权，详情...
弹性伸缩概述
精细调度场景 适用于在线业务精细化控制的场景。例如，一个Deployment的部分应用运行在ECS上，而超出的部分运行在ECI上。在ACK上使用UnitedDeployment 节点伸缩 弹性组件 组件名称 组件介绍 适用场景 资源交付速度 参考文档 cluster-...
开通SchedulerX
背景信息 阿里云分布式任务调度SchedulerX已于2021年09月01日正式商业化。操作步骤 登录 分布式任务调度平台。首次使用并登录分布式任务调度平台，在弹出的对话框中单击 开通。在 分布式任务管理 页面，单击 立即购买。在 确认订单 页面 ...
离线调度
本工作流以广告CTR预测场景为例，为您介绍如何使用PAI提供的数据挖掘组件进行离线调度。背景信息 本工作流流程如下：通过历史数据，在阿里云机器学习平台上进行模型训练。通过大数据开发套件对模型进行调度。每天凌晨对广告投放进行CTR预测...
DMS作业调度
DMS作业调度支持配置自动调度框架，低代码、白屏化操作，上手容易。注意事项 RDS数据库中的数据，需要可以指定条件来增量归档。例如通过表中时间列按天归档。RDS PostgreSQL实例、AnalyticDB PostgreSQL版 实例和OSS Bucket需在同一地域内...
EMR Workflow商业化公告
它提供了易于使用的调度服务，您可以通过可视化的操作界面轻松地管理工作流和任务，高效构建数据仓库，并为生产任务的稳定运行提供保障。更多信息，请参见 什么是EMR Workflow。控制台入口：立即前往。支持地域 EMR Workflow支持以下地域。...
资源伸缩和系统扩展
精细调度场景 适用于在线业务精细化控制的场景。例如，一个Deployment部分的应用运行在ECS上，而超出的部分运行在ECI上。安装Elastic Workload 资源层弹性 组件名称 组件介绍 适用场景 资源交付速度 参考文档 cluster-autoscaler ...
如何接入链路追踪
在微服务分布式场景下，全链路追踪功能给业务提供了各个服务点执行情况的可视化快速分析定位能力。在定时任务场景下，业务执行链路可能比常规实时业务的执行链路更长，接入全链路追踪有助于查询任务执行耗时、分析执行异常等问题。本文介绍...
如何使用定时任务的灰度
每个任务可以在静态配置或动态运行时，指定调度到某个Label的Worker上。方案一：复制一个灰度任务 复制一个任务，生产的任务指定生产的标签，灰度任务指定灰度的标签，通过灰度的任务进行灰度测试。方案二：一个任务通过自动调度和手动调度...
创建ID安全匹配任务
调度规则 支持 日常不调度、按日调度、按周调度、按月调度 四种，配置后会按配置的周期定时跑该任务。日常不调度：配置后不运行任务。按日调度：每天运行任务。按周调度：每周运行任务。按月调度：每月运行任务。数据引入 选择使用方和加持...
开通SchedulerX
背景信息 阿里云分布式任务调度SchedulerX已于2021年09月01日正式商业化。操作步骤 登录 分布式任务调度平台。首次使用并登录分布式任务调度平台，在弹出的对话框中单击 开通。在 分布式任务管理 页面，单击 立即购买。在 确认订单 页面 ...
创建隐匿信息查询任务
数据分区 数据分区：分区分为动态分区和静态分区，动态分区按照日、小时调度。使用场景 离线场景：生成预计算文件在后续离线PIR查询中速度较快。在线场景：生成的预计算文件在后续在线PIR查询中速度较快。单击 提交，完成任务的创建。步骤...
集群任务限流
任务调度提供了两种限流类型：静态限流 静态限流通过代码配置限流规则，并可通过任务调度控制台动态调整限流速率。优势是在页面没有配置限流的情况下，也可以通过限流规则的初始值进行限速，但需要您手动指定限流器。框架提供了默认的限流...
创建安全数据对齐任务
调度规则 支持 日常不调度、按日调度、按周调度、按月调度 四种，配置后会按配置的周期定时跑该任务。日常不调度：配置后不运行任务。按日调度：每天运行任务。按周调度：每周运行任务。按月调度：每月运行任务。数据引入 选择使用方和加持...
创建安全数据加密任务
调度规则 支持 日常不调度、按日调度、按周调度、按月调度 四种，配置后会按配置的周期定时跑该任务。日常不调度：配置后不运行任务。按日调度：每天运行任务。按周调度：每周运行任务。按月调度：每月运行任务。数据引入 选择使用方和加持...
创建安全数据左对齐任务
调度规则 支持 日常不调度、按日调度、按周调度、按月调度 四种，配置后会按配置的周期定时跑该任务。日常不调度：配置后不运行任务。按日调度：每天运行任务。按周调度：每周运行任务。按月调度：每月运行任务。数据引入 选择使用方和加持...
创建并使用PAI Designer
说明 若您想了解如何创建 预置模板 进行数据可视化建模，您可以参考 DataWorks离线调度Designer工作流案例，了解预设模板的使用及任务调度流程。若您想了解如何创建 自定义工作流 进行数据可视化建模，您可以参考 创建自定义工作流案例，...
DataWorks On MaxCompute使用说明
MaxCompute可通过DataWorks提供的可视化方式配置任务工作流、周期性调度执行任务及元数据管理，保障数据生产及管理的高效稳定。本文为您介绍在DataWorks上开发MaxCompute任务的基本流程、费用说明、环境准备、权限控制等内容。前提条件 已...
DataWorks On Hologres使用说明
Hologres可通过DataWorks提供的可视化方式配置任务工作流、周期性调度执行任务及元数据管理，保障数据生产及管理的高效稳定。本文为您介绍在DataWorks上开发Hologres任务的基本流程、费用说明、环境准备、权限控制等内容。前提条件 已开通...
优雅下线
配置处理流程 在添加完下线对象后，您可以对整体的下线流程进行精细化的配置，包括启动下线、延迟调度、暂停调度、下线任务、重命名产出表、删除产出表、完成下线等阶段，启动下线计划到最终完成下线过程中，每一阶段均支持您自主选择是否...
RunServiceSchedule-执行设备服务调度
调用RunServiceSchedule根据客户ID&IP基本信息，为终端设备最优调度空闲资源（实例设备/容器POD），并完成虚拟设备环境的初始化。调试 您可以在OpenAPI Explorer中直接运行该接口，免去您计算签名的困扰。运行成功后，OpenAPI Explorer可以...
计费概述
功能 基础版 专业版 基础调度能力 日志服务 查看堆栈 Tracing 用户大盘 工作流实例图 可视化MapReduce（并行计算）最大300个子任务，无搜索能力 最大1000个子任务，可自定义标签，有搜索能力 历史记录任务条数上限 支持显示最近30条任务 ...
实验介绍
步骤 操作内容 阶段性目标 数据采集 通过 DataWorks数据集成 模块，将存储在MySQL中的用户信息数据及存储在OSS中采集的用户访问日志数据同步至MaxCompute，并提交调度系统，结合DataWorks调度参数实现周期性增量同步。学习如下内容：如何将...
修改组件数据
本文档为您介绍在DataV疫情模板可视化应用中修改组件数据的方法。前提条件 已完成可视化应用的创建，详情请参见 创建可视化应用。背景信息 本案例使用的是静态数据源，因此可以直接在组件的数据配置区域粘贴准备好的数据。如果您的数据源为...
快速体验
步骤 操作内容 阶段性目标 数据采集 通过 DataWorks数据集成 模块，将存储在MySQL中的用户信息数据及存储在OSS中采集的用户访问日志数据同步至MaxCompute，并提交调度系统，结合DataWorks调度参数实现周期性增量同步。学习如下内容：如何将...
修改组件数据
本文档为您介绍在DataV疫情模板可视化应用中修改组件数据的方法。前提条件 已完成可视化应用的创建，详情请参见 创建可视化应用。背景信息 本案例使用的是静态数据源，因此可以直接在组件的数据配置区域粘贴准备好的数据。如果您的数据源为...
产品计费
为AI、HPC等任务提供了丰富的调度策略、任务优先级队列，优化AI训练和推理任务的调度效率，统一AI资源和负载的标准化管理和交付，所以会收取节点的管理费用。云产品资源费用 如果您在使用ACK集群过程中使用了其他的阿里云云产品资源，您...
E-HPC集群调度器插件
调度器插件为您提供了插件模版及配置文件，并将功能定义进行模块化分拆，您可以根据自身业务需求及调度器特征进行任意方式的自定义实现。在构建出自定义调度器插件之后，即可在E-HPC控制台创建带有插件的集群，无缝衔接至E-HPC以提供对应的...
One Time
One Time即一次性任务调度，配置完成后任务将在设置的时间点执行一次，执行完成后调度平台会自动清理任务，您无需在客户端执行删除任务的操作。一次性任务调度适用于订单超时未支付、自动关闭定时日历提醒等场景。本文介绍如何通过API创建...
Fixed rate
为解决此类精细化定时需求，可采用Fixed rate定期轮询机制，它能够简洁地表达非标准时间间隔的定期任务执行，且表达式简单，但不支持秒级别。Fixed rate定时配置示例 在创建调度任务时可以使用Fixed rate定时调度，创建调度任务的详细操作...
流程管理
流程管理提供可视化的任务编排，您可以使用Crontab创建定时调度工作流，并通过API触发。创建工作流 您可以创建工作流调度任务。说明 目前工作流调度仅支持Cron表达式。登录 EDAS控制台。在左侧导航栏单击 任务调度。在顶部菜单栏选择地域。...
如何使用DataV-WS服务
静态文件服务主要用于本地模型地址的加载，WebSocket服务符合蓝图编辑器WebSocket节点规范，使用该服务后，无需额外开发，在蓝图编辑器中能够直接使用该服务跨越多个同网段下的可视化应用进行通信。DataV-WS服务文档目录 重要 请勿删除...
MySQL整库离线同步到OSS
刷新表映射后，表粒度周期性调度参数配置，支持批量修改或单表定制化修改。您可单击 批量修改 按钮，在下拉列表中找到 周期配置，可以对单表粒度进行配置。更多调度参数配置详情请参见 任务调度属性配置概述。在 周期配置 中，可以设置预期...
新增和使用独享调度资源组
您可根据业务场景需求选择购买合适规格的独享调度资源组，用于任务的调度运行。购买独享资源组后，在实际使用前您还需进行网络绑定、白名单等配置操作。本文为您介绍从购买至使用独享调度资源组的全流程与步骤详情。前提条件 购买和使用独...
兼容Spring定时任务
通过对接SchedulerX任务调度可在不改变原有定时任务业务代码的情况下，可快速实现企业化运用的支持。功能优势 白屏管控和运维 提供白屏控制台可以动态新增、修改、启用、禁用任务，支持运行一次、原地重跑、重刷数据、停止任务、标记成功等...
- 产品推荐
- 这些文档可能帮助您