Fixed rate
Fixed rate定时配置示例 在创建调度任务时可以使用Fixed rate定时调度，创建调度任务的详细操作步骤请参见 创建调度任务。本文仅介绍在创建调度任务时如何配置Fixed rate定时调度。进入 定时配置 页签，详情请参见 创建调度任务。在 创建...
管理运行任务
输入 用户提交运行任务时，使用的所有输入参数。输出 由应用定义的，运行任务成功完成后，产生的分析结果输出。运行任务中计算作业详情 计算作业是运行任务的最小执行单位，平台提供了运行详情，帮助用户了解分析任务执行情况。错误信息：...
出错提示“fail to download rpm packages”
问题描述 在使用SMC操作系统迁移时，迁移任务出错提示“fail to download rpm packages”信息。问题原因 将迁移的源服务器系统中所有提供的软件包（例如：CentOS）重装目标系统对应的软件包，涉及到软件包的依赖解析，下载和安装，如果迁移...
出错提示“Command 'yum-y distro-sync' returned non...
问题描述 在使用SMC操作系统迁移时，迁移任务出错提示“Command 'yum-y distro-sync' returned non-zero”信息。问题原因 迁移至Anolis OS充分利用了 yum distro-sync 机制来实施迁移，该命令将当前系统中所有CentOS提供的软件包重装为...
基本概念
空跑 当任务流A（使用任务流依赖检查节点）依赖任务流B，且不需要实际运行B时，可以使B空跑产生一个调度记录，A任务即可正常执行。指定时间运行 使用该运行方式需要您定义一个任务流变量（时间变量），并且在SQL中使用。变量会在指定的业务...
实时计算任务运行与管理
同时，您还可以为目标任务设置监控报警，在任务运行出错时及时发现并处理异常。使用限制 DataWorks当前仅支持对EMR Spark Streaming及EMR Streaming SQL类型的节点提交的任务进行运维。进入实时计算任务页面 登录 DataWorks控制台，单击...
Kafka单表实时入湖OSS（HUDI）
其他配置可使用任务创建时生成的默认值，也可根据需要进行修改。单击右上角的 数据采样。在弹出对话框中指定好 开始时间 和 采样条数 后，单击 开始采集 按钮，可以对指定的Kafka Topic进行数据采样，同时您可以预览Topic中的数据，为后续...
Kafka实时ETL同步至Hologres
其他配置可使用任务创建时生成的默认值，也可根据需要进行修改。单击右上角的 数据采样。在弹出对话框中指定好 开始时间 和 采样条数 后，单击 开始采集 按钮，可以对指定的Kafka Topic进行数据采样，同时您可以预览Topic中的数据，为后续...
创建并管理数据源
若您想在DataWorks操作您的数据库或数据仓库（例如，MaxCompute项目数据），需先在DataWorks的数据源管理页面，将数据库或数据...若数据源开发环境与生产环境配置不同，请确保任务运行时使用的资源组可分别与开发环境、生产环境的数据源连通。
Second delay
Second delay定时配置示例 在创建调度任务时可以使用Second delay定时调度。进入 定时配置 页签，详情请参见 创建调度任务。在 创建任务 配置向导的 定时配置 页签中配置相关信息，然后单击 下一步。配置项 描述 时间类型 选择 second_...
创建调度任务
重要任务时建议使用，触发间隔至少 5 分钟。任务互斥 选择是否开启任务互斥模式。开启任务互斥模式时，处在“执行中”或“暂停”状态的任务即使已经达到下一个任务触发时间点，仍无法再次触发。本次调度状态以“跳过”标记。默认为不开启。...
Cron
6#3 每月的第三个周五10:15触发 Cron定时调度配置示例 在创建调度任务时可以使用Cron定时调度，创建调度任务的详细操作步骤请参见 创建调度任务。本文仅介绍在创建调度任务时如何配置Cron定时调度。进入 定时配置 页签，详情请参见 创建...
创建调度任务
重要任务时建议使用，触发间隔至少 5 分钟。任务互斥 选择是否开启任务互斥模式。开启任务互斥模式时，处在“执行中”或“暂停”状态的任务即使已经达到下一个任务触发时间点，仍无法再次触发。本次调度状态以“跳过”标记。默认为不开启。...
快速入门
任务调度产品支持多种任务类型，包括简单任务、集群任务，您可以根据业务的需求，选择其一实现业务。本文以简单任务为例，介绍如何快速完成一个简单任务的本地开发以及控制台任务配置等。说明 若您需要任务调度工程示例代码，请下载 示例...
人群预测
新建预测任务 说明 新建预测任务时将使用状态为训练成功的唯一算法模型，请确保本空间当前有训练成功的算法模型，否则不能新建预测任务。可预测用户范围为算法模型使用的行为数据集涉及的用户，且用户在该行为数据集中必须在近1年内有购买...
如何使单应用支持十万以上的定时任务
将SchedulerX作为底座 当将SchedulerX作为底座，封装一层任务调度平台（通过POP API新建任务）提供给自己的公司使用时，任务量也有可能达到万、甚至十万级别。操作步骤 使单应用能够支持十万以上的定时任务，需要完成以下两个步骤：联系...
Second delay
Second delay定时配置示例 在创建调度任务时可以使用Second delay定时调度。进入 定时配置 页签，详情请参见 创建调度任务。在 创建任务 配置向导的 定时配置 页签中配置相关信息，然后单击 下一步。配置项 描述 时间类型 选择 second_...
Second delay
Second delay定时配置示例 在创建调度任务时可以使用Second delay定时调度。进入 定时配置 页签，详情请参见 创建调度任务。在 创建任务 配置向导的 定时配置 页签中配置相关信息，然后单击 下一步。配置项 描述 时间类型 选择 second_...
出错提示M20源系统条件检测出错
问题描述 在使用SMC Windows操作系统迁移时，迁移任务出错提示“M20*”信息。其中可能的错误码如下：M20_1001 M20_1002 M20_1003 M20_1004 问题原因 不同错误码对于的问题原因如下：M20_1001：当前系统盘C盘空闲空间少于20 GiB，需要先留出...
出错提示M11源系统迁移准备出错
问题描述 在使用SMC操作系统迁移到AliOS时，迁移任务出错提示“M11”信息。问题原因 源系统迁移准备出错，可能原因如下：待迁移的源服务器系统安装迁移工具出错 待迁移的源服务器系统下载迁移工具脚本出错 解决方案 您可以根据出错提示信息...
功能特性
您可以在创建迁移任务时，使用镜像检测功能，帮您快速发现迁移后镜像或ECS实例存在的潜在问题，并提供修复方案，使其符合阿里云标准，提升启动ECS实例的成功率。配置镜像检测 镜像检测操作系统限制 镜像检测项说明 镜像检测修复建议...
出错提示“Minimum memory requirements are not met...
问题描述 在使用SMC操作系统迁移到AnolisOS时，迁移任务出错提示“Minimum memory requirements are not met”信息。问题原因 待迁移的源服务器系统的可用内存不足600 MiB。解决方案 删除不需要的文件或者停止不需要的应用。对源服务器实例...
使用Logview查看作业运行信息
使用Logview排查问题 出错的任务 当有任务出错时，您可以在Logview页面的Result中看到错误的提示信息，也可以在Detail页面中通过Fuxi Instance的stderr，查看具体某个Instance出错的信息。数据倾斜 运行缓慢有时是由于在某个Fuxi Task的...
出错提示M103源系统迁移工具安装出错
本文主要介绍在Linux操作系统迁移时，迁移任务出错提示“M103”信息时的问题描述、问题原因及其解决方案。问题描述 在SMC操作系统迁移到AliOS时，迁移任务出错提示“M103”信息。问题原因 源系统迁移工具安装出错。解决方案 您可以根据出错...
出错提示“Use of OSSFS detected”
本文主要介绍在Linux操作系统迁移时，迁移任务出错提示“Use of OSSFS detected”信息时的问题描述、问题原因及其解决方案。问题描述 在SMC操作系统迁移时，迁移任务出错提示“Use of OSSFS detected”信息。问题原因 待迁移的源服务器系统...
出错提示M12源系统迁移升级出错
本文主要介绍在Linux操作系统迁移时，迁移任务出错提示“M12”信息时的问题描述、问题原因及其解决方案。问题描述 在SMC操作系统迁移到AliOS时，迁移任务出错提示“M12”信息。问题原因 源系统迁移升级出错，可能原因如下：软件包下载安装...
出错提示M201/M202源系统RPM包下载与安装出错
本文主要介绍在Linux操作系统迁移时，迁移任务出错提示“M201/M201,”信息时的问题描述、问题原因及其解决方案。问题描述 在SMC操作系统迁移到AliOS时，迁移任务出错提示“M201/M201,”信息。问题原因 源系统迁移RPM包安装出错。解决方案 ...
出错提示M10源系统条件预检测出错
本文主要介绍在Linux操作系统迁移时，迁移任务出错提示“M10”信息时的问题描述、问题原因及其解决方案。问题描述 在SMC操作系统迁移到AliOS时，迁移任务出错提示“M10”信息。问题原因 待迁移的源服务器条件预检测出错。解决方案 您可以...
常见问题
则可联系产品团队或提工单 建议在任务执行过程中适当添加日志信息，便于任务出错时定位原因 问：如何提高大量任务并发执行效率？答：基因分析平台将为单个task准备机器资源、拉取docker镜像等，因此高并发时同步准备机器资源或拉取docker...
出错提示M101源系统迁移环境不满足
本文主要介绍在Linux操作系统迁移时，迁移任务出错提示“M101”信息时的问题描述、问题原因及其解决方案。问题描述 在SMC操作系统迁移到AliOS时，迁移任务出错提示“M101”信息。问题原因 源系统迁移环境不满足。解决方案 您可以根据出错...
出错提示“lvm2-cluster is installed”
本文主要介绍在Linux操作系统迁移时，迁移任务出错提示“lvm2-cluster is installed”信息时的问题描述、问题原因及其解决方案。问题描述 在SMC操作系统迁移时，迁移任务出错提示“lvm2-cluster is installed”信息。问题原因 待迁移的源...
周期性调度作业概述
在开发环境执行时，使用任务执行者个人云账号访问身份，访问开发引擎中目标表。在生产环境执行时，使用调度访问身份，访问生产引擎中目标表。功能模块权限控制 进行数据开发前，您可 为用户授权指引授予工作空间成员不同空间角色，让其拥有...
配置资源属性
配置资源组 进入数据开发节点的编辑页面，单击右侧导航栏的 调度配置，在 资源属性 区域配置节点调度时使用的资源组。在 调度资源组 下拉框，选择任务调度时需要使用的资源组，默认配置为 公共调度资源组。说明 如果需要修改新建任务默认...
出错提示“Possible problems with remote login ...
本文主要介绍在Linux操作系统迁移时，迁移任务出错提示“Possible problems with remote login using root account”信息时的问题描述、问题原因及其解决方案。问题描述 在SMC操作系统迁移到AnolisOS时，迁移任务出错提示“Possible ...
出错提示M199源系统迁移环境检测不通过
本文主要介绍在Linux操作系统迁移时，迁移任务出错提示“M199”信息时的问题描述、问题原因及其解决方案。问题描述 在SMC操作系统迁移到AliOS时，迁移任务出错提示“M199”信息。问题原因 源系统迁移环境检测不通过。解决方案 您可以根据...
高效数据治理实施指南
目前该负责人了解其治理维度主要处在研发治理维度，根据实际业务要求处于数仓稳定性治理阶段，希望能够最终减少数仓出错任务数及其影响，以保障对业务侧的SLA承诺。步骤二：选择适合的场景化治理方案，精准定位潜在治理问题 在顶部菜单栏...
常见问题
如果迁移任务状态为出错，您可以在SMC控制台查看迁移任务的日志文件，定位错误原因。如果问题仍未解决，建议您添加 支持钉钉群。更多联系方式，请参见 联系我们。如何固定中转实例的IP地址？您可以申请一个弹性公网IP，然后绑定到中转实例...
配置任务常见错误码及排查方法
解决方法：支付时使用代金券，使支付金额为0。使用其他账号支付。说明 支付失败的订单不可以继续支付，需要在用户中心取消。DTS.Msg.LXPayOrder.AccountBookNotExists 配置任务后支付订单失败。原因：未开通阿里云资金账户或者账户余额不足...
执行测试并查看测试实例
等待资源耗时：当任务出现长时间等待资源的情况，您可以使用 智能诊断 功能定位当前任务运行时，哪些任务在占用资源，快速找到异常任务进行排查。运行时长过长：当任务运行时间与历史运行情况相比明显变长，您可参考以下场景进行处理。非...
查看周期实例
等待资源耗时：当任务出现长时间等待资源的情况，您可以使用 运行诊断 功能定位当前任务运行时，哪些任务在占用资源，快速找到异常任务进行排查。运行时长过长：当任务运行时间与历史运行情况相比明显变长，您可参考以下场景进行处理。非...
- 产品推荐
- 这些文档可能帮助您