配置AnalyticDB MySQL Spark节点
为解决以上痛点，您可以使用 DMS 的AnalyticDB MySQL Spark节点进行Spark作业开发、调度。应用场景 机器学习 图像处理 推荐系统 报表分析 数据挖掘 前提条件 购买了AnalyticDB MySQL湖仓版（3.0）集群。购买的具体操作，请参见 创建湖仓版...
配置eci-profile
为解决此类问题，ECI支持了eci-profile。eci-profile可以实现以下三个功能：ECI Scheduler 在混合使用ECI和普通节点的场景下，一般可以通过配置Pod Label、配置Namespace Label和配置ECI弹性调度等方式将Pod调度到ECI，但这些方式均需要对...
配置eci-profile
为解决此类问题，ECI支持了eci-profile。eci-profile可以实现以下三个功能：ECI Scheduler 在混合使用ECI和普通节点的场景下，一般可以通过配置Pod Label、配置Namespace Label和配置ECI弹性调度等方式将Pod调度到ECI，但这些方式均需要对...
配置eci-profile
为解决此类问题，ECI支持了eci-profile。eci-profile可以实现以下三个功能：ECI Scheduler 在混合使用ECI和普通节点的场景下，一般可以通过配置Pod Label、配置Namespace Label和配置ECI弹性调度等方式将Pod调度到ECI，但这些方式均需要对...
任务冻结与解冻
产生原因及解决措施 平台每晚会根据周期任务，生成第二天要跑的周期实例并自动调度。您可以手动针对当前周期任务触发补数据和测试操作，并根据当前实例快照信息生成补数据实例与测试实例，根据以上说明的周期任务与周期实例，测试实例和补...
如何接入日志服务
阿里巴巴分布式任务调度系统SchedulerX 2.0提供日志服务，您无需修改代码，只需增加一个Log4j或Logback的配置，即可在控制台看到每次任务调度（包括分布式任务）的业务日志。本文介绍如何通过SchedulerX接入并查看日志服务。前提条件（可选...
Dataphin计算任务正常调度和补数据结果不一致
问题描述 Dataphin计算任务正常调度和补数据结果不一致。问题原因 日志中的两次执行计划不一样，有些源表没有读取数据，一因为执行任务的时候该源表的分区数据为空。解决方案 查看没有读的源表分区数据产出时间，调整计算任务调度时间在源...
管理简单任务和集群任务
解决线下到线上的配置同步问题和不同环境之间的任务配置同步问题。导出任务 在 SOFAStack 控制台，选择 中间件>任务调度>任务配置。在任务列表选中目标任务，然后单击 导出。导出的 JSON 文件存放在浏览器设置的默认下载文件夹中。导入任务...
概述
开发者在集成了 SOFABoot 框架后，只需引入对应中间件的 starter，SOFABoot 即会自动导入所需的依赖并完成必要的配置，也能自动解决后续的健康检查、运维监控等问题。开发者能够更加专注于业务逻辑，有效节约了开发时间及后期维护的成本。...
小文件优化及作业诊断常见问题
本文为您介绍小文件优化以及作业诊断时的常见问题。问题类别 常见问题 小文件优化 MaxCompute什么情况下会产生小文件？如何解决小文件问题？作业诊断 执行并发插入操作报错，如何处理？运行作业时，报错ODPS-0130121，如何解决？创建的...
Dataphin首页调度运维统计规则
问题描述 用户在使用Dataphin过程中，需要使用到调度运维工具，发现首页的调度运维统计数据和运维页面统计的数据并没有一模一样。解决方案 首页展示的是当前登录账号责任的任务。适用于 Dataphin 运维
为什么会空跑
周月调度任务补数据空跑解决方法：您可以按下图观察一下当天周期实例的定时时间和业务时间，如果任务为月调度任务定时每月1号调度，那补数据需要选择业务时间为月末，周任务同理。场景二：实时生成的过期实例 当使用 发布后及时生成实例 ...
开发PyODPS 2任务
DataWorks提供PyODPS 2节点类型，您可以在DataWorks上通过PyODPS语法进行PyODPS任务开发，PyODPS集成了MaxCompute的Python SDK。支持您在DataWorks的...PyODPS常见问题：您可了解PyODPS执行过程中的常见问题，便于出现异常时快速排查解决。
使用负载热点打散重调度
ack-koordinator组件提供负载热点打散重调度能力，可以感知集群内节点负载的变化，自动地优化超过负载水位安全阈值的节点，防止出现负载极端不均衡的情况。本文介绍如何使用负载热点打散重调度及其高级配置参数。使用限制 仅支持ACK Pro版...
常见问题
本文汇总使用SchedulerX过程中的常见问题和对应解决方法。任务管理常见问题 Spring应用找不到Bean怎么办？任务失败，报错“submit jobInstanceId to worker timeout”任务失败，报错“used space beyond 90.0%!任务失败，报错...
常见问题
本文汇总使用SchedulerX过程中的常见问题和对应解决方法。任务管理常见问题 Spring应用找不到Bean怎么办？任务失败，报错“submit jobInstanceId to worker timeout”任务失败，报错“used space beyond 90.0%!任务失败，报错...
阿里云CDN的五大竞争力
本文主要从五个方面全面介绍阿里云CDN的产品能力，帮助您更好地理解阿里云CDN产品。阿里云CDN产品主要有以下五大竞争力：产品竞争力 技术竞争力 价格竞争力 生态竞争力 ...完善的问题解决体系：您可以提交反馈建议，进行售前和售后问题咨询。
开发ODPS MR任务
MaxCompute提供MapReduce编程接口。您可以通过创建ODPS MR类型节点并提交任务调度，使用MapReduce Java API编写MapReduce程序来处理MaxCompute中的...MapReduce常见问题：您可了解MR任务执行过程中的常见问题，便于出现异常时快速排查解决。
创建工作空间
DataWorks部分地域目前支持多调度时区切换，支持修改调度时区的地域、各地域支持切换的时区、切换时区注意事项、如何切换时区，请务必提前阅读 场景：切换调度时区。步骤二：创建工作空间 在控制台单击左侧导航栏的 工作空间列表，进入工作...
开发ODPS MR任务
MaxCompute提供MapReduce编程接口。您可以通过创建ODPS MR类型节点并提交任务调度，使用MapReduce Java API编写MapReduce程序来处理MaxCompute中的...MapReduce常见问题：您可了解MR任务执行过程中的常见问题，便于出现异常时快速排查解决。
云原生AI套件概述
异构计算集群概述 开启集群GPU监控 共享GPU调度概述 AI任务调度 多种调度策略支持：针对AI分布式训练等典型批量任务类型，ACK调度器扩展Kubernetes原生调度框架，支持实现多种典型批量调度策略，包括Gang Scheduling（Coscheduling）、FIFO...
索引
本文汇总使用SchedulerX过程中的常见问题和对应解决方法。报警常见问题 killed from server don't update progress more than 30s 任务管理常见问题 Spring应用找不到Bean怎么办？任务失败，报错“submit jobInstanceId to worker timeout...
接入问题
无可用机器（no worker available）问题现象：无可用机器，系统提示no worker available。可能原因：可能为配置错误。解决方案：登录Worker查看SchedulerX的日志，日志路径为/${user.home}/logs/schedulerx/worker.log。如果是admin账号...
RPC
Service Mesh 解决了在 SOA（Service-Oriented Architecture）下面存在的亟待解决的如下问题：基础架构和业务研发耦合问题 业务透明的稳定性与高可用性等问题 使用 Service Mesh 前状态 在没有 Service Mesh 之前，整个 SOFAStack 技术演进...
索引
本文汇总使用SchedulerX过程中的常见问题和对应解决方法。报警常见问题 killed from server don't update progress more than 30s 任务管理常见问题 Spring应用找不到Bean怎么办？任务失败，报错“submit jobInstanceId to worker timeout...
什么是故障演练
定位与解决问题的应急能力 通过故障突袭，随机对系统注入故障，考察相关人员对问题的应急能力，以及问题上报、处理流程是否合理，达到以战养战，锻炼定位与解决问题的能力。故障演练与AHAS服务体系 故障演练作为AHAS的一部分，与AHAS其他...
Dataphin的补数据任务为何只执行了0秒
产品名称 Dataphin 产品模块 周期调度 概述 本文为您介绍为何有些调度、补数据任务执行成功了，但实际执行时间只有0秒 问题描述 您查看补数据实例是成功状态，但运行时长却是0秒 问题原因 可能是空跑导致的 解决方案 1.在实例节点右键，...
OSS对象检查节点
Code>NoSuchKey</Code><Message>The specified key does not exist.</Message><RequestId></RequestId><HostId>oss对象</HostId><Key>xc/111.txt</Key></Error>常见问题：报错The specified key does not exist 报错原因：指定的...
什么是阿里云CDN
为什么选择阿里云CDN 使用CDN可以帮您实现静态资源的加速和分发，提高资源访问速度：丰富的资源节点：为用户提供就近接入的同运营商CDN节点，解决长距离接入和跨运营商访问带来的延迟高和速度慢的问题。资源可弹性扩展：基于全球3200+节点...
ETL工作流快速体验
归并节点应用 DataWorks MaxCompute 数据开发 归并节点是DataStudio 数据开发 提供的逻辑控制节点，可对上游节点的运行状态进行归并，用于解决分支节点下游节点的依赖挂载和运行触发问题。本案例以上游任务运行失败不阻塞下游任务执行为例...
新手指引
回源配置 缓存配置 刷新和预热资源 HTTPS配置 CDN加速OSS资源 常见问题 启动CDN加速服务视频讲解 反馈与建议 使用阿里云CDN产品和服务中有任何问题或建议，您可以通过以下渠道反馈，将有专人跟进解决您的问题：如果发现产品文档的问题，如...
弹性伸缩FAQ
本文介绍容器服务ACK弹性伸缩的常见问题及解决办法。类型 问题 水平伸缩（HPA）常见问题 HPA的监控数据current字段为何显示为unknown？为何HPA在滚动发布时出现扩容多余Pod？HPA到达阈值为何不进行扩缩容？HPA采集周期如何配置？CronHPA...
配置数据质量监控
表的行数非0校验（强规则）主键唯一性校验（弱规则）3、规则关联调度节点 数据质量通过关联调度的方式及时感知源端数据的变更与ETL（Extract Transformation Load）中产生的脏数据，即通过关联调度节点触发数据质量校验规则执行。...
操作流程
查看日志信息以及运维信息 当运行失败或者上线失败，通过查看日志信息或者上线的运维信息定位失败原因，解决失败的问题。具体操作，请参见 查看生产节点详情信息 或 查看生产节点任务运维信息。场景模式操作流程 场景任务适用于算法相对...
操作流程
查看日志信息以及运维信息 当运行失败或者上线失败，通过查看日志信息或者上线的运维信息定位失败原因，解决失败的问题。具体操作，请参见 查看生产节点详情信息 或 查看生产节点任务运维信息。场景模式操作流程 场景任务适用于算法相对...
配置数据质量监控
表的行数非0校验（强规则）主键唯一性校验（弱规则）3、规则关联调度节点 数据质量通过关联调度的方式及时感知源端数据的变更与ETL（Extract Transformation Load）中产生的脏数据，即通过关联调度节点触发数据质量校验规则执行。...
依赖关系
配置调度依赖前您需先了解以下内容 什么是调度依赖 为什么要设置调度依赖 DataWorks上如何设置调度依赖？哪些场景不支持设置调度依赖？不需要依赖的表如何删除？调度依赖配置常见问题 提交节点报错：当前节点依赖的父节点输出名不存在 提交...
Dataphin周期任务已修改为空跑任务，为什么还会正常...
问题描述 周期任务从正常调度修改为空跑任务并发布后，周期实例第二天仍按照正常调度来运行，这是什么原因呢？问题原因 首先明确概念：正常调度指按照配置的调度周期和起调时间，并正常执行。空跑调度指按照调度周期的时间配置调度，但都是...
Dataphin天调度如何依赖小时调度
问题描述 用户在使用Dataphin过程中，需要使用到天调度任务依赖小时调度任务。例如上游任务A，配置小时调度，2点和14点运行，下游任务B，配置天调度，每天4点运行，需要做到任务B每天依赖任务A的2点那一调的任务，而不是任务A彻底结束了，...
K8s任务
一旦Pod执行失败，您可直接在SchedulerX控制台查看到详细的失败原因并分析，实现高效便捷的问题定位与调试。监控大盘 通过SchedulerX来调度您的Pod和Job，无需另行开通Prometheus服务，即可查看内置的任务监控功能。离在线混布 对于诸如...
- 产品推荐
- 这些文档可能帮助您