离线同步数据质量排查
本文将为您列举一些常见数据质量方面的场景，方便您排查是否存在符合的场景，根据对应解决方案解决数据同步质量问题。背景信息 讲述数据集成数据同步的原理机制，理解数据同步的过程，进而对数据同步的执行效果有判断能力，判断数据同步...
消息 Mesh
同时，依赖消息的精细化流量调度，预期可以发掘出更大的业务价值，包括：基于事件驱动的 Serverless 化应用多版本流量管理 流量着色 分组路由 细粒度的流量灰度与 A/B 策略 未来，蚂蚁将会持续加大对消息 Mesh 的投入，为消息 Mesh 支持更...
错误码
解决方案：请提交 工单，或联系Dataphin的支持人员协助处理。DPN.Bbox.MetaCenterServiceError 错误原因：元数据服务不可用。解决方案：请提交 工单，或联系Dataphin的支持人员协助处理。DPN.Bbox.ModelNotFound 错误原因：根据模型ID查询...
使用Gang scheduling
ACK基于新版的Kube-scheduler框架实现Gang scheduling的能力，解决原生调度器无法支持All-or-Nothing作业调度的问题。本文介绍如何使用Gang scheduling。重要提示 请预留足够资源：使用弹性节点池时请保证弹性节点池的最大资源量以及节点...
使用Gang scheduling
ACK基于新版的Kube-scheduler框架实现Gang scheduling的能力，解决原生调度器无法支持All-or-Nothing作业调度的问题。本文介绍如何使用Gang scheduling。重要提示 请预留足够资源：使用弹性节点池时请保证弹性节点池的最大资源量以及节点...
任务常见问题
如果持续报错且每次报错的workerAddr都是同一台机器，说明服务端和客户端长连接断开，需要将该Worker节点重启或者升级SchedulerX客户端版本至最新版本。升级至最新版本后，断开的长连接可自动恢复。任务失败，报错“used space beyond 90.0...
使用负载热点打散重调度
ack-koordinator组件提供负载热点打散重调度能力，可以感知集群内节点负载的变化，自动地优化超过负载水位安全阈值的节点，防止出现负载极端不均衡的情况。本文介绍如何使用负载热点打散重调度及其高级配置参数。使用限制 仅支持ACK Pro版...
节点异常问题排查
本文介绍关于节点异常问题的诊断流程、排查思路、常见问题及解决方案。本文目录 类别 内容 诊断流程 诊断流程 常见排查方法 节点故障诊断 检查节点的详情 检查节点的状态 检查节点的事件 检查节点的诊断日志 检查节点的关键组件 检查节点的...
任务常见问题
如果持续报错且每次报错的workerAddr都是同一台机器，说明服务端和客户端长连接断开，需要将该Worker节点重启或者升级SchedulerX客户端版本至最新版本。升级至最新版本后，断开的长连接可自动恢复。任务失败，报错“used space beyond 90.0...
任务常见问题
如果持续报错且每次报错的workerAddr都是同一台机器，说明服务端和客户端长连接断开，需要将该Worker节点重启或者升级SchedulerX客户端版本至最新版本。升级至最新版本后，断开的长连接可自动恢复。任务失败，报错“used space beyond 90.0...
任务实例状态异常
解决措施 按照下图所示，在 工作空间配置 页面，检查工作空间是否开启调度。说明 如有需要请协调主账号开启工作空间调度。有周期任务，有其他周期实例，但是这个任务没有产生周期实例 问题现象 有周期任务，有其他周期实例，但是这个任务...
错误码
4301 内部协程调度错误。4302 解码错误。4303 缓冲区非正常溢出。4304 未知的视频封装格式（非MP4）。4400 未知错误MEDIA_ERR_SRC_NOT_SUPPORTED（由于服务器或网络原因不能加载资源，或者格式不支持）。4500 服务端请求错误，查看Network...
错误反馈
解决方法：建议您直接使用内容安全SDK，SDK中已经封装了签名过程，无需您再编写签名代码。如果您只能使用HTTP方式调用接口，建议先查看内容安全签名机制。更多信息，请参见 SDK概览、签名机制。已经将*.aliyuncs.com加入防盗链白名单，为...
故障排除
CC API在调用时可能会遇到一些错误，遇到错误时以错误码为依据...解决方案：建议重试，如果多次重试报错请联系服务方或提交工单。ServiceUnavailable 原因：CC API服务不可用。解决方案：建议重试，如果多次重试报错请联系服务方或提交工单。
其他常见问题
解决方案 检查客户端应用配置文件中的 AntVIP 地址。详情请参见 properties 配置项。任务调度客户端不在线 问题现象 任务调度控制台显示客户端不在线。问题原因 客户端和服务端之间的 TCP 长连接建立失败。解决方案 控制台显示客户端在线，...
调度至Arm节点
注意事项 如果您的ACK集群同时存在Arm节点和x86节点，为了防止不支持Arm的应用和组件被错误地调度到Arm节点，请为Arm节点添加污点 kubernetes.io/arch=arm64:NoSchedule。如果您的集群版本为v1.24之前，在使用 nodeSelector 或者 ...
配置Arm节点池
注意事项 如果您的ACK集群同时存在Arm节点和x86节点，为了防止不支持Arm的应用和组件被错误地调度到Arm节点，请为Arm节点添加污点 kubernetes.io/arch=arm64:NoSchedule。如果您的集群版本为v1.24之前，在使用 nodeSelector 或者 ...
通过ack-co-scheduler组件实现协同调度
与原生的Kubernetes调度器相比，容器服务ACK的调度器扩展出更多其他功能，例如Gang Scheduling、CPU拓扑感知、ECI弹性调度等。本文介绍通过为注册集群安装ack-co-scheduler组件的方式，以实现在您的本地集群中使用阿里云容器服务ACK的调度...
资源调度概述
功能 描述 参考文档 Gang scheduling All-or-Nothing作业要求所有的任务在同一时间被调度，如果只是部分任务启动的话，启动的任务将持续等待剩余的任务被调度。在极端情况下，所有作业都处于挂起状态，从而导致死锁。为了解决这个问题，ACS...
AI负载调度
本文介绍弹性资源调度、AI任务调度、异构资源调度和任务队列调度，帮助用户提升集群的资源利用率和作业运行效率。弹性调度 ACK为不同弹性资源提供了混合调度的能力。功能 描述 参考文档 弹性调度 阿里云提供了不同种类的弹性资源，如ECS和...
调度概述
功能 描述 参考文档 Gang scheduling All-or-Nothing作业要求所有的任务在同一时间被调度，如果只是部分任务启动的话，启动的任务将持续等待剩余的任务被调度。在极端情况下，所有作业都处于挂起状态，从而导致死锁。为了解决这个问题，...
任务触发与执行问题
任务执行超时 问题现象 出现 TIMEOUT 错误。问题原因 客户端处理超时。解决方法 查看超时时间是否配置太小。建议根据任务的实际执行情况设置合理的超时时间。查看客户端错误日志 common-error.log。自定义参数不存在 问题现象 出现 javax....
接入问题
解决方案：登录Worker查看SchedulerX的日志，日志路径为/${user.home}/logs/schedulerx/worker.log。如果是admin账号启动进程，日志路径为/home/admin/logs/schedulerx/worker.log。如果是root账号启动进程，日志路径为/root/logs/...
DescribeAutoProvisioningGroups-查询一个或多个弹性...
变更历史 变更时间 变更内容概要 操作 2024-02-29 OpenAPI 错误码发生变更、OpenAPI 入参发生变更、OpenAPI 返回结构发生变更 看变更集 变更项 变更内容 错误码 OpenAPI 错误码发生变更。删除错误码：400 入参 OpenAPI 入参发生变更。新增...
接入问题
解决方案：登录Worker查看SchedulerX的日志，日志路径为/${user.home}/logs/schedulerx/worker.log。如果是admin账号启动进程，日志路径为/home/admin/logs/schedulerx/worker.log。如果是root账号启动进程，日志路径为/root/logs/...
接入问题
解决方案：登录Worker查看SchedulerX的日志，日志路径为/${user.home}/logs/schedulerx/worker.log。如果是admin账号启动进程，日志路径为/home/admin/logs/schedulerx/worker.log。如果是root账号启动进程，日志路径为/root/logs/...
RDS增量数据同步至MaxCompute
如果该任务出现错误，脏数据较容易清理），每次导入数据都是导入至一张单独的表或分区中，或者覆盖历史记录。本文定义任务测试时间是2016年11月14日，在14日进行增量同步，同步历史数据至分区ds=20161113中。增量同步的场景配置了自动调度...
RDS增量数据同步至MaxCompute
如果该任务出现错误，脏数据较容易清理），每次导入数据都是导入至一张单独的表或分区中，或者覆盖历史记录。本文定义任务测试时间是2016年11月14日，在14日进行增量同步，同步历史数据至分区ds=20161113中。增量同步的场景配置了自动调度...
开发PyODPS 3任务
with instance.open_reader(tunnel=True,limit=False)as reader:说明 若您未开启 Instance Tunnel，可能导致获取数据格式错误，解决方法请参见 Python SDK常见问题。设置运行参数 您可以通过设置 hints 参数，来设置运行时的参数，参数类型...
开发PyODPS 3任务
with instance.open_reader(tunnel=True,limit=False)as reader:说明 若您未开启 Instance Tunnel，可能导致获取数据格式错误，解决方法请参见 Python SDK常见问题。设置运行参数 您可以通过设置 hints 参数，来设置运行时的参数，参数类型...
开发PyODPS 2任务
with instance.open_reader(tunnel=True,limit=False)as reader:说明 若您未开启 Instance Tunnel，可能导致获取数据格式错误，解决方法请参见 Python SDK常见问题。设置运行参数 您可以通过设置 hints 参数，来设置运行时的参数，参数类型...
开发PyODPS 2任务
with instance.open_reader(tunnel=True,limit=False)as reader:说明 若您未开启 Instance Tunnel，可能导致获取数据格式错误，解决方法请参见 Python SDK常见问题。设置运行参数 您可以通过设置 hints 参数，来设置运行时的参数，参数类型...
索引
本文汇总使用SchedulerX过程中的常见问题和对应解决方法。报警常见问题 killed from server don't update progress more than 30s 任务管理常见问题 Spring应用找不到Bean怎么办？任务失败，报错“submit jobInstanceId to worker timeout...
kube-scheduler
修复剩余IP感知调度中由于剩余IP计数错误导致可调度Pod变少的问题 v1.24.6-aliyun-6.3.548a9e59 2024年01月10日 自定义弹性资源优先级调度 调度修复了使用自定义弹性资源优先级调度时，ECI可用区亲和以及打散不生效的问题。CPU拓扑感知调度...
Stream模型
该模型主要解决以下问题场景：现有的Map模型每次运行都需要等待所有子任务执行完，单个子任务耗时影响整体的后续运行。对子任务的生产速率和分发处理提供全局的并发控制。调度服务端提供任务运行期的监控报警。前提条件 已创建应用（任务...
通过单条管道创建集成任务
建议您根据提示信息解决告警或错误后，再进行提交。系统在任务提交时，解析开发环境的表和字段血缘关系；发布时，解析生产环境的表和字段血缘关系。单个任务提交或发布时支持解析不超过 10万条 血缘关系，超过则不予记录，在资产目录中无法...
存储多可用区部署的推荐配置
通过存储多可用区部署优化，可以帮您最大限度地减少应用发布中断，确保关键业务系统和应用在各种故障情况下能持续运行。本文介绍存储在多可用区部署时的推荐配置。背景信息 Kubernetes强大的容器编排能力，使得用户在Kubernetes上构建大...
通过脚本模式创建集成任务
建议您根据提示信息解决告警或错误后，在进行提交。系统在任务提交时，解析开发环境的表和字段血缘关系；发布时，解析生产环境的表和字段血缘关系。单个任务提交或发布时支持解析不超过 10万条 血缘关系，超过则不予记录，在资产目录中无法...
通过单条管道创建集成任务
建议您根据提示信息解决告警或错误后，再进行提交。系统在任务提交时，解析开发环境的表和字段血缘关系；发布时，解析生产环境的表和字段血缘关系。单个任务提交或发布时支持解析不超过 10万条 血缘关系，超过则不予记录，在资产目录中无法...
补数据
本文为您介绍补数据的相关问题。补数据功能说明 为什么小时分钟任务补数据选择了并行但实际不生效？...场景示例：对月调度任务进行补数据 任务调度周期定义：定时每月1号0点调度的任务，在补数据时，需要选择业务为上个月末。
- 产品推荐
- 这些文档可能帮助您