常见问题

使用配置Pod Label的方式调度Pod到VNode,为什么调度失败?存储相关问题 挂载NAS目录超时,怎么办?日志和监控相关问题 如何采集日志到阿里云日志服务SLS?metrics-server报404错误,如何处理?云上服务如何访问线下IDC的Pod IP?如果您...

任务管理

任务管理就是为多任务环境中的每个任务分配一个上下文(context)(上下文(context)是指当任务被调度执行的所必不可少的一组数据,包括前任务的CPU指令地址(PC指针),当前任务的栈空间,当前任务的CPU寄存器状态等),在任务相继执行...

创建SMC迁移任务

您需要在弹窗中确认相关信息,并选择是否加入调度组(什么调度组?然后点击 提交,即可发起SMC迁移。名称 含义 说明 是否加入分组调度 是否加入调度组 是:可以将任务加入状态为 开启 的调度组,CMH会按照调度规则自动调度。否:不加入...

查询定时调度

本文介绍如何通过控制台或命令工具查看单个定时调度或定时调度列表。使用控制台查看定时调度 登录 Serverless工作流控制台。在左侧导航栏,单击 流程。在流程列表中单击目标流程的流程名称。单击 定时调度 页签。您可以查看定时调度列表...

依赖关系

配置调度依赖前您需先了解以下内容 什么调度依赖 为什么要设置调度依赖 DataWorks上如何设置调度依赖?哪些场景不支持设置调度依赖?不需要依赖的表如何删除?调度依赖配置常见问题 提交节点报错:当前节点依赖的父节点输出名不存在 提交...

创建定时调度

使用命令工具创建定时调度 在使用命令工具创建定时调度前,您需要安装和配置阿里云命令工具CLI。详细信息,请参见 什么是阿里云CLI?可选:执行以下命令查看创建定时调度API的请求参数。aliyun fnf CreateSchedule help 预期输出:...

E-HPC集群调度器插件

什么调度器插件 E-HPC作为一款PaaS平台,集成了常用的开源调度器来提供平台级服务。当您的业务需要迁移到云上时,往往需要将云下的调度器集成至云上,但因HPC行业调度器众多,且不同调度器有多种定制版本,会出现E-HPC内置调度器无法满足...

Dataphin补数据任务空跑调度了是什么原因

问题描述 Dataphin补数据任务空跑调度了是什么原因?问题原因 按当前的调度配置,补20220930(月末)的数据空跑了是正常的。补数据选择的是业务日期,而调度周期配置的是调度日期,如果补数据时选择的业务日期是20220930,那么对应的调度...

文档修订记录

若任务需要周期性调度运行,您需定义该任务的调度相关属性,包括调度周期、调度依赖、调度参数等。任务调度属性配置概述 2023年2月更新记录 时间 特性 类别 描述 产品文档 2023.2.28 新增功能 数据治理中心 DataWorks支持您根据业务需要,...

流量调度器概述

流量调度器支持设置DDoS高防和云产品间的联动规则,仅在特定场景下触发并切换启用DDoS高防,保证无DDoS攻击时日常业务流畅运行,发生DDoS攻击时可切换至DDoS高防,为您的业务提供防护。流量调度器包括云产品联动、阶梯防护、CDN/DCDN联动、...

创建EMR Shell节点

配置任务调度 如果您需要周期性执行创建的节点任务,可以单击节点编辑页面右侧的 调度配置,根据业务需求配置该节点任务的调度信息:配置任务调度的基本信息,详情请参见 配置基础属性。配置时间调度周期、重跑属性和上下游依赖关系,详情...

Quick BI v4.3版本说明

支持多种调度方式,包括手动调度,周期调度和动态参数调度。支持任务发布状态管理和运维管理。移动端 移动端图表展示支持栅格布局,一可放置多个图表。支持布局缩放来调整单个组件尺寸和位置。支持布局个性化隐藏Tab内的单个图表。可视化...

产品功能

SchedulerX主要提供调度、执行和运维三方面的功能。多种表达式的定时调度 Crontab:支持Unix Crontab表达式,详情请参见 Cron。不支持秒级别。Fixed rate:Crontab必须被60整除,不支持其它数量级时间间隔的任务,如每隔40分钟的定时任务。...

创建并使用PAI DLC节点

为避免使用DataWorks周期性调度DLC节点在PAI产生较多不易区分的同名任务,建议在DataWorks开发DLC任务时根据实际需要合理设置调度周期,同时,建议在任务名称中增加日期时间变量,并通过调度配置为该变量赋值时间调度参数,实现任务命名...

用户洞察常见问题

重新导入数据表:用户标签表、用户行为表、统计表、订单明细表、订单汇总表的导入均支持手动调度、日/小时周期调度、通过接口触发调度,导入调度配置请参见 调度任务。更新模型:RFM模型、AIPL模型支持手动更新、跟随底层数据调度更新,...

什么是SCDN

本文为您介绍什么是阿里云SCDN及SCDN支持的功能。SCDN简介 SCDN(Secure Content Delivery Network)即拥有安全防护能力的CDN服务,为您提供安全CDN带宽和独享资源,并提供全网100万QPS,单节点6万QPS能力,同时支持频次控制和流量管理等...

云原生AI套件概述

异构计算集群概述 开启集群GPU监控 共享GPU调度概述 AI任务调度 多种调度策略支持:针对AI分布式训练等典型批量任务类型,ACK调度器扩展Kubernetes原生调度框架,支持实现多种典型批量调度策略,包括Gang Scheduling(Coscheduling)、FIFO...

历史功能发布记录(2023年)

全部 自助诊断GPU节点问题 ACK调度器支持IP感知调度和拓扑调度等功能 IP感知调度 当Pod调度到某节点上时,由于可用IP不足无法启动,该节点将被标记为缺少IP状态并被拉黑五分钟。IP感知调度可防止大量Pod由于IP不足而导致的启动失败问题。...

数据风险点监控

DQC提供常用的规则模板,包括 表数较N天前波动率、表空间大小较N天前波动率、字段最大/最小/平均值相比N天前波动率、字段空值/唯一个数 等。DQC的工作流程如下图所示。DQC的检查通过运行SQL任务实现。该SQL任务嵌套在整体任务中,如果...

创建安全沙箱应用

关于ACR的更多信息,请参见 什么是容器镜像服务ACR。说明 您可以在 容器镜像服务 页签,根据名称搜索托管在容器镜像服务ACR中的镜像。Docker官方镜像:在 Docker官方镜像 页签中,可以选择Docker官方提供的容器镜像。用户收藏:在 用户收藏...

服务运行

本文介绍使用容器服务ACK涉及的服务授权、访问、调度及资源分配等常见问题。如何部署集群的第一个应用?集群中的应用A如何访问应用B?如何将集群内的各节点资源合理的分配给不同容器组?如何将Pod调度到指定ECS节点?如何获取服务Service的...

赋值节点

注意事项 部分节点可通过节点上下文中的赋值参数,达到与赋值节点相同的目的(例如,EMR Hive、EMR Spark SQL、ODPS Script、Hologres SQL、AnalyticDB for PostgreSQL和MySql节点),赋值参数的使用与赋值节点一致,添加赋值参数的操作,...

创建有状态工作负载StatefulSet

关于ACR的更多信息,请参见 什么是容器镜像服务ACR。容器镜像服务个人版:可以选择托管在容器镜像服务ACR中的个人版镜像。需要选择镜像所属地域,以及镜像服务实例。制品中心:包含应用容器化基础OS镜像、基础语言镜像、AI/大数据相关镜像...

常见问题

移动调度中心高可用 Q:移动调度中心实现高可用的策略是什么?A:移动调度中心实现高可用的策略如下:移动调度中心已预先配置好自身域名和 IP,这样 App 可以拉取到 MDGC 自身的域名调度配置。移动调度中心已预先配置好域名和 IP 到公网 ...

创建无状态工作负载Deployment

您可以通过镜像、编排模板及命令创建一个无状态应用。通过私有镜像创建应用时,您还可以通过容器服务控制台为私有镜像设置密钥,以确保镜像安全。本文以Nginx为例介绍如何通过镜像、编排模板以及命令创建无状态应用。前提条件 已创建...

概述

任务调度 SOFAStack 任务调度提供分布式任务调度框架,实现任务的分布式处理,并能规范化、自动化、可视化和集中化地对金融企业不同业务系统的任务进行统一调度和全方位监控运维管理,达到所有任务有序、高效运行的目的,极大降低开发和运...

使用负载感知调度

ACK集群Pro版 调度器的负载感知调度功能会根据节点的实际负载情况,将Pod优先调度到负载较低的节点,以实现节点负载均衡,降低节点故障风险。前提条件 已安装ack-koordinator组件,且版本为1.1.1-ack.1及以上。具体操作,请参见 ack-...

删除定时调度

本文介绍如何使用控制台或命令工具删除定时调度。前提条件 成功创建定时调度 使用控制台删除定时调度 登录 Serverless工作流控制台。在左侧导航栏,单击 流程。在流程列表中单击目标流程的流程名称。在目标流程的 流程 页面,单击 定时...

产品相关问题

任务调度的核心功能是什么?分布式调度:提高系统的可用性、伸缩性,且调度与业务的分离,让研发更专注业务逻辑的开发。多种任务类型:简单任务,集群任务,消息任务,流式任务,满足不同场景需求。丰富的管理功能:包括定时触发、事件触发...

修改定时调度

本文介绍如何通过控制台或命令工具修改定时调度。前提条件 成功创建定时调度 使用控制台修改定时调度 登录 Serverless工作流控制台。在左侧导航栏,单击 流程。在流程列表中单击目标流程的流程名称。单击 定时调度 页签。单击目标定时...

数据开发常见问题

调度依赖常见问题 配置须知 什么调度依赖?为什么要设置调度依赖?DataWorks上如何设置调度依赖?下游任务依赖上游任务的运行规则是什么?节点的输出名称的作用是什么?一个节点可以有多个输出名称吗?哪些场景不支持设置调度依赖?典型...

调度参数

本文为您介绍调度参数的相关问题。调度参数典型场景 调度参数往前取一个小时,如何处理跨天参数替换的问题 如何处理表的分区格式年月日时分秒间带空格情况:pt=yyyy-mm-dd hh24:mi:ss 节点定时时间为每天20:00,节点内参数取值为定时时间...

工作流调度简介

双向集成调度 调度名称 标准执行模式工作流调用方式 快速执行模式工作流调用方式 定时调度 异步调用 同步调用 SLS调度 异步调用 同步调用 MNS调度 异步调用 同步调用 Kafka调度 异步调用 同步调用 RocketMQ调度 异步调用 同步调用 RabbitMQ...

等待资源

什么任务一直在等待gateway调度资源?为什么数据集成任务一直显示wait?为什么会出现等待资源?问题现象 调度将任务下发到对应执行引擎上,此过程可能会出现以下等待资源问题:等待调度资源组。数据集成任务等待数据集成资源。计算任务...

实现任务调度

在EDAS控制台中,已经无缝集成了阿里巴巴的分布式任务调度系统SchedulerX作为核心组件,以实现高效的任务调度管理功能。本文将介绍如何在您的Spring Cloud应用中使用SchedulerX实现任务调度,并部署到EDAS中,实现一个 简单Job单机版 的...

Airflow调度DLA Spark作业

Airflow是比较流行的开源调度工具,可以实现各类工作负载的DAG编排与调度。您可以通过Spark-Submit和Spark-SQL命令来实现Airflow调度Spark任务。DLA Spark提供了命令工具包,支持通过Spark-Submit和Spark-SQL方式来提交Spark作业。您...

共享GPU调度

进一步了解,请参见:关于什么是共享GPU调度,请参见 共享GPU调度概述。关于如何开启共享GPU调度专业版,请参见 安装共享GPU调度组件。关于如何使用共享GPU调度专业版,请参见 运行共享GPU调度示例、通过共享GPU调度实现多卡共享。若ACK...

GPU调度概述

本文介绍调度GPU资源的不同方法,包括使用Kubernetes默认GPU调度、提升GPU资源使用率的共享GPU调度、以及加速任务执行的GPU拓扑感知调度。普通GPU调度 申请Kubernetes GPU集群后,通过运行TensorFlow的GPU实验环境,关于如何使用Kubernetes...

其他问题

什么不能在调度资源组上进行大数据计算?其他 如何设置任务优先级?如何查看任务优先级?周期任务与周期实例、补数据实例、测试实例是什么关系?DataWorks每晚将根据周期任务,批量生成第二天自动调度的周期实例,周期实例自动生成并且...

任务调度属性配置概述

若任务需要周期性调度运行,您需定义该任务的调度相关属性,包括调度周期、调度依赖、调度参数等。本文为您介绍调度配置的相关内容。前提条件 已创建节点。DataWorks基于节点进行任务开发,不同类型的引擎任务在DataWorks上被封装为不同...
共有136条 < 1 2 3 4 ... 136 >
跳转至: GO
产品推荐
云服务器 安全管家服务 安全中心
这些文档可能帮助您
批量计算 音视频通信 视觉计算服务 弹性公网IP 短信服务 人工智能平台 PAI
新人特惠 爆款特惠 最新活动 免费试用