安装脚本配置说明
可选值：true false isComputeNode true 是否计算节点，可选值：true false 异常处理 创建集群时可能会出现异常，常见异常说明如下：如果集群创建过程中出现异常，导致集群创建失败，则不会执行安装脚本。如果集群创建成功，但是单个计算...
YARN调度器
基础架构&核心流程 CapacityScheduler的主调度流程有三种触发方式：节点心跳驱动（Node-Heartbeat Driven）：是面向节点的局部调度（当调度器收到每个节点心跳时触发，为当前节点选择可调度的应用），受限于心跳间隔时间与接近随机调度，...
调度模式
本文提供了您在调用API操作RPA客户端时可以设置的客户端调度状态。实例状态 状态说明 attend 不可调度 unmanned 可调度
调度概述
ACK Scheduler支持不同弹性资源的混合调度、异构资源的精细化调度、批量计算的任务调度等，提升应用的性能和集群整体资源的利用率。本文介绍弹性调度、任务调度、异构资源调度、负载感知调度和精细化调度的主要功能。弹性调度 ACK为不同...
Spring任务
通过对接SchedulerX任务调度可快速实现企业化运用的支持。前提条件 客户端1.7.10及以上版本 采用Spring Boot模式接入SchedulerX平台具体操作，请参见 Spring Boot应用接入SchedulerX。接入指南 接入配置 以Spring Boot接入模式为例，应用...
UpdateTaskFlowSchedule-更新任务流调度配置
其中 定时调度可配置调度一次或周期调度，事件调度可配置的订阅包括任务流和任务流节点。配置更新后，将任务流重新发布并部署，新的任务流实例将按照配置的调度设置进行调度。调试 您可以在OpenAPI Explorer中直接运行该接口，免去您计算...
扩展MapReduce（MR2）
相比于传统的MapReudce，MaxCompute提供的扩展MapReduce模型（简称MR2）改变了底层的调度和IO模型，可避免作业时冗余的IO操作。与MaxCompute相比，MR2在Map、Reduce等函数编写方式上基本一致，较大的不同点发生在执行作业时，示例请参见 ...
多终端节点组流量调配原理及应用场景
您可以分别为北京和上海地域的终端节点组开启健康检查，当上海地域终端节点组健康检查出现异常时，监听会自动将访问流量调度至健康检查正常的北京地域终端节点组；而当上海地域终端节点组恢复正常后，监听会自动恢复上海客户端的流量调配，...
设置节点调度状态
您可以通过容器服务控制台设置节点调度状态，从而合理分配各节点的负载。操作步骤 登录 容器服务管理控制台，在左侧导航栏选择 集群。在 集群列表 页面，单击目标集群名称，然后在左侧导航栏，选择 节点管理>节点。在 节点 页面中，在目标...
服务IP调度接口
请求方式：GET 可选参数说明一：说明 可选参数用于支持调度异常的排查，详情请参考 如何使用“会话追踪方案”排查解析异常。名称 是否必须 描述 sid 可选 sessionId，[a-zA-Z0-9]{12}，在app启动时生成，用于标记一次独立的app生命周期。...
机器人监控
“机器人监控”主要功能为查看当前系统中所有机器人的连接状态、认证状态、调度模式以及正在运行的应用。机器人监控列表 说明：【IP】：...【调度模式】：可调度、不可调度两种状态。监控设置 更改机器人默认的认证状态，和默认的调度状态。
Spring任务
通过对接SchedulerX任务调度可快速实现企业化运用的支持。前提条件 客户端1.7.10及以上版本 采用Spring Boot模式接入SchedulerX平台具体操作，请参见 Spring Boot应用接入SchedulerX。接入指南 接入配置 以Spring Boot接入模式为例，应用...
配置逻辑表调度属性
逻辑表调度属性用于定义逻辑表任务在调度过程中的调度规则。本文为您介绍如何配置维度或事实逻辑表的调度属性。操作步骤 请参见 数据开发入口，进入数据 开发 页面。按照下图操作指引，选择您需配置调度属性的逻辑表，进入 调度配置 信息...
配置逻辑表调度属性
逻辑表调度属性用于定义逻辑表任务在调度过程中的调度规则。本文为您介绍如何配置维度或事实逻辑表的调度属性。操作步骤 请参见 数据开发入口，进入数据 开发 页面。按照下图操作指引，选择您需配置调度属性的逻辑表，进入 调度配置 信息...
弹性伸缩概述
大型单体应用 适用于无法水平扩展的应用，通常是在Pod出现异常恢复时生效。容器垂直伸缩（VPA）CronHPA ACK开源的组件，主要面向应用资源使用率存在周期性变化的场景。周期性负载业务 适用于Deployment、StatefulSet等，实现了scale接口的...
工作原理
调度与执行 一个作业可生成一个或多个实例，无论是正常被调度还是您触发异常实例重试的情况，同时只有一个实例处于运行中，不存在多个实例并发执行的情况。主要的调度与执行场景如下：场景一：从当前时间开始文本分析作业。从当前时间发起...
离线任务调度属性配置
调度属性用于定义节点在生产环境的周期调度方式。您可以通过配置属性中调度属性，配置任务调度周期与生效日期等。本文为您介绍如何配置任务的调度属性。操作步骤 在Dataphin首页，单击顶部菜单栏的 研发。按照下图操作指引，进入离线集成...
离线任务调度属性配置
调度属性用于定义节点在生产环境的周期调度方式。您可以通过配置属性中调度属性，配置任务调度周期与生效日期等。本文为您介绍如何配置任务的调度属性。操作步骤 在Dataphin首页，单击顶部菜单栏的 研发。按照下图操作指引，进入离线集成...
配置离线管道调度
调度配置用于定义周期性调度类型的离线管道任务在调度过程中的调度规则。本文为您介绍如何配置周期性离线管道调度配置。背景信息 依赖关系是两个或多个节点之间的语义连接关系，同时上游节点的状态将影响其他下游节点的运行状态。配置了...
配置离线管道调度
调度配置用于定义周期性调度类型的离线管道任务在调度过程中的调度规则。本文为您介绍如何配置周期性离线管道调度配置。背景信息 依赖关系是两个或多个节点之间的语义连接关系，同时上游节点的状态将影响其他下游节点的运行状态。配置了...
弹性伸缩概述
大型单体应用 适用于无法水平扩展的应用，通常是在Pod出现异常恢复时生效。容器垂直伸缩（VPA）CronHPA ACK开源的组件，主要面向应用资源使用率存在周期性变化的场景。周期性负载业务 适用于Deployment、StatefulSet等，实现了scale接口的...
成本估算策略介绍
Pod成本的计算公式如下所示：权重值依据集群的调度水位确定，集群中CPU调度水位和内存调度水位的比例、权重的计算方式如下所示：CPU调度水位：内存调度水位：CPU权重：内存权重：使用示例 通过以下两种示例，展示如何选择成本估算策略。...
节点异常问题排查
本文介绍关于节点异常问题的诊断流程、排查思路、常见问题及解决方案。本文目录 类别 内容 诊断流程 诊断流程 常见...解决方案 通过节点的监控查看CPU增长曲线，确认异常出现时间点，检查节点上的进程是否存在CPU占用过高的现象。具体操作，...
概述
任务调度 TS（Task Scheduler）提供分布式任务调度框架，实现任务的分布式处理，并能规范化、自动化、可视化和集中化对金融企业不同业务系统的任务进行统一的调度和全方位监控运维管理，达到所有任务有序、高效运行的目的，极大降低开发和...
数据质量入门
步骤四：质量规则关联调度节点 数据质量可通过关联调度节点触发执行质量校验规则，即当调度节点调度执行时，其关联的质量规则便会自动执行。在规则列表页面单击 关联调度。添加需要关联的任务节点。添加节点后，该节点运行时便会触发执行...
节点管理
信息模块 具体信息 基本信息 节点服务器 IP 节点的创建时间 调度状态：可调度状态 不可调度状态 机器详情：单击 前往查看 进入云服务器管理控制台，可查看节点服务器详细信息，例如基本信息及配置、付费、监控等信息。注释：系统注释信息 ...
节点调度
您可以通过控制台设置节点调度状态，从而合理分配各节点的负载。前提条件 已创建集群 或 已导入集群 暂停调度 节点暂停调度后，在后续进行应用部署时，Pod 不会再调度到该节点。...返回到节点详情页，可以看到节点状态将变为 可调度。
开发ODPS Spark任务
MaxCompute Spark作业可通过 Local模式、Cluster模式 执行，此外，您也可在DataWorks中运行MaxCompute Spark离线作业（Cluster模式），以便与其它类型执行...Spark常见问题：您可了解Spark执行过程中的常见问题，便于出现异常时快速排查解决。
开发ODPS Spark任务
MaxCompute Spark作业可通过 Local模式、Cluster模式 执行，此外，您也可在DataWorks中运行MaxCompute Spark离线作业（Cluster模式），以便与其它类型执行...Spark常见问题：您可了解Spark执行过程中的常见问题，便于出现异常时快速排查解决。
集群调度
ADP底座提供了集群整体的精细化调度能力，可以在一个配置文件中，以全局的视角，根据不同业务场景（例如中间件、核心业务应用、非核心业务应用等）筛选不同的Workload，然后配置统一的调度策略和资源隔离策略等。Spec定义 Workload 发布...
消息 Mesh
消息 Mesh 流量调度：消息流量精细化调度上的思考和在 Mesh 上的实现与落地。消息 Mesh 简介 Service Mesh 作为云原生场景下微服务架构的基础设施（轻量级的网络代理），正受到越来越多的关注。Service Mesh 不仅负责在微服务架构的复杂...
调度参数
FAILED:ODPS-0130161:[1,84]Parse exception-invalid token '$' 报错原因：调度参数未赋值或赋值出现异常。解决办法：检查是否有给调度参数赋值。检查配置的调度参数是否符合要求（详情请参见 调度参数支持的格式）。重要 修改参数配置后需...
产品简介
移动调度中心（Mobile Dispatch Center，MDC）是基于客户端用户业务属性进行用户分组的精细化移动调度服务产品，能快速有效帮助客户达成业务分组灰度测试、A/B 测试、故障调优等目标。产品优势 移动调度中心的产品优势如下：用户级精准调度...
创建并使用PAI Designer
人工智能平台PAI的 可视化建模Designer，用于实现端到端的机器学习开发流程的可视化建模工具。DataWorks为您提供PAI Designer节点，方便您通过该算法节点载入Designer工作流，通过调度配置实现Designer工作流的周期性任务调度。前提条件 ...
V5.1.0版本说明
友盟标签数据能力 一、背景 企业版QA加入友盟个性化标签数据后，丰富了用户的画像，使得用户资产更多维立体；可以更精细圈选&分析营销用户，进行精准运营触达。二、调用友盟标签 1.功能入口 登录企业版QA，配置管理->数据导入->三方数据...
阶梯防护
修改解析记录后，您可以使用浏览器测试网站访问是否正常，如果网站访问出现异常请先进行异常排查，具体操作，请参见 业务接入高防后存在卡顿、延迟、访问不通等问题。配置阶梯防护联动规则后，云资源IP的业务流量默认由DDoS原生防护进行...
DataWorks按量计费概述
公共调度资源组、公共数据集成资源组、公共数据服务资源组 为共享资源池，高峰期可能出现实例等待无法调起、同步任务线程数分配不足、API调用执行异常及限流 的情况。如果需要保证并发任务运行，请购买 独享调度资源组，独享数据集成资源组...
权限管理与规范化数据开发
根据表血缘来配置节点调度依赖后，可以保障调度任务在运行时能取到正确的数据，避免下游节点取数据时，上游表数据还未正常产出，导致下游节点取数出现问题。在DataWorks依赖配置中，上游节点的输出作为下游节点的输入，形成节点依赖关系。...
任务运行诊断
任务实际执行时，除了受数据开发（DataStudio）中定义的定时调度时间影响外，还受多方因素影响。例如，上游任务的定时时间、上游任务实际执行完成时间、任务执行资源组所剩资源等。本文为您介绍如何使用运行诊断功能快速定位任务未运行成功...
功能特性
支持任务调度的管理和监控 可设置任务的调度策略，包括定时调度、触发条件调度等，保证准时执行任务。支持任务之间的依赖关系配置 可以设置任务的前置依赖和后置依赖，确保任务按照正确的顺序执行。支持任务参数的灵活配置 用户可以根据...
- 产品推荐
- 这些文档可能帮助您