GPU拓扑感知调度概述
每块V100 GPU有6个NVLink通道，8块GPU间无法做到全连接，2块GPU间最多只能有2条NVLink连接。其中GPU0和GPU3，GPU0和GPU4之间有2条NVLink连接，GPU0和GPU1之间有一条NVLink连接，GPU0和6之间没有NVLink连接，故GPU0与GPU6之间仍然需要通过...
基础监控
阿里云容器服务ACK支持通过ack-koordinator组件为集群开启差异化SLO能力。本文介绍如何使用ack-koordinator实现在离线混部基础监控功能。前提条件 仅适用于ACK Pro版集群。具体操作，请参见 创建ACK Pro版集群。已安装ack-koordinator组件...
基本概念
任务流实例状态有如下几种：等待调度（WAIT_SCHEDULE）运行中（RUNNING）暂停（SUSPEND）失败（FAIL）成功（SUCCESS）终止中（KILLING）排队中（QUEUED）冻结 任务流 冻结任务流会导致所有调度触发都无法运行，非事件调度任务会直接失败，...
工作流调度Zeppelin Notebook
如下图所示 警告 使用Notebook ID调度Notebook只能使用 当前Notebook所在集群 运行作业，否则会无法成功运行。工作流调度作业时，请注意并设置好运行集群。设置作业参数（Knox）作业调度Notebook，需要配置 执行集群 knox账号相关的参数来...
离线集成任务属性配置概述
对于离线集成任务，若需要周期性调度运行，您需定义该任务的调度相关属性，包括调度周期、调度依赖、调度参数等。本文为您介绍离线任务属性与调度的相关内容。注意事项 系统仅支持 调度类型 为 周期性节点 的离线集成任务进行调度配置。...
离线集成任务属性配置概述
对于离线集成任务，若需要周期性调度运行，您需定义该任务的调度相关属性，包括调度周期、调度依赖、调度参数等。本文为您介绍离线任务属性与调度的相关内容。注意事项 系统仅支持 调度类型 为 周期性节点 的离线集成任务进行调度配置。...
V5.1.0版本说明
友盟标签数据能力 一、背景 企业版QA加入友盟个性化标签数据后，丰富了用户的画像，使得用户资产更多维立体；可以更精细圈选&分析营销用户，进行精准运营触达。二、调用友盟标签 1.功能入口 登录企业版QA，配置管理->数据导入->三方数据...
周期任务基本运维操作
周期任务是指在调度系统按照调度配置周期性自动调度的任务。您可以在 运维中心>周期任务 列表查看指定工作空间下的周期任务，并对任务进行运维操作，包括自动调度和手动运行周期任务、查看任务运行详情、暂停任务、下线任务等。本文为您...
PAI灵骏智算服务概述
高效的池化异构算力调度技术，确保每一份算力投入都能得到充分利用，资源利用率可提升3倍。无惧规模挑战。轻松应对大模型和大规模工程仿真的算力需求，让创新不受算力限制。可视又可控。简单地管理异构算力的分配，并持续地监控和优化。...
EventBridge事件调度
EventBridge事件调度包括云产品事件调度和自定义事件源事件调度。云产品事件调度支持包括弹性计算、存储服务、数据库、容器、大数据处理、可观测性服务及中间件服务在内的几乎所有阿里云官方事件源，而自定义事件源事件调度支持包括SLS、...
数据处理
{ event:"broadcast_接收到的消息1",/broadcast_${接收消息名称} data:{}/data为任意格式 } 无法正常连接WebSocket的服务端时，可根据以下步骤排查问题 WS服务不能直接在HTTPS协议下访问，需要用 WSS 服务，在使用自己的SSL证书去代理WS...
创建数据源质量规则
业务日期/执行日期：若调度类型选择 定时调度（定时调度不支持执行日期）、代码检查触发调度、固定任务触发调度，支持配置日期，可选择 普通日历 或 自定义日历，如何自定义日历，请参见 新建公共日历。若选择 普通日历，则条件可选 月份、...
创建数据源质量规则
业务日期/执行日期：若调度类型选择 定时调度（定时调度不支持执行日期）、代码检查触发调度、固定任务触发调度，支持配置日期，可选择 普通日历 或 自定义日历，如何自定义日历，请参见 新建公共日历。若选择 普通日历，则条件可选 月份、...
周期性调度作业概述
如果您希望周期性运行MaxCompute作业，可使用DataWorks的DataStudio开发周期性MaxCompute作业，并配置周期性调度的时间属性、调度依赖等配置项，将作业整体提交至DataWorks的运维中心进行周期性调度。本文为您概要介绍当前使用DataWorks...
功能特性
支持任务调度的管理和监控 可设置任务的调度策略，包括定时调度、触发条件调度等，保证准时执行任务。支持任务之间的依赖关系配置 可以设置任务的前置依赖和后置依赖，确保任务按照正确的顺序执行。支持任务参数的灵活配置 用户可以根据...
数据开发：开发者
本文以使用MaxCompute数据源，在DataWorks上运行MaxCompute作业任务为例，为您介绍开发人员如何使用数据开发（DataStudio）创建一个周期调度任务，帮助您快速了解数据开发（DataStudio）模块的基本使用。前提条件 已完成开发前的环境准备，...
产品简介
调度管理 ACS兼容Kubernetes原生调度能力，支持不同类型的工作负载混合调度，并提供弹性资源、异构资源等精细化调度能力。更多信息，请参见 资源调度概述。应用管理 功能项 说明 应用创建 ACS支持无状态、有状态、任务和定时任务等多种类型...
什么是分布式任务调度SchedulerX
分布式任务调度SchedulerX是阿里巴巴自研的分布式任务调度平台，兼容开源XXL-JOB、ElasticJob、Spring Schedule，K8s Job，支持Cron定时、一次性任务、可视化工作流任务编排和分布式跑批，具有高可用、可观测、可运维和低延时等能力。...
创建连接流
AppFlow连接流是由一个触发器节点和若干个执行动作节点组成的自动化业务流程，通过控制台页面配置可以轻松组装您需要的连接流，在一定的条件下触发您的连接流即可使您的业务流程自动化地运行起来。本文介绍创建连接流的详细操作信息。背景...
CPU拓扑感知调度
ack-koordinator默认会将资源画像、精细化调度等功能的监控指标以Prometheus的格式对外透出。若您配置组件时开启了 ACK-Koordinator开启Prometheus监控指标 选项并使用了阿里云Prometheus服务，这些指标将被视为 自定义指标 并产生相应费用...
整库离线同步至MaxCompute
您可以在此步骤配置任务名称及任务执行所使用的调度资源组与数据集成任务执行资源组，同时，数据集成提供数据库最大连接数、并发数等配置的默认值，如果您需要对任务做精细化配置，您可通过 高级配置 进行修改。说明 DataWorks的离线同步...
整库离线同步至OSS
您可以在此步骤配置任务名称及任务执行所使用的调度资源组与数据集成任务执行资源组，同时，数据集成提供数据库最大连接数、并发数等配置的默认值，如果您需要对任务做精细化配置，您可通过 高级配置 进行修改。说明 DataWorks的离线同步...
整库离线同步至MaxCompute
您可以在此步骤配置任务名称及任务执行所使用的调度资源组与数据集成任务执行资源组，同时，数据集成提供数据库最大连接数、并发数等配置的默认值，如果您需要对任务做精细化配置，您可通过 高级配置 进行修改。说明 DataWorks的离线同步...
如何在SchedulerX 2.0平台上托管XXL-JOB任务
阿里巴巴商业化任务调度平台SchedulerX 2.0兼容XXL-JOB任务接口，支持@XxlJob新注解和@JobHandler老注解方式。您无需修改代码，即可以将XXL-JOB任务在SchedulerX 2.0平台上托管。本文介绍在SchedulerX 2.0平台上托管的优势和方法。功能优势...
什么是可观测可视化 Grafana 版
阿里云 可观测可视化 Grafana 版 是云原生的运维数据可视化平台，面向用户提供免运维和快速启动Grafana运行环境的能力，默认集成如数据库、消息队列、Prometheus监控、日志服务等各类阿里云服务数据源，并提供丰富的数据看板，让运维监控...
任务管理
本文介绍如何在任务管理页面对调度任务进行一系列操作。创建调度任务 重要 创建任务前，请确保您已经创建了任务分组。更多信息，请参见 应用管理。登录 分布式任务调度平台。在顶部菜单栏选择地域。在左侧导航栏，选择 任务管理。在 任务...
数据质量入门
步骤四：质量规则关联调度节点 数据质量可通过关联调度节点触发执行质量校验规则，即当调度节点调度执行时，其关联的质量规则便会自动执行。在规则列表页面单击 关联调度。添加需要关联的任务节点。添加节点后，该节点运行时便会触发执行...
创建指标质量规则
业务日期/执行日期：若调度类型选择 定时调度（定时调度不支持执行日期）、数据更新触发调度、固定任务触发调度，支持配置日期，可选择 普通日历 或 自定义日历，如何自定义日历，请参见 新建公共日历。若选择 普通日历，则条件可选 月份、...
概述
任务调度 TS（Task Scheduler）提供分布式任务调度框架，实现任务的分布式处理，并能规范化、自动化、可视化和集中化对金融企业不同业务系统的任务进行统一的调度和全方位监控运维管理，达到所有任务有序、高效运行的目的，极大降低开发和...
E-HPC集群调度器插件
E-HPC提供了调度器插件作为平台的外扩组件，在E-HPC现有调度器类型或版本不满足当前业务时，您可以通过该插件构建自定义调度器并接入E-HPC平台的能力。本文为您介绍E-HPC集群调度器插件的概念及组成。什么是调度器插件 E-HPC作为一款PaaS...
管理任务流实例
说明 时间范围内运行的任务是串行运行的，即必须一个业务时间的任务执行成功，下一个业务时间才可执行任务。发布或下线任务流 具体操作，请参见 发布或下线任务流。查看任务流版本差异 在确认发布任务流之前，若该任务流有发布态版本，且...
实现时间器定时
说明 可选，表示在活动未开始时，可视化应用上不显示通用标题的内容。您也可以自定义内容。在图层面板，全选所有组件，右键单击 导出到蓝图编辑器。连接组件。配置串行数据处理节点的处理方法。return[{value:"活动开始"}];单击页面右上角...
使用负载感知调度
ack-koordinator默认会将资源画像、精细化调度等功能的监控指标以Prometheus的格式对外透出。若您配置组件时开启了 ACK-Koordinator开启Prometheus监控指标 选项并使用了阿里云Prometheus服务，这些指标将被视为 自定义指标 并产生相应费用...
创建AnalyticDB for PostgreSQL数据源
若地域不一致，则只能创建为跨地域的数据源，此类数据源无法在DataWorks的数据开发（DataStudio）模块绑定，即无法用于数据开发或周期性调度任务，仅可进行数据同步任务。已购买所需的DataWorks资源组并完成资源组配置。AnalyticDB for ...
创建手动任务
说明 在任务高并发执行且无法错峰运行的情况下，需要专有的计算资源来保障任务定时被调度运行时，建议您选择购买使用DataWorks的独享调度资源组。详情请参见 独享调度资源组。调试运行手动业务 您可通过单个节点编辑页面工具栏中的 与 调试...
实现时间器定时
说明 可选，表示在活动未开始时，可视化应用上不显示通用标题的内容。您也可以自定义内容。切换至蓝图编辑器。添加所有图层节点和逻辑节点页签下的1个串行数据处理节点到蓝图画布中。连接组件。配置串行数据处理节点的处理方法。return[{...
数据开发与运维中心：数据加工
DataStudio支持智能编辑器、可视化依赖编排，调度能力经过阿里集团内调度任务、复杂业务依赖的反复验证。DataStudio提供隔离的开发和生产环境，结合版本管理、代码评审、冒烟测试、发布管控、操作审计等配套功能，帮助企业规范地完成数据...
创建指标质量规则
业务日期/执行日期：若调度类型选择 定时调度（定时调度不支持执行日期）、数据更新触发调度、固定任务触发调度，支持配置日期，可选择 普通日历 或 自定义日历，如何自定义日历，请参见 新建公共日历。若选择 普通日历，则条件可选 月份、...
ClickHouse SQL
ClickHouse SQL可实现分布式SQL查询及处理结构化数据，提高作业的执行效率。DataWorks的ClickHouse SQL节点可进行ClickHouse SQL任务的开发和周期性调度，以及与其他作业的集成操作。本文为您介绍使用ClickHouse SQL节点进行任务开发的主要...
创建ClickHouse数据源
创建完成后，可在DataWorks的各功能模块使用该数据源连接ClickHouse集群，进行相应的数据同步、数据开发、数据分析等操作。前提条件 已创建ClickHouse集群。详情请参见 新建集群。说明 建议创建ClickHouse集群时，地域 与创建ClickHouse...
- 产品推荐
- 这些文档可能帮助您