产品功能

SchedulerX主要提供调度、执行和运维三方面的功能。多种表达式的定时调度 Crontab:支持Unix Crontab表达式,详情请参见 Cron。不支持秒级别。Fixed rate:Crontab必须被60整除,不支持其它数量级时间间隔的任务,如每隔40分钟的定时任务。...

互斥量

创建新的工程 组件的示例代码可以通过编译链接到AliOS Things的任意案例(solution)来运行,这里选择helloworld_demo案例。helloworld_demo案例相关的源代码下载可参考《AliOS Things集成开发环境使用说明之创建工程》。步骤2 添加组件 ...

调度依赖配置指引

DataWorks的调度依赖是指周期调度节点间的上下游依赖关系。通过节点的依赖关系有序调度运行上下游节点,即当上游节点运行成功后,下游节点才会启动运行,保障适时的产出有效业务数据。本文为您介绍调度依赖的配置指引,避免因调度依赖配置...

数据开发:开发者

本文以使用MaxCompute数据源,在DataWorks上运行MaxCompute作业任务为例,为您介绍开发人员如何使用数据开发(DataStudio)创建一个周期调度任务,帮助您快速了解数据开发(DataStudio)模块的基本使用。前提条件 已完成开发前的环境准备,...

ClickHouse SQL

DataWorks的ClickHouse SQL节点可进行ClickHouse SQL任务的开发和周期性调度,以及其他作业的集成操作。本文为您介绍使用ClickHouse SQL节点进行任务开发的主要流程。前提条件 已创建业务流程。数据开发(DataStudio)基于业务流程执行...

配置蓝图交互逻辑

本文为您介绍在DataV名单抽奖模板可视化应用中实现多个精彩交互效果的蓝图配置方法。背景信息 名单抽奖模板在年会或团建抽奖场景时,需要包含多个交互功能:当名单抽奖模板预览或发布时,将抽奖组件中获奖名单数据分发到某抽奖页面的翻牌...

预加载算法

LE-V-B012和LE-V-B015型号边缘一体机,采用ARM嵌入式架构设计,使用视觉推理芯片完成视觉计算,因此在配置算法应用之前,您需要先设置预加载算法。重要 仅LE-V-B012和LE-V-B015型号边缘一体机,在首次使用算法应用功能时,需要配置预加载...

配置蓝图交互逻辑

本文为您介绍在DataV名单抽奖模板可视化应用中实现多个精彩交互效果的蓝图配置方法。背景信息 名单抽奖模板在年会或团建抽奖场景时,需要包含多个交互功能:当名单抽奖模板预览或发布时,将抽奖组件中获奖名单数据分发到某抽奖页面的翻牌...

AI负载调度

本文介绍弹性资源调度、AI任务调度、异构资源调度任务队列调度,帮助用户提升集群的资源利用率和作业运行效率。弹性调度 ACK为不同弹性资源提供了混合调度的能力。功能 描述 参考文档 弹性调度 阿里云提供了不同种类的弹性资源,如ECS和...

开发ODPS MR任务

返回结果:+-+-+|key|cnt|+-+-+|package|1|pad|1|problem|1|project|1|val_a|2|val_pro|2|+-+-+编辑代码:进阶示例 更多场景的ODPS MR任务开发,请参见:MapOnly示例 多路输入输出示例 多任务示例 使用资源示例 分区表输入示例 后续步骤 当...

开发ODPS MR任务

返回结果:+-+-+|key|cnt|+-+-+|package|1|pad|1|problem|1|project|1|val_a|2|val_pro|2|+-+-+编辑代码:进阶示例 更多场景的ODPS MR任务开发,请参见:MapOnly示例 多路输入输出示例 多任务示例 使用资源示例 分区表输入示例 后续步骤 当...

Golang SDK接入

本文介绍如何将Golang应用通过SDK快速接入SchedulerX。控制台配置 请参见 创建应用,创建一个普通应用,并参见 步骤2,生成配置信息。endpoint=xxxx namespace=xxxx groupId=xxx appKey=xxx...更信息,请参见 创建调度任务。相关文档 Golang

ETL工作流快速体验

DataWorks MaxCompute 函数计算 OSS 数据集成 数据开发 基于GitHub Archive公开数据集,通过DataWorks 数据集成 模块获取过去1小时GitHub中提交次数最代码语言数据,在DataStudio 数据开发 模块通过函数计算节点周期调度实现将处理后的...

查看统计图表

参数 描述 调度间隔 调度定时SQL任务的频率,每调度一次定时SQL任务产生一个执行实例。调度间隔决定每个执行实例的调度时间。每小时:每小时调度一次定时SQL任务。每天:在每天的某个固定时间点调度一次定时SQL任务。每周:在周几的某个...

配置同周期调度依赖

依赖某节点同周期指本节点本周期运行,依赖上游节点当前...若某节点输出存在下游依赖,删除该输出名称时,建议提前下游任务的责任人进行沟通,告知其当前任务的某个输出要删除,请及时调整下游任务的依赖关系,避免下游任务变为孤立任务。

调度至Arm节点

如果您的集群中既有Arm节点,又有非Arm节点(例如x86节点),为了确保只兼容Arm架构的工作负载调度到Arm节点,或架构镜像优先调度到Arm节点,您可以基于Kubernetes原生调度配置来实现。前提条件 已创建Arm集群或Arm节点,且集群版本...

HTTP任务

{"code":200,"data":"true","message":"","requestId":"446655068791923614103381232971","success":true } 上面的示例代码可以校验Key为Success,校验value:true或者校验Code是否为200。自定义字符串 按您自定义的返回字符串内容完全匹配...

Shell节点

配置及使用调度参数,详情请参见 配置并使用调度参数,更多调度参数的赋值方式,请参见 调度参数概述。如上图,在参数赋值区域为参数赋值,再进入代码调用区域定义内置参数$1,自定义参数$2、$3。参数赋值示例如下:内置参数$1赋值取业务...

HTTP任务(Serverless)

{"code":200,"data":"true","message":"","requestId":"446655068791923614103381232971","success":true } 上面的示例代码可以校验Key为Success,校验value:true或者校验Code是否为200。自定义字符串 按您自定义的返回字符串内容完全匹配...

创建资源

本文介绍如何创建微服务空间、调度任务分组、调度任务调度工作流。背景信息 资源 描述 使用场景 命名空间 在具体地域(Region)中,命名空间用于实现资源和服务的隔离。当您对资源有较高的安全要求时,需要创建命名空间。应用 在具体的...

创建手动任务

此操作与调度任务定义代码变量的方式一致。说明 部分节点的调度参数配置存在差异(例如,通用Shell节点中的变量只能以$1、$2、$3.命名),详情请参见 各类型节点的调度参数配置示例。(可选)设置手动任务执行顺序 手动业务流程中的任务不...

Golang SDK接入

本文介绍如何将Golang应用通过SDK快速接入SchedulerX。控制台配置 请参见 创建应用,创建一个普通应用,并...后续步骤 应用接入SchedulerX完成后,即可在分布式任务调度平台创建调度任务。更信息,请参见 创建调度任务。相关文档 Golang任务

通过函数计算节点发送邮件

本文为您介绍如何在DataWorks中通过函数计算节点调用函数计算服务,并实现发送邮件功能。背景介绍 DataWorks当前已经支持通过函数计算节点调用函数计算服务,在函数计算服务中可以自定义各种功能,最终可通过DataWorks进行调用。前提条件 ...

添加自定义任务

当批量设置设备属性和服务调用任务无法满足您的业务需求时,您可以添加自定义任务,通过设置自定义规则,实现多场景的设备任务。本文介绍该任务的创建方法、运行中Topic及其数据格式的说明,查看状态的具体操作。前提条件 已在设备端完成...

DataX同步数据

调度类型 本教程中选择任务的调度类型为 手动节点。调度类型用于定义任务发布至生产环境的调度方式。Datpahin系统支持的调度类型包括 周期性节点 和 手动节点,适用场景说明如下:任务需要参与系统的周期性调度,且需要依赖上游节点,则 ...

DataX同步数据

调度类型 本教程中选择任务的调度类型为 手动节点。调度类型用于定义任务发布至生产环境的调度方式。Datpahin系统支持的调度类型包括 周期性节点 和 手动节点,适用场景说明如下:任务需要参与系统的周期性调度,且需要依赖上游节点,则 ...

在DataWorks中通过函数计算节点发送邮件

本文为您介绍如何在DataWorks中通过函数计算节点调用函数计算服务,并实现发送邮件功能。背景介绍 DataWorks当前已经支持通过函数计算节点调用函数计算服务,在函数计算服务中可以自定义各种功能,最终可通过DataWorks进行调用。前提条件 ...

调度概述

ACK Scheduler是ACK基于Kubernetes Scheduling Framework扩展机制,针对不同任务负载、不同弹性资源的统一调度系统。ACK Scheduler支持不同弹性资源的混合调度、异构资源的精细化调度、批量计算的任务调度等,提升应用的性能和集群整体资源...

开发ODPS SQL任务

DataWorks为您提供ODPS SQL节点,可用于周期性调度MaxCompute的SQL任务,并完成其他类型节点的集成和联合调度。MaxCompute SQL任务采用类似SQL的语法,适用于海量数据(TB级)但实时性要求不高的分布式处理场景。本文为您介绍在DataWorks...

实现虚拟节点Pod可用区打散以及亲和调度

在 ACK Serverless集群Pro版 中,您可以通过Kubernetes原生调度语义实现分布式任务的跨可用区打散,以达到高可用区部署的要求,或者通过Kubernetes原生调度语义实现分布式任务在指定可用区中的亲和性部署,以达到高性能部署的要求。...

开发ODPS SQL任务

DataWorks为您提供ODPS SQL节点,可用于周期性调度MaxCompute的SQL任务,并完成其他类型节点的集成和联合调度。MaxCompute SQL任务采用类似SQL的语法,适用于海量数据(TB级)但实时性要求不高的分布式处理场景。本文为您介绍在DataWorks...

DataWorks On MaxCompute使用说明

还提供 数据开发(DataStudio)功能,用于调度任务的开发,并运维中心配合使用,进行调度任务的监控运维。开始使用:数据分析 DataWorks数据分析提供MaxCompute数据分析服务共享能力。开始使用:数据治理 DataWorks提供 MaxCompute ...

开发ODPS Spark任务

在DataWorks中,您可通过ODPS Spark节点实现MaxCompute Spark任务的调度运行,以及其他作业的集成操作。MaxCompute Spark支持使用Java、Scala和Python语言进行开发,并通过Local、Cluster模式运行任务,在DataWorks中运行MaxCompute ...

开发ODPS Spark任务

在DataWorks中,您可通过ODPS Spark节点实现MaxCompute Spark任务的调度运行,以及其他作业的集成操作。MaxCompute Spark支持使用Java、Scala和Python语言进行开发,并通过Local、Cluster模式运行任务,在DataWorks中运行MaxCompute ...

通过脚本模式配置离线同步任务

当您需要实现更精细化的配置管理时,您可以使用脚本模式配置离线同步任务,通过编写数据同步的JSON脚本并结合DataWorks调度参数使用,将源端单表或分库分表的全量或增量数据周期性同步至目标数据表。本文为您介绍脚本模式配置离线同步任务...

创建EMR Spark SQL节点

您可以通过创建EMR(E-MapReduce)Spark SQL节点,实现分布式SQL查询引擎处理结构化数据,提高作业的执行效率。前提条件 数据开发(DataStudio)中已创建业务流程。数据开发(DataStudio)基于业务流程对不同开发引擎进行具体开发操作,...

自定义弹性资源优先级调度

自定义弹性资源优先级调度是阿里云提供的弹性调度策略。您可以在应用发布或扩容过程中,自定义资源策略(ResourcePolicy),设置应用实例Pod被调度到不同类型节点资源的顺序。同时,在缩容过程中按照原调度顺序逆序缩容。重要 自调度器版本...

URL风险异步检测API

调试 在接入前,您也可以通过 阿里云OpenAPI 在线调试 提交URL风险检测任务 接口,查看调用示例代码及SDK依赖信息,方便概览接口的使用方法和参数。重要 在线调试能力是基于当前登录账号调用内容安全的API接口,因此调用量会计入账号的...

视频人像增强

6.示例代码:该能力常用语言的示例代码,请参见 视频人像增强示例代码,常用语言查询异步任务结果的示例代码,请参见 查询异步任务结果示例代码。7.客户端直接调用:该能力常用的客户端调用方式包括以下几种。Web前端直接调用 小程序场景下...

Golang SDK接入

本文介绍如何将Golang应用通过SDK快速接入SchedulerX。控制台配置 请参见 创建应用,创建一个普通应用,并...后续步骤 应用接入SchedulerX完成后,即可在分布式任务调度平台创建调度任务。更信息,请参见 创建调度任务。相关文档 Golang任务
共有200条 < 1 2 3 4 ... 200 >
跳转至: GO
产品推荐
云服务器 安全管家服务 安全中心
这些文档可能帮助您
风险识别 音视频通信 智能开放搜索 OpenSearch 智能视觉 弹性公网IP 短信服务
新人特惠 爆款特惠 最新活动 免费试用