SuspendBatch-暂停批处理任务
将一个 Running（正在执行）的批处理任务暂停。接口说明 任务状态 Running（正在执行）时，可以暂停任务。如果想继续执行，需要调用 ResumeBatch 接口。调试 您可以在OpenAPI Explorer中直接运行该接口，免去您计算签名的困扰。运行成功后...
产品相关问题
典型的应用场景包括金融行业结息处理、日切处理、余额缓冲记账、政务数据批处理等。任务调度支持哪些任务类型？任务调度支持的基本任务类型包括：简单任务、集群任务。此外，任务拓扑编排功能支持将多个任务按执行的顺序编排成一张拓扑图，...
任务型实例概述
容器计算服务ACS提供任务型实例，对大数据计算和批处理类型的工作负载来说具备可观的性价比。本文介绍ACS任务型实例的特点、适用场景、限制要求和使用方法。价格优势 与通用型、独享型实例相比，使用任务型实例可以节省相当可观的资源成本...
定时批量进行ECS健康诊断
同时，用户可能需要对指定的一批实例周期性的进行健康体检，以及时发现潜在的风险并排除。我们通过提供预定义好的OOS公共模板(ACS-ECS-ScheduleToExecuteECSDiagnosticReports)，借助于OOS强大的自动运维编排功能，轻松帮用户定时、批量的...
FastFailPolicy
名称 类型 描述 示例值 object 快速失败策略结构体 Action string 快速失败执行策略，批处理或触发器中根据该策略配置可以选择遇到错误停止运行或继续运行。枚举值：abort：遇到错误停止运行。ignore：忽略错误继续执行。abort
流计算实现细节
图中MicroBatchExecutor为Spark的微批处理框架，Source为Structured Streaming抽象的接口类，SourceRDD为Spark的RDD抽象类，TablestoreClient为表格存储的客户端。实线表示详细操作，虚线表示请求成功返回。从整体上看，时序流程是...
事务管理
并发冲突优化 通过上面冲突规则表格可知，目前并不支持行级别或者文件级别的事务并发控制，而是以每次批处理数据操作作为一个单独的事务来管理。对于部分高频的操作，会结合它的语义，在保障正确性的前提下，单独设计优化了事务冲突逻辑，...
触发工作流
触发方式对比 触发方式 适用场景 自动触发 文件上传到指定路径后立即按固定流程处理 手动 触发（校验输入路径）历史数据处理，对已存储在OSS的文件按工作流批量处理 文件上传后不需要立刻处理，比如等待有用户访问、播放量较高后再处理 ...
基于执行命令的分批发布
解决方案 我们把准备执行的脚本，交给一个帮手替我们去分批执行，它可以为我们检查脚本每批执行的状态，一旦某批中有执行失败，则暂停该批次的执行，且其后面若有未执行的批次，其执行计划也会被暂停。而且我们随时可通过该帮手查看执行...
基于镜像的日常发布
创建执行，选择实例，这里可以手动选择实例也可以按tag来，我之前已经给机器打好了标签env:test这里就用tag来操作，批次控制支持并发执行和分批执行，这两个的区别是并发执行永远保持n个运行中的，而分批执行是执行完第一批再执行第二批，...
GetChangeOrderInfo-查看变更流程详情
ID 358a143f-09a0-45e0-*-*Status integer 运行状态 0：准备 1：执行中 2：执行成功 3：执行失败 6：终止 8：手动分批发布模式下，等待手工确认执行下一批 9：自动分批发布模式下，等待下一批执行中 10：系统异常执行失败 2 Message string...
查看和处理安全告警
为了您的资产安全，建议您及时查看和处理云安全中心检测出的安全告警。本文介绍如何查看和处理安全告警。查看安全告警 登录云安全中心控制台。在控制台左上角，选择需防护资产所在的区域：中国 或 全球（不含中国）。在左侧导航栏，选择 ...
图片处理
图片处理是OSS提供的海量、安全、低成本、高可靠的图片处理服务。原始图片上传到OSS后，您可以通过简单的RESTful接口，在任何时间、任何地点、任何互联网设备上对图片进行处理。关于图片处理支持的参数，请参见 处理参数。注意事项 本文以...
创建调度任务
超时策略 设置任务执行超时后的处理策略，可选值：不处理：触发记录和执行记录状态均标记为失败。停止后续触发：执行记录状态为失败，触发记录状态为超时，并且无法再次触发。仅当开启任务互斥模式时可选择此项。仅当 通信方式 设置为 回调...
什么是RPA
产品介绍 阿里云RPA产品是一款新型工作流程自动化办公机器人软件，通过模拟人工操作进行自动流程执行处理。它可以将办公人员从每日的重复工作中解放出来，提高生产效率。具体而言，阿里云RPA是基于软件机器人和人工智能（AI，Artificial ...
计算资源
计算资源的主要作用是执行各种计算任务，包括数据处理、算法运算、业务逻辑执行等。计算资源的性能和容量直接影响到系统的计算能力和响应速度，影响到服务质量。以下详细介绍5个计算资源风险点和应对的容错策略。资源分配不均 指因任务分配...
滚动升级
例如，伸缩组内有10台 服务中 的ECS实例，执行批次为2，则5台ECS实例为一批，分2批执行任务。暂停策略 不暂停：一次性执行完成。第一批暂停：第一批次执行完成后，伸缩组暂停执行任务，您需要手动继续。第一批次之后的批次不会暂停。每批...
使用API在ECS集群中单批发布应用
本文介绍如何使用EDAS提供的Java ...changeOrderInfo.Status 的取值如下：0：准备 1：执行中 2：执行成功 3：执行失败 6：终止 8：手动分批发布模式下，等待手工确认执行下一批 9：自动分批发布模式下，等待下一批执行中 10：系统异常执行失败
媒体处理常见问题
转码资源是媒体处理执行转码作业的计算节点，一个转码资源同一时间可执行一个转码作业。目前推出的是共享型转码资源。媒体转码为每个用户设置了共享型转码资源的配额，用户最多能同时处理的作业数量不超过该限额。在系统繁忙时，能同时处理...
GroupInvokeFlow-批量运行工作流
Failed：执行失败 Completed：分组内所有执行已经完成 Unknown：执行状态不确定，常见于系统错误 TimedOut：执行超时 Paused：执行被暂停 Completed GroupInvocationId string 本次运行的唯一标识符 7bdbdb58-f028-4155-915e-f21e1f8fc48a ...
使用API在K8s集群中单批发布应用
本文介绍如何使用EDAS提供的Java SDK调用API在K8s集群中单批发布应用（JAR包、WAR包和镜像）。准备工作 单批发布应用前，您必须提前完成以下准备工作：确定应用部署地域，假设为 cn-hangzhou 。在EDAS K8s环境中创建应用。目前支持多种创建...
使用API金丝雀发布（ECS集群）
本文介绍如何使用EDAS提供的...changeOrderInfo.Status 的取值如下：0：准备 1：执行中 2：执行成功 3：执行失败 6：终止 8：手动分批发布模式下，等待手工确认执行下一批。9：自动分批发布模式下，等待下一批执行中。10：系统异常执行失败
使用API在K8s集群中金丝雀发布应用
说明 示例代码中使用的是 首批灰度发布2个Pod实例+剩余Pod实例分2批发布+自动分批+分批间隔1分钟 的金丝雀发布策略，在 首批灰度发布2个Pod实例 流程运行完以后，需要手动确认继续剩余批次的发布。在调用 GetChangeOrderInfo 接口返回结果...
功能特性
媒体处理可以将一个音视频文件转换成另一个或多个音视频文件，以适应不同网络带宽、终端设备和用户的需求。对媒体的内容、文字、语音、场景进行多模态分析，实现智能审核、内容理解、智能编辑等多种处理功能。音视频转码 把音视频码流转换...
使用API在K8s集群中分批发布应用
changeOrderInfo.Status 的取值如下：0：准备 1：执行中 2：执行成功 3：执行失败 6：终止 8：手动分批发布模式下，等待手工确认执行下一批。9：自动分批发布模式下，等待下一批执行中。10：系统异常执行失败 说明 如果返回结果中的 ...
使用API在ECS集群中分批发布应用
} } } 运行程序，返回的执行结果如下所示：Message=success ChangeOrderId=04c5638f-405e-41de-99b2-e0dccb2*结果验证 您在分批发布应用后，可以调用 GetChangeOrderInfo 接口查看变更流程详情，获取分批发布应用的变更状态。具体API参数...
管理 DDL 任务
任务详情 点击任务列表中的任务 ID 进入任务详情页面，查看该任务的详细信息与执行状态，包括当前所属的数据访问代理实例、执行表 DDL 所在的数据库以及 DDL 任务执行的详细进度，如下图所示：处理执行出错的任务 对于运行时出现错误的 DDL...
公共模板
序号 名称 描述（用途）执行 1 ACS-Actiontrail-EnableActionTrail 开启跟踪 立即执行 2 ACS-ApiGateway-BulkyAbolishApi 下线指定运行环境的指定API 立即执行 3 ACS-ApiGateway-BulkyModifyApi 修改API为私有类型 立即执行 4 ACS-Api...
表流读写
Delta Lake克服了许多流式处理系统和文件相关的常见限制，例如：合并低延迟引入产生的小文件 保持多个流（或并发批处理作业）执行“仅一次”处理 使用文件作为流源时，可以有效地发现哪些文件是新文件 Delta表作为流源 当您将Delta表加载为...
方案实现
外表order_source用于流批处理的SQL执行。DROP TABLE IF EXISTS order_source;CREATE TABLE order_source USING tablestore OPTIONS(endpoint="http://vehicle-test.cn-hangzhou.vpc.tablestore.aliyuncs.com",access.key.id="",access.key...
Spark FAQ
如何处理执行Spark SQL报错：Exception in thread"main"java.io.IOException:No FileSystem for scheme:oss？作业慢如何排查？常见问题 如何处理Spark作业报错：The VirtualCluster's name is invalid or the VirtualCluster's is not in ...
SQL Editor
③ 单击 运行，运行整个SQL脚本或批处理，即执行SQL编辑器窗口中从头至尾的所有SQL语句。选择SQL代码中的某一段，单击左侧的 图标，运行部分SQL查询。说明 选中代码行，才会显示该图标。④ 单击 保存，保存所有语句。⑤ 单击 格式化，会...
查看并管理脚本实例
下图为Flink_SQL批处理实例的运行日志。重跑 单击 可重跑该周期实例。重跑操作仅支持重跑运行状态为 成功 或 失败 的脚本实例。执行重跑操作时，会校验当前实例节点的上游节点的运行状态是否全部为 成功，如果校验不成功则当前实例的运行...
查看并管理脚本实例
下图为Flink_SQL批处理实例的运行日志。重跑 单击 可重跑该周期实例。重跑操作仅支持重跑运行状态为 成功 或 失败 的脚本实例。执行重跑操作时，会校验当前实例节点的上游节点的运行状态是否全部为 成功，如果校验不成功则当前实例的运行...
新旧版本使用指引
批处理 无 新版支持创建批处理，创建完成后，您可以指定存储内已存在的若干文件，对其批量执行指定操作，如转码、格式转换等。文档转换异步请求 无 DeleteOfficeConversionTask-删除异步文档格式转换任务 新版任务开始执行后，任务信息只...
事件处理流
管理事件处理流 事件流创建完成后，您可以在事件处理流页面执行以下操作：调整处理流顺序：在目标处理流右侧操作列单击 上移 或 下移。启动或禁用处理流：在目标处理流右侧操作列单击 启用 或 停止。更新处理流：在目标处理流右侧操作列...
快速提交转码任务
如果需要根据提交顺序依次执行媒体处理任务，您可以创建管道，并在创建媒体处理任务时指定对应的管道。本文以转码任务为例为您介绍如何在控制台上进行快速转码。前提条件 您已将待处理文件上传至OSS。详细操作，请参见 上传视频。使用流程 ...
创建管道
如果需要根据优先级和提交顺序依次执行媒体处理任务，您可以创建管道，然后在创建媒体处理任务时指定优先级（部分任务类型支持）和对应的管道。使用限制 不同类型管道的创建数量、适用功能、并发能力不同，如果提交不适用的任务会执行失败...
应用场景
风控监测系统 实时计算Flink版可以处理复杂的流处理和批处理任务，也提供了强大的API，执行复杂的数学计算并执行复杂事件处理规则，帮助企业对实时数据进行实时分析，提高企业的风控能力。例如检测APP中的点击行为、识别loT数据流不规则...
CDN事件触发器概述
阿里云内容分发网络CDN（Content Delivery Network）和函数计算无缝集成，您可以编写函数对CDN事件进行自定义处理。当CDN系统捕获到指定类型的、满足过滤条件的事件后，通过CDN事件触发器触发函数执行。背景信息 阿里云CDN是建立并覆盖在...
- 产品推荐
- 这些文档可能帮助您