查询作业
主机名 按执行作业的节点主机名查询。查看监控数据和作业结果。在 资源监控 页签查看节点资源使用情况，包括节点、核数、内存和GPU使用率。在 作业监控 页签查看作业整体情况，包括运行、提交、排队和完成作业数。在作业列表中查看作业结果...
管道
访问规则<图片URL>@|<action2>URL通过@符号后面的处理参数（action1,action2）来实现即时云处理，如果有多任务（比如先做缩略，再加上水印）可以用管道来实现，执行顺序按管道指定顺序执行，目前最多支持四级管道。管道的分隔符是竖线（|）...
通过控制台提交作业
job array可自定义选择执行作业的规则。作业队列长度设置格式X-Y[:Z]，最小值X是第一个索引，最大值Y是最后一个索引，Z表示步长，例如2-7:2,表示生成的job array包含编号为2，4，6的3个子作业，如果Z不指定的话，默认是1。后处理命令 后...
入门概述
创建作业 作业指提交到E-HPC集群进行高性能计算的基本工作单元，包括Shell脚本、可执行文件等，具体作业执行顺序根据您设置的队列以及调度器决定。您可以在集群中使用GROMACS软件运行水分子算例。查看作业结果 您可以在E-HPC管理控制台查看...
使用Apache Airflow调度MaxCompute
背景信息 Apache Airflow是Airbnb开源的、基于Python编写的调度工具，基于有向无环图（DAG），可以定义一组有依赖的作业，并按照依赖顺序依次执行作业。还支持通过Python定义子作业，并支持各种Operators操作器，灵活性大，能满足用户的...
Job型资源组的优先级队列
当 湖仓版（3.0）Job型资源组中并发执行的作业较多时，作业运行需要的资源会大于资源组的资源。AnalyticDB MySQL版 湖仓版（3.0）支持作业排队能力，新提交的作业会处于提交中的状态，不会失败。在一些业务场景中，对作业执行和结果产出的...
改写回源URL
执行规则 空 如果配置了多条规则，在匹配执行当前规则后，按照从上到下顺序按依次执行可以匹配的所有规则。break 如果配置了多条规则，若请求的URL匹配了当前规则，匹配执行完当前规则后，剩余规则将不再匹配。只修改URL中的资源路径部分，...
外呼系统管理
未完成的外呼任务将顺延至下个时间窗口按顺序执行。多个窗口会取并集。如果选择“周一至周五”，则只能在每周一至周五的既定时间窗口内外呼。业务并发量管理：并发即为同时可以进行外呼作业的电话数量。被叫号码每日拨打上限：单个被呼叫...
外呼系统管理
未完成的外呼任务将顺延至下个时间窗口按顺序执行。多个窗口会取并集。如果选择“仅周一至周五外呼”，则只能在每周一至周五的既定时间窗口内外呼；如果选择“仅非节假日外呼”，则只能在非节假日的既定时间窗口内外呼。业务并发量：并发即...
对接MaxCompute常见问题与诊断
用户使用 异步的执行作业。同步的Query。集群资源 共享大集群，SaaS模式。独享集群，PaaS模式。计算引擎 基于Job Execution模型，将作业转化为Stage，每个Stage按需申请计算资源，执行过程中通过File持久化。基于MPP模型，精细化内存资源...
任务类型
当需要将一个任务分成若干步骤按顺序执行时，可以使用简单任务的分步功能。集群任务 集群任务 适用于复杂的调度场景，支持用户按业务的要求，通过自定义的拆分逻辑将一个大的任务拆分到多个客户端上并发执行。集群任务可以分成两个阶段：...
作业调试
您可以使用作业调试功能模拟作业运行、检查输出结果，验证SELECT或INSERT业务逻辑的正确性，提升开发效率，降低数据质量风险。本文为您介绍如何进行Flink SQL作业调试。背景信息 您可以在Flink开发控制台使用作业调试功能本地验证作业逻辑...
人物写真生成API详情
ebd3-98ce-9fe8-759d7d7b107d","output":{"task_id":"86ecf553-d340-4e21-af6e-a0c6a421c010","task_status":"RUNNING","task_metrics":{"TOTAL":1,"SUCCEEDED":1,"FAILED":0 } } } 响应示例（作业成功执行完毕）如果作业执行完成并成功...
SQL 计划任务
默认附件按上传的先后排序，可拖拽改变顺序，任务执行时按文件顺序执行。当前只支持上传.sql 后缀的 SQL 文件。分隔符 支持 Delimiter 分隔符号。查询结果限制 支持设置查询结果限制(1-100w)。执行超时时间 在 执行超时时间 文本框中输入...
数据库变更管理
默认附件按上传的先后排序，可拖拽改变顺序，任务执行时按文件顺序执行。当前只支持上传.sql 后缀的 SQL 文件。SQL 检查 单击该按钮检查 SQL 语法。回滚方案 指定 回滚方案。回滚方案支持 SQL 文本录入及上传附件方式，参见 SQL 内容 信息...
基本概念
工作流（Workflow）工作流（Workflow）是预先编排好的一系列任务流程，可以实现在指定OSS Bucket上传一个文件后，自动按照预先编排好的环节和条件依次执行作业。转码模板（Template）转码模板是一系列处理参数的集合。在创建转码任务或使用...
同步调用
并发执行 并发执行是指在任意指定时间您的函数代码同时执行的数量。您可以用以下公式来估算并发的函数调用数：并发调用数=请求速率×函数执行时间 请求速率：函数被调用的速率，即每秒请求数或每秒事件数。函数执行时间：函数请求到达实例...
同步调用
并发执行 并发执行是指在任意指定时间您的函数代码同时执行的数量。您可以用以下公式来估算并发的函数调用数：并发调用数=请求速率×函数执行时间 请求速率：函数被调用的速率，即每秒请求数或每秒事件数。函数执行时间：函数请求到达实例...
使用AutoDock Vina软件进行药物筛选
控制台操作时系统会自动打开12016端口，客户端操作时，请您自行打开端口，首个VNC窗口使用12017端口，如果有多个用户使用VNC，则端口号按顺序递增。通过客户端 在客户端的左侧导航栏，单击 会话管理。在会话管理页面的右上角，单击 VNC，...
并发控制
但是，如果存在冲突，则写入操作失败，并出现并发修改异常，而不是像对Parquet表执行写操作那样损坏表。表的隔离级别定义了必须将事务与并发操作所做的修改隔离的程度。有关在Databricks上的Delta Lake支持的隔离级别的信息，请参阅 隔离...
RDS SQL Server实例如何手动执行作业及查看执行作业...
概述 RDS SQL Server实例如何手动执行作业及查看执行作业记录。详细信息 阿里云提醒您：如果您对实例或数据有修改、变更等风险操作，务必注意实例的容灾、容错能力，确保数据安全。如果您对实例（包括但不限于ECS、RDS）等进行配置与数据...
实现处理器接口和类
一个简单任务对应一个 handler，支持任务分片及分步：当需要并发执行并且不关注资源利用率时，可以使用简单任务的分片功能。当需要将一个任务分成若干步骤按顺序执行时，可以使用简单任务的分步功能。实现处理器接口/*简单任务处理器接口*/...
上下游存储
全量MaxCompute和增量MaxCompute源表作业是否支持暂停作业后修改并发数，再恢复作业？作业启动位点设置了2019-10-11 00:00:00，为什么启动位点前的分区也会被全量MaxCompute源表读取？增量MaxCompute源表监听到新分区时，如果该分区还有...
Broker Load
数据首先根据 column list 和 COLUMNS FROM PATH AS 按顺序拼接成原始数据行。然后按照前置过滤条件进行过滤。SET(column_mapping)指定列的转换函数。WHERE predicate 指定数据的过滤条件。DELETE ON expr 需配合 MERGE 导入模式一起使用，...
功能特性
当需要将一个任务分成若干步骤按顺序执行时，可以使用简单任务的分步功能。集群任务 适用于复杂的调度场景，支持用户按业务的要求，通过自定义的拆分逻辑将一个大的任务拆分到多个客户端上并发执行。集群任务可以分成两个阶段：拆分阶段：...
操作指南概述
提交成功后，任务会进入管道中进行排队，在并发内根据优先级和提交顺序依次被调度执行。所以在接口返回时，不保证任务已经完成。您需要定时轮训查询任务接口，或通过为管道/工作流配置MNS消息接收任务结果。上传视频到OSS。提交异步任务。...
查询加速
query:sum(metric)interval:12h step:2m 按时间线切分 如果一个Metric的时间线有50万条，如果设置切分大小为10，即分成10个任务并发执行计算。每个任务负责5万条左右的时间线数据，各任务执行完成后会对结果进行合并。重要 您无需关心...
公告
在极小概率下，若影响了用户的作业并导致执行失败，请重新尝试执行作业。您有任何相关问题或需要协助，可以通过您的专属钉群或MaxCompute开发者社区群（钉钉群号：11782920）联系我们。感谢您的配合！2024年02月23日-MaxCompute跨地域灾备...
批处理接口API详情
本模型请求处理时间较长，服务采用异步方式提供，SDK进行了封装，您既可以按异步方式调用，也可以按照同步方式调用。说明 接口限制：对单账户（含主账号与RAM子账号）任务下发接口限制QPS为1，并发任务数量限制为3。设置API-KEY export ...
批处理接口API详情
本模型请求处理时间较长，服务采用异步方式提供，SDK进行了封装，您既可以按异步方式调用，也可以按照同步方式调用。说明 接口限制：对单账户（含主账号与RAM子账号）任务下发接口限制QPS为1，并发任务数量限制为3。设置API-KEY export ...
高性能Flink SQL优化技巧
因此在资源优化时，建议：作业并发大时：在作业的 部署详情 页签的 资源配置 中，增加JobManager的资源，提高CPU和内存的大小，例如：Job Manager CPUs设置为4。Job Manager Memory设置为8 GiB。作业拓扑较复杂时，在作业的 部署详情 页签...
创建普通转码任务
转码管道不保证并发能力，受资源情况影响，默认并发为200。输出文件名 在文本框中填写输出文件名。除M3U8文件外，其他类型文件需要加后缀名。例如：example_video01.mp4。输出路径 单击 选择，在 Bucket 下拉列表中，选择Bucket名称。路径 ...
SQL常见问题
本文为您介绍实时计算Flink版的SQL常见问题，包括作业常见问题、开发报错、运维报错。为什么使用POJO类作为UDTF返回类型时字段会出现“错位”?为什么数据在LocalGroupAggregate节点中长时间卡住，无输出？运行拓扑图中显示的Low Watermark...
Hudi
并发参数 名称 说明 默认值 备注 write.tasks writer的并发，每个writer顺序写1~N个buckets。4 增加写任务的并发对小文件个数没影响。write.bucket_assign.tasks bucket assigner的并发。Flink并发度 增加写任务的并发同时增加了写任务的...
当添加多个业务日期、并发组数为一时，任务是否会按
概述 Dataphin周期任务自定义日期补数据，当添加多个业务日期、并发组数为一时，任务是否会按照时间顺序执行补数据。详细信息 目前Dataphin产品不依赖顺序执行，多个业务日期会并发执行补数据任务。适用于 Dataphin
使用限制
本文介绍阿里云EMR Serverless Spark在资源数、性能、项目空间数量或JAR包数量等方面的限制，请您评估以下限制对您业务的影响并做出相应的调整。限制项 说明 地域 EMR ...并发控制 同一工作空间内允许并发执行的任务数量上限为100个。
列存索引内存管理介绍
本文介绍了列存索引物理内存、虚拟内存以及如何控制内存与并发执行相关内容。物理内存 列存索引执行器的所有内存全部接入到统一的内存分配接口中。该统一接口的功能如下：统计实际内存使用量 block即将分配内存的查询操作 kill即将分配内存...
EditJobTemplate-编辑作业模板
user Priority integer 否 执行作业优先级，取值范围：0~9，取值越大，优先级越高。默认值：0 0 PackagePath string 否 执行作业路径。packageFolder StdoutRedirectPath string 否 标准输出路径。LammpsTest StderrRedirectPath string 否...
基础术语
任务分步 Step 一个简单任务可以拆分成多个执行步骤（step），由不同的执行器（handler）按顺序执行。前置步骤成功完成后才开始执行下一个步骤。例如对账任务的处理步骤如下：下载银行的清算文件。根据约定格式解析文件。文件数据与机构...
USER_JOBS
this_date TIMESTAMP WITH TIME ZONE 开始执行作业的日期。this_sec TEXT 与 this_date 相同。next_date TIMESTAMP WITH TIME ZONE 下次执行此作业的日期。next_sec TEXT 与 next_date 相同。total_time INTERVAL 此作业的执行时间（以秒为...
- 产品推荐
- 这些文档可能帮助您