消息通知
批量计算使用 MNS 来实现消息通知。您负责主题的创建、管理和订阅，并在创建集群或提交作业时指定相关配置。批量计算会依据配置向指定的主题推送消息，您可在 MNS 控制台配置 URL、队列、邮件和短信四种方式获取消息通知。说明 支持的事件 ...
计算成本控制
MaxCompute是批量计算的服务，距离实时的计算服务还是存在一定距离的。如果间隔时间变短，计算频率增加，再加上使用SQL的不良习惯就会导致计算费用飙升，产生费用较高的账单。所以请尽量避免频繁调度，如果要进行频繁调度请通过CostSQL等...
Cromwell Server 运维
1.widdler 安装 widdler 默认在阿里云批量计算提供的 Cromwell server 镜像中安装。可以直接使用，无需做安装操作。2.配置 widdler 由于涉及到个人阿里云运行数据的查询，需要在使用之前设置对应账号的 AK 信息、以及后端执行引擎所部署的...
提交作业
批量计算目前支持命令行，控制台和SDK提交作业，本文介绍将作业提交到批量计算的相关操作。提交作业的方法 使用命令行 bcs sub"python test.py"-p./test.py 该命令会将 test.py 文件打包成 worker.tar.gz 并上传到指定位置，然后再提交作业...
使用 docker-compose 一键启停 Cromwell
key:批量计算的 Access Key；root:Crowmell 运行时在 OSS 上的工作根目录；instance:Cromwell 默认运行时参数，实例类型；image:Cromwell 默认运行时参数，镜像ID；执行完以上命令后，会根据 Crowmell 配置文件模板生成配置文件，并通过 ...
消息通知
批量计算服务（BatchCompute）使用 MNS 提供的主题模式来实现消息通知。用户负责主题（Topic）的创建、管理和订阅，并在使用 BatchCompute 创建集群或提交作业时指定主题相关的配置。BatchCompute 依据配置向指定用户主题推送消息。用户可...
提交作业
批量计算目前支持命令行，控制台和SDK提交作业，本文介绍将作业提交到批量计算的相关操作。提交作业 最简单的作业 如果您已经按照 准备工作 里的步骤配置了默认镜像、实例类型和网络类型，可以通过以下的简单命令提交一个作业。bcs sub...
Configs
支持只设置 CidrBlock，这种情况下批量计算会创建一个指定 CidrBlock 的 VPC，待集群释放时删除创建的 VPC。若同时设置 CidrBlock 和 VpcId，则表示 VPC 已经被创建成功，且VPC 的 CidrBlock 值和此处设置的 CidrBlock 是一致的。Mounts ...
挂载OSS
挂载文件 说明 需求：我在OSS上有多个不同前缀下的文件，需要挂载到批量计算VM中的同一个目录下，该如何使用；假设 bucket1 和 bucket2 下有两个文件挂载到 VM 本地的/home/data/下：oss:/bucket1/data/file1 挂载到/home/data/file1 oss:/...
参考：渐进式计算
渐进式计算（Progressive Computing）是处于传统的流计算和批处理之间的一种计算方式，具有高资源利用率和低延迟的优势。本文为您介绍渐进式计算的基础配置、作业调优配置以及使用示例。背景信息 渐进式计算能够处理增量数据并维护中间结果...
GTX_FPGA 最佳实践
使用"pip install—upgrade batchcompute"更新批量计算 python SDK 到最新版本。3.2 执行命令 python test.py-reference oss:/xxx/ref/hg19.fa-fastq1 oss:/xxx/input/human30x_10m_1.fastq-fastq2 oss:/xxxx/_input/human30x_10m_2.fastq-...
查看及管理离线计算任务列表
离线计算任务列表是指在Dataphin创建的离线计算任务集合。在Dataphin的离线计算任务列表为您展示了离线...批量修改引用模板版本 批量修改选中的计算任务所引用的模板版本。说明 所选任务全部引用同一个模板时，才支持批量修改引用模板版本。
查看及管理离线计算任务列表
离线计算任务列表是指在Dataphin创建的离线计算任务集合。在Dataphin的离线计算任务列表为您展示了离线...批量修改引用模板版本 批量修改选中的计算任务所引用的模板版本。说明 所选任务全部引用同一个模板时，才支持批量修改引用模板版本。
什么是阿里云实时计算Flink版
阿里云实时计算Flink版是一套基于Apache Flink构建的⼀站式实时大数据分析平台，提供端到端亚秒级实时数据分析能力，并通过标准SQL降低业务开发门槛，助力企业向实时化、智能化大数据计算升级转型。...实时计算与批量计算相比存在哪些差异？
SGE集群支持
批量计算使用的是 CentOS 自带的 SGE 版本，请参考 SGE。批量计算提供了名为 BatchCompute SGE 的公共镜像，使用该镜像可快速、可靠的构建 SGE 集群，具体的流程如下：请在 云市场 搜索关键字 BatchCompute SGE 了解该镜像，它完全免费使用...
Resource
函数计算 3.0 中的函数：ALIYUN:FC:FUNCTION,函数计算旧版本中的服务：ALIYUN:FC:SERVICE。ALIYUN:FC:FUNCTION resourceArn string 阿里云资源描述符。acs:fc:cn-shanghai:*:functions/demo tags object 标签字典。string value1
GetResourceTagsOutput
函数计算 3.0 中的函数：ALIYUN:FC:FUNCTION,函数计算旧版本中的服务：ALIYUN:FC:SERVICE。ALIYUN:FC:FUNCTION resourceArn string 阿里云资源描述符。acs:fc:cn-shanghai:*:functions/demo tags object 标签字典。string 标签值。value1
管理版本
函数计算 支持版本管理功能，帮助您更高效地管理函数以及触发器。您可以通过版本管理功能发布多个版本的函数，实现软件开发生命周期中的持续集成和发布。本文介绍版本的含义以及如何在 函数计算 控制台管理版本。什么是版本 函数计算 提供...
IoT物联网平台
您可以使用规则引擎数据流转，将数据转发至函数计算（FC）中，然后由函数计算运行函数脚本进行业务处理。前提条件 已创建函数计算的服务和函数，并完成函数配置，验证函数能正常执行。函数计算使用方法，请参见 函数计算文档。重要 创建...
管理版本
函数计算 支持版本管理功能，帮助您更高效地管理服务、函数以及触发器。您可以通过版本管理功能发布多个版本的服务，实现软件开发生命周期中的持续集成和发布。本文介绍版本的含义以及如何在 函数计算 控制台管理版本。什么是版本 函数计算...
镜像使用说明
为了满足用户在AI应用场景的镜像使用习惯，函数计算 推荐使用镜像交付。AI与大数据领域的镜像尺寸常见于GB级别，函数计算 一方面提高了镜像大小的限制，另一方面提供了镜像加速。本文介绍镜像大小限制、通用镜像加速方式以及官方基础镜像的...
镜像使用说明
为了满足用户在AI应用场景的镜像使用习惯，函数计算 推荐使用镜像交付。AI与大数据领域的镜像尺寸常见于GB级别，函数计算 一方面提高了镜像大小的限制，另一方面提供了镜像加速。本文介绍镜像大小限制、通用镜像加速方式以及官方基础镜像的...
Cromwell 工作流引擎支持
Cromwell 是 Broad Institute 开发的工作流管理系统，当前已获得 阿里云批量计算服务 的支持。通过 Cromwell 可以将 WDL 描述的 workflow 转化为批量计算的作业（Job）运行。用户将为作业运行时实际消耗的计算和存储资源付费，不需要支付...
2018年功能发布记录
管理版本 2018年11月 功能名称 变更类型 功能描述 相关文档 MNS主题触发器 新增 函数计算推出MNS主题触发器，您可以通过函数对发布在主题上的消息进行自定义处理，使用MNS触发器后，不需要再去轮询MNS内的消息情况，只需要简单的配置，就...
什么是边缘应用
应用管理是Link IoT Edge提供的边缘应用管理能力，可以帮助您标准化的管理边缘端应用的版本、配置等。当前，Link IoT Edge支持函数计算和容器镜像两种类型的边缘应用。函数计算应用 函数计算应用是一种依托于阿里云函数计算服务的边缘应用...
边缘计算旧版控制台迁移相关问题
物联网边缘计算旧版本控制台什么时间会下线？旧版本控制台可正常提供服务至2024年04月30日，下线之前核心功能可正常使用。迁移会影响当前边缘侧的业务运行吗？边缘业务运行时不受影响，迁移只涉及到云端管控数据，从原有的边缘实例模式迁移...
版本相关命令
FC组件是一款基于Serverless Devs的阿里云函数计算操作工具，通过该工具，您可以直接通过交互式命令使用函数计算服务版本相关的API。前提条件 您已完成以下操作：安装Serverless Devs和Docker 配置Serverless Devs 创建服务 创建版本 命令...
DataWorks大数据开发治理平台
DataWorks为您提供函数计算节点，您可通过该节点周期性调度处理事件函数，并完成与其它类型节点的集成和联合调度。本文为您介绍如何使用函数计算节点。背景信息 DataWorks 基于MaxCompute、Hologres、EMR、AnalyticDB、CDP等大数据引擎，为...
在DataWorks中通过函数计算节点发送邮件
本文为您介绍如何在DataWorks中通过函数计算节点调用函数计算服务，并实现发送邮件功能。背景介绍 DataWorks当前已经支持通过函数计算节点调用函数计算服务，在函数计算服务中可以自定义各种功能，最终可通过DataWorks进行调用。前提条件 ...
触发器高级功能
批量推送案例 案例一 您设置的 批量推送条数 为100条，每条消息大小为1 KB，推量推送间隔 为15s。在10s内消息条数累积100条，则立即触发推送，无需等到15s再推送。案例二 您设置的 批量推送条数 为100条，每条消息大小为1 KB，推量推送间隔...
在DataWorks中通过函数计算节点实现动态为PDF添加水印
本文为您介绍如何在DataWorks中通过函数计算节点调用函数计算服务，实现周期性对OSS中的增量PDF文件添加水印。背景介绍 DataWorks当前已经支持通过函数计算节点调用函数计算服务，在函数计算服务中可以自定义各种功能，最终可通过DataWorks...
触发器高级功能
批量推送案例 案例一 您设置的 批量推送条数 为100条，每条消息大小为1 KB，批量推送间隔 为15s。在10s内消息条数累积100条，则立即触发推送，无需等到15s再推送。案例二 您设置的 批量推送条数 为100条，每条消息大小为1 KB，批量推送间隔...
批量删除作业
3 执行删除动作 3.1 准备工作 复制脚本到执行机器，执行机器 必须安装批量计算的SDK：pip install batchcompute 若执行机器已经安装批量计算的 SDK，则建议更新到最新版本。pip install-upgrade batchcompute 准备好阿里云 AK 信息，且该...
应用场景
风控监测系统 实时计算Flink版可以处理复杂的流处理和批处理任务，也提供了强大的API，执行复杂的数学计算并执行复杂事件处理规则，帮助企业对实时数据进行实时分析，提高企业的风控能力。例如检测APP中的点击行为、识别loT数据流不规则...
设备批量处理工具
物联网边缘计算提供多个跨平台的命令行工具（即批量处理工具），支持您批量处理设备和设备相关操作。Modbus设备批量导入工具 您只需依照已获取工具中的Excel模板，填写设备信息，Modbus设备批量导入工具即可帮助您自动完成产品和设备的配置...
调用方式
Version：要使用的API版本，视觉计算服务的API版本是 2020-03-09。Parameters：请求参数，每个参数之间用“&”分隔。请求参数由公共请求参数和API自定义参数组成。公共参数中包含API版本号、身份验证等信息，详情请参见 公共参数。下面是...
计算资源使用
配额组（Quota）是MaxCompute的计算资源池，为MaxCompute中的计算作业提供所需计算资源（CPU及内存）。在MaxCompute中支持根据计算作业对计算资源的需求，指定匹配的Quota，助力您高效使用计算资源。本文为您介绍如何使用MaxCompute的Quota...
CustomDomain
186851234023*apiVersion string 函数计算的 API 版本。2023-03-30 authConfig AuthConfig 权限认证配置 certConfig CertConfig HTTPS 证书的信息。createdTime string 自定义域名的创建时间。2023-03-30T08:02:19Z domainName string 域名...
资源规划及规格选型
计存比一般规划为2~10，后续根据规划的计存比及预估存储容量购买计算资源：如果项目每天运行的批量处理作业很多，且SQL程序计算复杂度高，计存比推荐规划为10。如果项目每天运行的数据批量处理作业比较少，且SQL程序计算复杂度不高，计存比...
责任共担
函数计算 运行时版本支持时间与社区同步，当社区停止支持时，函数计算 也会启动停止支持流程，停止支持后不保证函数一直正常运行，用户需要及时弃用已停止支持的运行时版本。用户需要自行保障代码及库的安全性，及时修复漏洞并更新函数。...
- 产品推荐
- 这些文档可能帮助您