函数存储选型
为了满足业务存储和访问文件的诉求，函数计算 提供丰富的存储类型，包括文件存储NAS、对象存储OSS、临时硬盘和层。本文介绍 函数计算 支持的存储类型的适用场景及差异，供您进行技术选型。选型分析 对比项 文件存储NAS 对象存储OSS 临时...
环境说明
Python内置模块 除了Python的标准模块，函数计算 的Python运行环境中还包含一些常用模块，您可以直接引用常见模块。目前包含的模块如下所示。Python 3.10（公测中）模块名称 模块介绍 模块版本 oss2 OSS SDK 2.16.0 tablestore Tablestore ...
函数存储选型
为了满足业务存储和访问文件的诉求，函数计算 提供丰富的存储类型，包括文件存储NAS、对象存储OSS、临时硬盘和层。本文介绍 函数计算 支持的存储类型的适用场景及差异，供您进行技术选型。选型分析 对比项 文件存储NAS 对象存储OSS 临时...
什么是函数计算
函数计算 是事件驱动的全托管计算服务。使用 函数计算，您无需采购与管理服务器等基础设施，只需编写并上传代码或镜像。函数计算 为您准备好计算资源，弹性地、可靠地运行任务，并提供日志查询、性能监控和报警等功能。视频介绍 什么是函数...
应用场景
本文主要介绍弹性高性能计算集群的主要应用场景，您可以根据不同的应用场景配置不同的资源类型。气象预报 E-HPC结合数值模型计算分析气象数据与环境数据，可以预测天气、环境等气象信息。能源勘探 E-HPC可以帮助勘探行业进行勘探数据分析，...
2024年
跨地域灾备 2024-02-08 新增镜像管理 新说明 MaxCompute提供镜像管理功能，内置数据分析、科学计算、机器学习（如Pandas、Numpy、Scikit-learn、Xgboost）等各类常用镜像，并已对镜像进行预先加热，您可在SQL UDF、PyODPS开发等场景中直接...
资源观测
资源观测提供某段时间内，数据传输服务资源组（包括共享资源组和独享资源组）与计算资源组内各类CPU、内存、并发数等资源的使用情况，您可通过观测各指标的曲线图，优化和调整作业的执行计划及资源配置，提高作业的效率和性能。开通地域 ...
混合云代理模式最佳实践
混合云代理模式集群的管理节点为已有集群的管理节点，计算节点由已有集群计算节点和云上新增计算节点组成。已有集群可以是线下集群，也可以是云上集群。本文介绍混合云代理模式集群（SGE调度器）的部署方案。背景信息 在HPC生命科学领域，...
自动伸缩最佳实践
背景信息 当您需要每天不定时提交作业，使用E-HPC集群几个小时进行大规模计算，然后释放节点，您可以针对不同的作业类型，配置不同的伸缩策略。配置伸缩策略后，系统可以根据实时负载自动增加或减少计算节点。可以帮您合理利用资源，减少...
触发器简介
函数的执行可以通过 函数计算控制台 或SDK触发，也可以由其他一些事件源来触发。您可以在指定函数中创建触发器，该触发器描述了一组规则，当某个事件满足这些规则，事件源就会触发关联的函数。说明 如果您需要使用一个触发器触发多个函数，...
2024年
2024-03 功能名称 功能描述 发布时间 发布地域 相关文档 镜像管理功能发布 MaxCompute提供镜像管理功能，内置数据分析、科学计算、机器学习（如Pandas、Numpy、Scikit-learn、Xgboost）等各类常用镜像，并已对镜像进行预先加热，您可在SQL ...
基于Flink+Hologres搭建实时数仓
使用Flink+Hologres搭建实时数仓可以充分利用Flink强大的实时处理能力和Hologres提供的Binlog、行列共存和资源强隔离等能力，实现高效、可扩展的实时数据处理和分析，帮助您更好地应对不断增长的数据量和实时业务需求。本文介绍如何通过...
成本分析
spot spark Spark 作业计算 SpotSpark作业计算 odps_computation_spark odps_computation_mars_spot mars 数据科学（Mars）按量付费 SpotMars作业计算 odps_computation_mars odps_computation_mars_spot MapReduce MR作业计算 ...
时区配置操作
您可以通过以下两种方式配置时区：Session级别：执行 SET odps.sql.timezone=;语句，需要与计算语句一起提交。设置时区为Asia/Tokyo。SET odps.sql.timezone=Asia/Tokyo;查询当前时区。SELECT getdate();output:+-+|_c0|+-+|2018-10-30 23:...
使用高性能容器应用
通过高性能容器应用，您可以在E-HPC集群上通过高性能容器应用启动高性能计算作业，从而降低业务部署的复杂性。高性能容器应用在支持E-HPC全部原有能力（如弹性伸缩、性能监控等）的基础上，可为您提供更加高效和便捷的计算解决方案。本文...
触发器简介
函数的执行可以通过 函数计算控制台 或 SDK 触发，也可以由其他一些事件源来触发。您可以在指定函数中创建触发器，该触发器描述了一组规则，当某个事件满足这些规则，事件源就会触发关联的函数。说明 如果您需要使用一个触发器触发多个函数...
计算费用（按量付费）
当您购买按量付费规格后，MaxCompute会对SQL、MapReduce、Lightning（交互式分析）、Spark、Mars（数据科学）和MCQA（查询加速SQL）计算类型按量付费。本文为您介绍不同计算类型下的计费规则。背景信息 MaxCompute是以作业的执行情况作为...
计算巢软件分销模式说明
为解决软件开发商和云分销商在云上部署软件、运维、交易结算等场景存在的困难，计算巢提供了软件分销模式助力软件分销商转型为云服务商。本文介绍计算巢软件分销模式的详细信息。背景信息 软件开发商为实现软件销售的最大化商业利益，除了...
代码模板
窗口Top-N 如果您需要在某个时间范围内计算出目前排名前几位或者后几位的数据，则可以使用窗口Top-N语法。CEP模板 模式检测（CEP）在数据流情景中，如果您需要搜索一组事件模式，则可以使用MATCH_RECOGNIZE语法。Join模板 Regular Join ...
2023年
Spark Connector 2023-10-27 新增数据科学计算概述 新说明 MaxFrame是由阿里云自研的分布式科学计算框架，是对历史相关产品功能（PyODPS、Mars）的重大升级，在MaxCompute之上提供一套完全兼容Pandas接口的API，让用户用更为熟悉、更符合...
公告
计算成本优化功能在原计算资源优化功能（对 包年包月一级Quota 类型的计算资源生成更优的资源配置方案）的基础上增加支持查看使用 按量付费计算资源 调整为使用 包年包月计算资源 的资源配置推荐方案及效果推演，帮助您进一步优化计算成本...
2018年功能发布记录
触发器简介 MNS主题触发器概述 本地调试工具 fun local 新增 函数计算推出本地调试工具Funcraft，Funcraft可以将函数计算中的函数在本地完全模拟运行，并提供单步调试的功能，旨在弥补函数计算相对于传统应用开发、调试体验上的短板，并为...
关闭计算节点的CPU超线程
E-HPC集群的每个计算节点都是一台ECS实例，默认情况下，ECS实例均已开启CPU超线程。在部分HPC场景下，需要关闭CPU超线程以获得更好的性能表现。本文介绍如何关闭计算节点的CPU超线程。背景信息 CPU是中央处理器，一个CPU可以包含若干个物理...
MemVerge Memory Machine部署使用实践
背景信息 在HPC生命科学和EDA等领域，业务流程涉及到的大量应用算例都强依赖于大内存计算资源。这些算例会将数据先Load到内存，然后作计算分析，完成后将数据存储到存储设备中。因此该类场景对算力的内存和存储IO规格都有着较高要求，使得...
2023年
MaxCompute按量付费闲时版是一种按量付费计算资源规格类型，开通后意味着您可以使用MaxCompute闲时计算资源，通过闲时计算资源运行的作业（SpotJob）相对于按量付费标准版作业具有更低的单价，适用于期望极低成本、但对完成时间不敏感的...
表设计规范
降低计算成本 规范化的表设计可以帮助您优化数据的读取，从而减少计算过程中的冗余读写和计算，提升计算性能，降低计算成本。降低维护成本 规范化的表分层设计能够直接体现业务的特点。例如，在规范化设计表的同时对数据通道中的数据采集...
在DataWorks中通过函数计算节点发送邮件
背景介绍 DataWorks当前已经支持通过函数计算节点调用函数计算服务，在函数计算服务中可以自定义各种功能，最终可通过DataWorks进行调用。前提条件 已开通DataWorks服务，详情请参见 开通DataWorks服务。已开通函数计算服务，详情请参见 ...
计费项与计费方式概述
计算费用（按量付费）MaxCompute支持对SQL、MapReduce、Spark、Mars（数据科学）、Lightning（交互式分析）和MCQA（查询加速）计算类型按量计费。说明 Lightning（交互式分析）服务将于2022年12月31日下线，详情请参见 MaxCompute ...
功能特性
计算 MaxCompute向用户提供了多种经典的分布式计算模型，提供TB、PB、EB级数据计算能力，能够更快速的解决用户海量数据计算问题，有效降低企业成本。功能集 功能 功能描述 参考文档 SQL开发 DDL语句 DDL语句 DDL DML操作 DML操作 DML操作 ...
功能特性
用户使用工具（如 SDK，命令行工具等）向 BatchCompute 提交作业，BatchCompute 使用用户...4.自定义镜像 您提交作业或者创建集群时，可以使用批量计算官方提供的镜像，也可以使用自定义镜像。自定义镜像的好处是，可以自己安装需要的软件。
概述
您可以通过调用 o.create_mars_cluster，在MaxCompute内部创建Mars集群，并将计算作业直接提交至Mars集群，调度费用极小。在数据规模较小时，Mars更有优势。PyODPS PyODPS是一个客户端，不包含任何服务端部分。执行PyODPS DataFrame时，...
在DataWorks中通过函数计算节点实现动态为PDF添加水印
背景介绍 DataWorks当前已经支持通过函数计算节点调用函数计算服务，在函数计算服务中可以自定义各种功能，最终可通过DataWorks进行调用。前提条件 已开通DataWorks服务，详情请参见 开通DataWorks服务。已开通函数计算服务，详情请参见 ...
资源规划及规格选型
MaxCompute资源包含存储资源和计算资源（CU）两种，存储资源用于存储表或资源（Resource），计算资源用于运行作业。为实现以最低的费用，满足业务对存储资源、计算资源的需求，企业必须要根据自身情况合理规划资源。本文为您介绍如何规划...
使用Schrodinger软件计算分子结构
背景信息 Schrodinger基于物理学的计算平台，集成了用于预测建模、数据分析的差异化解决方案，以实现对化学空间的快速探索，主要应用于药物发现，以及航空航天、能源、半导体和电子显示器等不同领域的材料科学。更多信息，请参见 ...
2022年
本文为您介绍了MaxCompute 2022年内容更新的最新动态，基于此您可以了解MaxCompute中增加了哪些新功能、语法新特性和权限变更，提升项目开发效率。MaxCompute的重要功能发布记录请参见 产品重大更新。2022年12月更新记录 时间 特性 类别 ...
授予函数计算访问其他云服务的权限
在函数运行的过程中，函数计算 需要访问其他云资源，例如将函数日志写入到您指定的日志服务内、拉取ACR镜像或打通VPC网络访问等。此时，需要为函数所在服务授予相应权限，当服务被授予某权限后，该服务下所有函数都将具有此权限。如果是较...
配置日志
您可以在 函数计算 控制台查看单请求日志、实例日志、函数日志，也可以在 日志服务 控制台利用日志分析能力对日志进行自定义检索。背景信息 日志服务 是阿里云提供的针对日志类数据的一站式服务。通过日志服务存储函数日志，需要在函数中...
配置日志
您可以在 函数计算 控制台查看单请求日志、实例日志或函数日志，也可以在 日志服务 控制台利用日志分析能力对日志进行自定义检索。背景信息 日志服务 是阿里云提供的针对日志类数据的一站式服务。通过日志服务存储函数日志，需要在函数对应...
服务介绍
执行计划，是物联网边缘计算为LE-V-B004型号边缘一体机提供的视觉算法和调度策略。在同等算力下，开通执行计划的LE-V-B004型号边缘一体机，可扩展更多IPC设备进行算法推理。背景信息 执行计划应用于社区、园区等物业管理场景，通过本地AI...
基本概念
层次结构 您可以了解实时计算Flink版产品基本概念的层次结构，为后期作业开发、作业部署、作业运维和安全管理等操作提供思路。实时计算Flink版产品基本概念的层次结构如下图所示。概念说明 基本概念 说明 相关文档 工作空间（Workspace）...
- 产品推荐
- 这些文档可能帮助您