函数实例生命周期回调
本文介绍Custom Runtime实现函数实例生命周期回调的方法。回调方法 当您实现并配置函数实例生命周期回调后，函数计算 将在相关实例生命周期事件发生时调用对应的回调程序。函数实例生命周期涉及Initializer和...404 500 函数计算 重启实例。
计算组管理
重启计算组 权限说明 重启计算组需要具备实例的Superuser权限。注意事项 由于重启计算组的过程是异步的，执行SQL后，并不代表计算组重启完成，需要您使用 hg_get_warehouse_status 函数查询计算组的状态。命令格式 CALL hg_restart_...
函数实例生命周期回调
本文介绍Custom Runtime实现函数实例生命周期回调的方法。回调方法 当您实现并配置函数实例生命周期回调后，函数计算 将在相关实例生命周期事件发生时调用对应的回调程序。函数实例生命周期涉及Initializer、...404 500 函数计算 重启实例。
数据科学计算概述
MaxFrame是由阿里云自研的分布式科学计算框架，是对历史相关产品功能（PyODPS、Mars）的重大升级，在MaxCompute之上提供一套完全兼容Pandas接口的API，让用户用更为熟悉、更符合Python社群习惯的方式使用MaxCompute。本文为您介绍...
开源支持
使用Mars进行科学计算，不仅使大规模科学计算任务的实现从MapReduce上的数千行代码降低到Mars上的数行代码，更在性能上有大幅提升。Mars已经在Github上开源代码，您可以一起参与共建Mars。详情请参见GitHub开源代码 Mars。关于Mars的更多...
MaxFrame概述
MaxFrame是由阿里云自研的分布式计算框架，支持Python编程接口、兼容Pandas接口且自动进行分布式计算，同时可直接使用MaxCompute计算资源及数据接口，与MaxCompute Notebook、镜像管理等功能共同构成了MaxCompute完整的Python开发生态。...
环境说明
4.5.4.58 numpy 科学计算库 1.21.4 scipy 科学计算库 1.7.2 matplotlib 绘图库 3.4.3 scrapy 数据抓取库 2.5.1 Python 3.6 模块名称 模块介绍 模块版本 oss2 OSS SDK 2.9.1 tablestore Tablestore SDK 5.1.0 aliyun-fc2 FC SDK 2.3.0 ...
环境说明
4.5.4.58 numpy 科学计算库 1.21.4 scipy 科学计算库 1.7.2 matplotlib 绘图库 3.4.3 scrapy 数据抓取库 2.5.1 Python 3.6 模块名称 模块介绍 模块版本 oss2 OSS SDK 2.9.1 tablestore Tablestore SDK 5.1.0 aliyun-fc2 FC SDK 2.3.0 ...
按需集群
该类型集群适用于绝大部分业务波峰明显的场景，阿里云批量计算服务依托强大的弹性计算能力，在渲染、基因、金融、游戏、科学计算等领域有极为广阔的应用。2.限制 各账号按需实例均存在配额限制，您可以直接打开 批量计算控制台，切换到对应...
功能概览
fold 将输入objects聚合成list<object>group 分组 groupCount 分组并计算组内的数量 identity 返回输入自身 label 返回表名或者图label loops 返回当前循环的次数 math 科学计算 max 计算最大值 mean 计算平均值 min 计算最小值 order 排序...
镜像管理
MaxCompute提供镜像管理功能，内置数据分析、科学计算、机器学习（如Pandas、Numpy、Scikit-learn、Xgboost）等各类常用镜像，并已对镜像进行预先加热，您可在SQL UDF、PyODPS开发等场景中直接引用已有镜像，无需执行繁琐的镜像打包、上传...
2024年
2024-03 功能名称 功能描述 发布时间 发布地域 相关文档 镜像管理功能发布 MaxCompute提供镜像管理功能，内置数据分析、科学计算、机器学习（如Pandas、Numpy、Scikit-learn、Xgboost）等各类常用镜像，并已对镜像进行预先加热，您可在SQL ...
为函数安装第三方依赖
例如，Python的科学计算库 numpy 对底层环境有依赖，如果使用M1芯片的Mac系统，不能使用本地构建方式安装依赖。使用Dockerfile文件构建层 如果依赖包含底层动态链接库，或者在本地安装依赖失败，可以使用Dockerfile的方式安装。具体操作，...
为函数安装第三方依赖
例如，Python的科学计算库 numpy 对底层环境有依赖，如果使用M1芯片的Mac系统，不能使用本地构建方式安装依赖。使用Dockerfile文件构建层 如果依赖包含底层动态链接库，或者在本地安装依赖失败，可以使用Dockerfile的方式安装。具体操作，...
2024年
跨地域灾备 2024-02-08 新增镜像管理 新说明 MaxCompute提供镜像管理功能，内置数据分析、科学计算、机器学习（如Pandas、Numpy、Scikit-learn、Xgboost）等各类常用镜像，并已对镜像进行预先加热，您可在SQL UDF、PyODPS开发等场景中直接...
2024年
您可以以更熟悉、高效、便捷的方式利用MaxCompute的海量计算资源及数据进行大规模数据处理、可视化数据探索分析及科学计算、ML/AL开发等工作。MaxFrame功能介绍和使用说明请参见 MaxFrame概述。您有任何相关问题或需要协助，可以通过您的专...
集群概述
软件 E-HPC提供了业界主流的科学计算应用、编译器运行时库、MPI通信库等软件，您可以根据需求安装使用。更多信息，请参见 软件概述。集群状态 创建中：集群创建初始状态，对应ECS实例创建。安装中：集群处于安装软件状态。初始化中：集群...
阿里云携手深势科技，助力泓博医药加速药物研发
深势科技是“AI for Science”科学研究范式的引领者和践行者，致力于运用人工智能和分子模拟算法，结合先进计算手段求解重要科学问题，为生物医药、能源、材料和信息科学与工程研究，打造新一代微尺度工业设计和仿真平台。过去，深势科技...
配置自动伸缩
重要 如果管控节点需要关机或者重启，请在计算节点没有作业运行，并且自动伸缩已经释放了空闲节点后再进行操作。此时，建议您先关闭自动伸缩，在管控节点重新启动后，再开启自动伸缩。操作步骤 打开 自动伸缩 页面。登录 弹性高性能计算...
常见问题
说明 如果管控节点需要关机或者重启，请在计算节点没有作业运行，并且自动伸缩已经释放了空闲节点后再进行操作。此时，建议您先关闭自动伸缩，在管控节点重新启动后，再开启自动伸缩。为什么Slurm集群配置自动伸缩策略后增加节点会失败？...
公告
计算成本优化功能在原计算资源优化功能（对 包年包月一级Quota 类型的计算资源生成更优的资源配置方案）的基础上增加支持查看使用 按量付费计算资源 调整为使用 包年包月计算资源 的资源配置推荐方案及效果推演，帮助您进一步优化计算成本...
产品规格
高主频 ecs.hfg6.16xlarge 处理器：3.1 GHz主频的Intel ® Xeon ® Platinum 8269（Cascade Lake）vCPU：64 内存：256GiB GPU：无 以太网：25Gbit/s 高效云盘 ESSD云盘 SSD云盘 需要高主频计算业务，如生命科学应用场景。内存型 ecs.re6.26...
管理灵骏集群和灵骏节点
灵骏集群是带有灵骏优化套件的高性能灵骏计算节点的集合，每个灵骏节点对应一台GPU计算服务器，可以用于部署异构计算服务。本文为您介绍如何管理灵骏集群和灵骏节点，例如查看灵骏集群信息、查看节点详情、扩容灵骏集群等操作。管理灵骏...
网络时间同步助手
如超过该时间函数仍未返回结果，该函数计算程序将会被强制重启。定时运行 打开定时运行开关，文本框中填入*。表示该函数会被定时触发运行，每分钟执行一次。Cron表达式详细信息请参见 CRONTAB 网页 内容。重要 若您搭建的环境是专业版（LE ...
阿里云OSS服务访问
如超过该时间函数仍未返回结果，该函数计算程序将会被强制重启。定时运行 打开定时运行开关，文本框中填入*。表示该函数会被定时触发运行，每分钟执行一次。Cron表达式详细信息请参见 CRONTAB 网页 内容。其余参数无需配置。在左侧导航栏...
设备数据存入本地MySQL数据库
如超过该时间函数仍未返回结果，该函数计算程序将会被强制重启。定时运行 使用默认配置：关闭。环境变量 单击 新增环境变量，添加如下方“环境变量配置”表格所示的环境变量。表 4.环境变量配置 名称 值 DB_NAME MySQL的数据库名称，请根据...
对接InfluxDB
如超过该时间函数仍未返回结果，该函数计算程序将会被强制重启。定时运行 使用默认配置：关闭。环境变量 单击 新增环境变量，添加如下方“环境变量配置”表格所示的环境变量。表 3.环境变量配置 名称 值 host InfluxDB的访问地址。port ...
Task快速重启配置
本文为您介绍，如何配置Task快速重启，从而降低Failover对作业的影响。背景信息 重要 此功能为预览功能，请在生产环境下谨慎使用，如遇问题请及时 提交工单 和技术支持部门取得联系。通常，当Flink流作业中的某个Task发生异常时，为了保证...
什么是弹性高性能计算E-HPC
弹性高性能计算将计算能力积聚，用并行计算方式解决更大规模的科学、工程和商业问题，在科研机构、石油勘探、金融市场、气象预报、生物制药、基因测序、图像处理等行业均有广泛的应用。产品架构 弹性高性能计算的产品架构如下图所示。弹性...
计算费用（按量付费）
当您购买按量付费规格后，MaxCompute会对SQL、MapReduce、Lightning（交互式分析）、Spark、Mars（数据科学）和MCQA（查询加速SQL）计算类型按量付费。本文为您介绍不同计算类型下的计费规则。背景信息 MaxCompute是以作业的执行情况作为...
成本分析
spot spark Spark 作业计算 SpotSpark作业计算 odps_computation_spark odps_computation_mars_spot mars 数据科学（Mars）按量付费 SpotMars作业计算 odps_computation_mars odps_computation_mars_spot MapReduce MR作业计算 ...
功能特性
计算 MaxCompute向用户提供了多种经典的分布式计算模型，提供TB、PB、EB级数据计算能力，能够更快速的解决用户海量数据计算问题，有效降低企业成本。功能集 功能 功能描述 参考文档 SQL开发 DDL语句 DDL语句 DDL DML操作 DML操作 DML操作 ...
管理域名
在实时计算控制台上，您可以管理上下游服务的域名。本文为您介绍如何在实时计算控制台上新增域名、修改域名和删除域名。使用限制 填写域名时，不支持填写大写字符。单个工作空间最多只能设置50个合法域名。当工作空间状态为运行中时，才...
实践教程概览
使用Schrodinger软件计算分子结构 Schrodinger基于物理学的计算平台，集成了用于预测建模、数据分析的差异化解决方案，以实现对化学空间的快速探索，主要应用于药物发现，以及航空航天、能源、半导体和电子显示器等不同领域的材料科学。...
计费项与计费方式概述
计算费用（按量付费）MaxCompute支持对SQL、MapReduce、Spark、Mars（数据科学）、Lightning（交互式分析）和MCQA（查询加速）计算类型按量计费。说明 Lightning（交互式分析）服务将于2022年12月31日下线，详情请参见 MaxCompute ...
Notebook开发编辑器
Kernel 重启Kernel 可重启Notebook Kernel，重启过程预计等待3分钟，重启期间执行中的Notebook作业会失败。销毁Kernel 可销毁Notebook Kernel，执行中的Notebook作业将会失败。②工具栏 参数 说明 保存Notebook作业。其他保存方式：控制台...
基本概念
本文汇总使用弹性高性能计算E-HPC过程中涉及的基本概念，方便您查询和了解相关概念。使用弹性高性能计算涉及的相关概念如下表所示。概念 说明 集群 集群指运行高性能计算的节点集合，可以提供单节点不能提供的强大计算能力，拥有高性能、...
概述
Mars能利用并行和分布式技术，为Python数据科学栈加速，包括 Numpy、Pandas 和 Scikit-learn。Mars常用接口如下：Mars Tensor 接口 和Numpy保持一致，且支持大规模高维数组。示例代码如下。import mars.tensor as mt a=mt.random.rand...
基于Flink+Hologres搭建实时数仓
背景信息 随着社会数字化发展，企业对数据时效性的需求越来越强烈。除传统的面向海量数据加工场景设计的离线场景外，大量业务需要解决面向实时加工、实时存储、实时分析的实时场景问题。传统离线数仓搭建的方法论比较明确，通过定时调度...
管理实例资源
服务实例创建完成后，您可以对服务实例的资源进行查看信息，启动、重启和远程连接等操作。本文介绍如何进行资源的管理操作。操作步骤 登录 计算巢控制台。在左侧导航栏中，单击 服务实例管理。根据您创建的服务实例类型，单击对应的服务...
- 产品推荐
- 这些文档可能帮助您