2023年
Spark Connector 2023-10-27 新增数据科学计算概述 新说明 MaxFrame是由阿里云自研的分布式科学计算框架，是对历史相关产品功能（PyODPS、Mars）的重大升级，在MaxCompute之上提供一套完全兼容Pandas接口的API，让用户用更为熟悉、更符合...
使用函数计算搭建前端CICD系统
本文介绍通过 函数计算 搭建前后端分离架构下的前端静态资源部署服务。背景信息 企业一般使用Gitlab托管前端代码，搭建Jenkins监听Webhook消息，再发布至OSS。此方案虽然比较灵活，但存在以下劣势：需要购买服务器自建Jenkins，涉及计算...
使用函数计算搭建前端CICD系统
本文介绍通过函数计算搭建前后端分离架构下的前端静态资源部署服务。背景信息 企业一般使用GitLab托管前端代码，搭建Jenkins监听Webhook消息，再发布至OSS。此方案虽然比较灵活，但存在以下劣势：需要购买服务器自建Jenkins，涉及计算存储...
2019年功能发布记录
本文介绍 函数计算 2019年度发布的功能变更以及对应的文档动态。2019年10月 功能名称 变更类型 功能描述 相关文档 自定义运行时 新增 函数计算最新支持自定义运行时，完全由您定义函数的运行环境。您既可以基于自定义运行环境定制个性化...
2019年功能发布记录
本文介绍 函数计算 2019年度发布的功能变更以及对应的文档动态。2019年10月 功能名称 变更类型 功能描述 相关文档 自定义运行时 新增 函数计算最新支持自定义运行时，完全由您定义函数的运行环境。您既可以基于自定义运行环境定制个性化...
数据科学计算概述
MaxFrame是由阿里云自研的分布式科学计算框架，是对历史相关产品功能（PyODPS、Mars）的重大升级，在MaxCompute之上提供一套完全兼容Pandas接口的API，让用户用更为熟悉、更符合Python社群习惯的方式使用MaxCompute。本文为您介绍...
开源支持
使用Mars进行科学计算，不仅使大规模科学计算任务的实现从MapReduce上的数千行代码降低到Mars上的数行代码，更在性能上有大幅提升。Mars已经在Github上开源代码，您可以一起参与共建Mars。详情请参见GitHub开源代码 Mars。关于Mars的更多...
MaxFrame概述
MaxFrame是由阿里云自研的分布式计算框架，支持Python编程接口、兼容Pandas接口且自动进行分布式计算，同时可直接使用MaxCompute计算资源及数据接口，与MaxCompute Notebook、镜像管理等功能共同构成了MaxCompute完整的Python开发生态。...
基于函数计算一键部署Stable Diffusion进行AI绘画创作
本文介绍如何通过函数计算搭建Stable Diffusion的WebUI框架实现文本生成图片。背景信息 AIGC（Artificial Intelligence Generated Content）是指人工智能生成内容。“文生图”技术是指使用AI绘画创作图片。Stable Diffusion是一个可通过...
环境说明
4.5.4.58 numpy 科学计算库 1.21.4 scipy 科学计算库 1.7.2 matplotlib 绘图库 3.4.3 scrapy 数据抓取库 2.5.1 Python 3.6 模块名称 模块介绍 模块版本 oss2 OSS SDK 2.9.1 tablestore Tablestore SDK 5.1.0 aliyun-fc2 FC SDK 2.3.0 ...
环境说明
4.5.4.58 numpy 科学计算库 1.21.4 scipy 科学计算库 1.7.2 matplotlib 绘图库 3.4.3 scrapy 数据抓取库 2.5.1 Python 3.6 模块名称 模块介绍 模块版本 oss2 OSS SDK 2.9.1 tablestore Tablestore SDK 5.1.0 aliyun-fc2 FC SDK 2.3.0 ...
HTTP触发器概述
降低开发人员的学习成本和简化开发人员的调试过程，帮助开发人员快速使用 函数计算 搭建Web应用和API。减少请求处理环节，HTTP触发器支持更高效的请求、响应格式，不需要编码或解码成JSON格式，性能更优。支持选择熟悉的HTTP测试工具验证 ...
按需集群
该类型集群适用于绝大部分业务波峰明显的场景，阿里云批量计算服务依托强大的弹性计算能力，在渲染、基因、金融、游戏、科学计算等领域有极为广阔的应用。2.限制 各账号按需实例均存在配额限制，您可以直接打开 批量计算控制台，切换到对应...
基于函数计算快速部署可切换模型的Stable Diffusion
本文介绍如何通过函数计算搭建可切换模型的Stable Diffusion，实现更高质量的图像生成。背景信息 AIGC（Artificial Intelligence Generated Content）是指人工智能生成内容。Stable Diffusion是一个可通过文本生成图像的扩散模型，基于CLIP...
功能概览
fold 将输入objects聚合成list<object>group 分组 groupCount 分组并计算组内的数量 identity 返回输入自身 label 返回表名或者图label loops 返回当前循环的次数 math 科学计算 max 计算最大值 mean 计算平均值 min 计算最小值 order 排序...
HTTP触发器概述
降低开发人员的学习成本和简化开发人员的调试过程，帮助开发人员快速使用 函数计算 搭建Web应用和API。减少请求处理环节，HTTP触发器支持更高效的请求、响应格式，不需要编码或解码成JSON格式，性能更优。支持选择熟悉的HTTP测试工具验证 ...
镜像管理
MaxCompute提供镜像管理功能，内置数据分析、科学计算、机器学习（如Pandas、Numpy、Scikit-learn、Xgboost）等各类常用镜像，并已对镜像进行预先加热，您可在SQL UDF、PyODPS开发等场景中直接引用已有镜像，无需执行繁琐的镜像打包、上传...
2024年
2024-03 功能名称 功能描述 发布时间 发布地域 相关文档 镜像管理功能发布 MaxCompute提供镜像管理功能，内置数据分析、科学计算、机器学习（如Pandas、Numpy、Scikit-learn、Xgboost）等各类常用镜像，并已对镜像进行预先加热，您可在SQL ...
为函数安装第三方依赖
例如，Python的科学计算库 numpy 对底层环境有依赖，如果使用M1芯片的Mac系统，不能使用本地构建方式安装依赖。使用Dockerfile文件构建层 如果依赖包含底层动态链接库，或者在本地安装依赖失败，可以使用Dockerfile的方式安装。具体操作，...
为函数安装第三方依赖
例如，Python的科学计算库 numpy 对底层环境有依赖，如果使用M1芯片的Mac系统，不能使用本地构建方式安装依赖。使用Dockerfile文件构建层 如果依赖包含底层动态链接库，或者在本地安装依赖失败，可以使用Dockerfile的方式安装。具体操作，...
2024年
跨地域灾备 2024-02-08 新增镜像管理 新说明 MaxCompute提供镜像管理功能，内置数据分析、科学计算、机器学习（如Pandas、Numpy、Scikit-learn、Xgboost）等各类常用镜像，并已对镜像进行预先加热，您可在SQL UDF、PyODPS开发等场景中直接...
集群概述
软件 E-HPC提供了业界主流的科学计算应用、编译器运行时库、MPI通信库等软件，您可以根据需求安装使用。更多信息，请参见 软件概述。集群状态 创建中：集群创建初始状态，对应ECS实例创建。安装中：集群处于安装软件状态。初始化中：集群...
2024年
您可以以更熟悉、高效、便捷的方式利用MaxCompute的海量计算资源及数据进行大规模数据处理、可视化数据探索分析及科学计算、ML/AL开发等工作。MaxFrame功能介绍和使用说明请参见 MaxFrame概述。您有任何相关问题或需要协助，可以通过您的专...
新用户免费试用
计算巢 Hologres PAI RDS实时同步至Hologres 了解使用DataWorks数据集成+Hologres构建实时数仓的思路，学习实时数仓中Hologres的加速查询功能和大屏展示效果。Hologres DataWorks（可选）DataV Flink+Hologres实时数据大屏 了解搭建实时数...
基于Flink+Hologres搭建实时数仓
本文介绍如何通过实时计算Flink版和实时数仓Hologres搭建实时数仓。背景信息 随着社会数字化发展，企业对数据时效性的需求越来越强烈。除传统的面向海量数据加工场景设计的离线场景外，大量业务需要解决面向实时加工、实时存储、实时分析的...
消费-搭建监控系统
搭建storm实时计算系统 选择storm或者其他的类型的实时计算系统，配置计算规则，选择要计算的监控指标，计算结果写入到OTS中。展示监控信息 通过读取保存在OTS中的监控数据，在前端展示；或者读取数据，根据数据结果做报警。
基于Flink+Paimon搭建流式湖仓
本文为您介绍如何通过实时计算Flink版和流式数据湖仓Paimon搭建流式湖仓。背景信息 随着社会数字化发展，企业对数据时效性的需求越来越强烈。传统的离线数仓搭建方法论比较明确，通过定时调度离线作业的方式，将上一时段产生的新鲜变更并入...
SGE集群支持
批量计算支持自动化搭建 Sun Grid Engine（SGE）集群。批量计算使用的是 CentOS 自带的 SGE 版本，请参考 SGE。批量计算提供了名为 BatchCompute SGE 的公共镜像，使用该镜像可快速、可靠的构建 SGE 集群，具体的流程如下：请在 云市场 ...
实践教程概览
使用Schrodinger软件计算分子结构 Schrodinger基于物理学的计算平台，集成了用于预测建模、数据分析的差异化解决方案，以实现对化学空间的快速探索，主要应用于药物发现，以及航空航天、能源、半导体和电子显示器等不同领域的材料科学。...
混合云主控模式最佳实践
混合云主控模式集群的管理节点为云上新增集群的管理节点，计算节点由线下已有计算节点和云上新增计算节点组成。本文以E-HPC云上集群将线下已有计算节点纳入管理的场景为例，介绍混合云主控模式集群（SGE调度器）的部署方案。重要 本文的...
混合云代理模式最佳实践
混合云代理模式集群的管理节点为已有集群的管理节点，计算节点由已有集群计算节点和云上新增计算节点组成。已有集群可以是线下集群，也可以是云上集群。本文介绍混合云代理模式集群（SGE调度器）的部署方案。背景信息 在HPC生命科学领域，...
2021年
2021-12-30 全部地域 MaxCompute湖仓一体概述 MaxCompute支持渐进式计算 MaxCompute支持渐进式计算，在处理数据过程中按照一定时间颗粒度自动按时间分区保存处理过程中的中间结果数据，在下一个周期执行时可以重复使用上周期已经计算好的...
异构计算产品最佳实践概览
本文为您汇总了异构计算产品的最佳实践，您可以根据自身业务场景选择查看。GPU云服务器 搭建Linux环境License Server 使用GRID驱动必须申请相应的License，同时需要将License部署在License Server上，本教程以Ubuntu 18.04操作系统为例，...
常见问题
[视觉计算服务]适用于哪些用户场景，解决哪些问题？序号 用户场景 解决问题 1 视频监控在民警侦查办案、治安防控中扮演着越来越重要的角色，但肉眼看视频费时费力，很多小案件因为看视频成本太高而被放弃 如何提升民警用视频侦查办案的效率...
2022年
基于MaxCompute的智能推荐解决方案 基于MaxCompute+开放搜索的电商、零售行业搜索开发实践 基于MaxCompute+PAI的用户增长方案实践 基于MaxCompute的实时数据处理实践 基于MaxCompute分布式Python能力的大规模数据科学分析 基于MaxCompute+...
基于GraphCompute快速搭建好友推荐图应用
为了方便用户能够熟悉图计算服务GraphCompute，我们提供一份完整的Demo数据、查询Query和文档指南，帮助用户快速搭建一个图计算应用，并提供百万级别数据量的多度好友关系查询&分析能力。图计算是什么？图计算服务（GraphCompute）基于阿里...
Flink Python作业快速入门
本文带您快速体验Flink Python流作业和批作业的创建、部署和启动，以了解实时计算Flink版Python作业的操作流程。前提条件 如果您使用RAM用户或RAM角色等身份访问，需要确认已具有Flink控制台相关权限，详情请参见 权限管理。已创建Flink...
阿里云携手深势科技，助力泓博医药加速药物研发
深势科技是“AI for Science”科学研究范式的引领者和践行者，致力于运用人工智能和分子模拟算法，结合先进计算手段求解重要科学问题，为生物医药、能源、材料和信息科学与工程研究，打造新一代微尺度工业设计和仿真平台。过去，深势科技...
公告
计算成本优化功能在原计算资源优化功能（对 包年包月一级Quota 类型的计算资源生成更优的资源配置方案）的基础上增加支持查看使用 按量付费计算资源 调整为使用 包年包月计算资源 的资源配置推荐方案及效果推演，帮助您进一步优化计算成本...
新企业用户活动
图计算GraphCompute针对企业用户提供POC活动，可免费享受高性能GraphCompute集群1个月。确认权益 参加活动需同时满足如下三个条件：1）阿里云中国站、国际站公有云客户，需要有阿里云官网账号 2）账户需要属于企业实名认证 3）客户属于图...
- 产品推荐
- 这些文档可能帮助您