数据科学计算概述
MaxFrame是由阿里云自研的分布式科学计算框架，是对历史相关产品功能（PyODPS、Mars）的重大升级，在MaxCompute之上提供一套完全兼容Pandas接口的API，让用户用更为熟悉、更符合Python社群习惯的方式使用MaxCompute。本文为您介绍...
存储类型
SSD云盘 SSD云盘，是基于分布式存储架构的弹性块存储设备，实现计算与存储分离。说明 SSD云盘分批下线中，建议使用ESSD云盘。更多信息，请参见【通知】部分RDS实例不再提供SSD云盘售卖。各存储类型之间的性能对比（单盘容量、最大IOPS、...
Pandas API支持
MaxFrame提供了兼容Pandas的API接口，您可以用类似于Pandas的方式来操作MaxCompute中的数据，同时利用MaxCompute强大的分布式计算能力，简化您在大数据环境下的数据处理工作，本文为您介绍Pandas API的支持情况。当前MaxFrame支持的API详情...
数据迁移
MaxCompute为您提供了完善的数据迁移方案以及多种经典的分布式计算模型，能够快速地解决海量数据存储和计算问题，有效降低企业成本。DataWorks 为MaxCompute提供一站式的数据集成、数据开发、数据管理和数据运维等功能。其中：数据集成 为...
未来规划
云计算架构的核心逻辑就是通过虚拟化技术带来池化资源，云原生数据库采用分布式数据库架构，实现大规模扩展，每套数据库系统横跨多台服务器和虚拟机，带来了全新的系统管理挑战。其中最核心的挑战就是如何实现弹性以及高可用，实现按需按量...
边缘应用相关问题
} 边缘函数计算和阿里云函数计算的区别是什么？代码托管不同：阿里云函数计算的代码运行在阿里云云服务器ECS中；边缘函数计算代码是运行在用户自己的硬件网关中。访问的目标不同：阿里云函数计算通常用于访问云服务，函数运行环境中预置了...
MaxFrame概述
MaxFrame是由阿里云自研的分布式计算框架，支持Python编程接口、兼容Pandas接口且自动进行分布式计算，同时可直接使用MaxCompute计算资源及数据接口，与MaxCompute Notebook、镜像管理等功能共同构成了MaxCompute完整的Python开发生态。...
什么是图计算服务
图计算服务Graph Compute是阿里云自主研发的高性能分布式图计算产品，为开发者提供万亿级数据规模的一站式图技术服务。Graph Compute支持复杂图关系数据的存储、查询和计算，高效对接图算法与模型，在搜索推荐广告、实时风控、知识图谱、...
2024年
2024-03-27 全部地域 镜像管理 MaxCompute分布式计算框架MaxFrame发布 MaxFrame是由阿里云自研的分布式计算框架，支持Python编程接口、兼容Pandas接口且自动进行分布式计算，同时可直接使用MaxCompute计算资源及数据接口，与MaxCompute ...
行业趋势与背景
基于这些技术探索和沉淀，我们开始思考基于云架构的分布式数据库应该是什么样的形态。从用户角度来看，需要满足用户使用云的一些期望，比如用户的数据库数据永远不会丢，即使主机异常宕机，这里需要有数据强一致以及高可用容灾等能力；比如...
概述
消息队列 SOFAStack 消息队列是基于 Apache RocketMQ 构建的分布式消息中间件，并与金融分布式架构 SOFAStack 深度集成，为分布式应用系统提供异步解耦和削峰填谷的能力，支持事务消息、顺序消息、定时消息等多种消息类型，并具备高可靠、...
产品架构
图计算服务（GraphCompute）一站式图计算解决方案，通过高性能的分布式图计算引擎，提供万亿数据规模下搜推、实时风控、复杂图关系的查询和分析。结合阿里巴巴在电商、安全和社交等多个行业领域的积累，为全球企业及开发者提供图技术服务
企业版产品系列
计算与存储分离 采用计算与存储分离的架构，满足公共云计算环境下根据业务发展弹性扩展集群的刚性需求。数据库的计算节点仅存储元数据，而将数据文件、Redo Log等存储在共享分布式存储（PolarStore）的数据库存储节点中。各计算节点之间仅...
技术面临的挑战与革新
云计算下如何平衡扩展性和稳定性SLA 云计算环境下，企业和个人通过开启云服务，即可以得到所需的软件功能、计算资源、存储空间，并按实际使用量付费。在业务量逐步上涨的过程中，用户需要不断提升计算和存储资源来满足业务需要。因此，扩展...
常见问题
您可以用顺序、选择、并行等方式来编排分布式任务，云工作流 会按照设定好的步骤可靠地协调任务执行，跟踪每个步骤的状态转换，并在必要时执行用户定义的重试逻辑，以确保工作流顺利完成。云工作流 通过提供日志记录和审计来监视工作流的...
开源支持
Mars Mars是一个基于张量的统一分布式计算框架。使用Mars进行科学计算，不仅使大规模科学计算任务的实现从MapReduce上的数千行代码降低到Mars上的数行代码，更在性能上有大幅提升。Mars已经在Github上开源代码，您可以一起参与共建Mars。...
引擎简介
Lindorm计算引擎是一款基于 云原生多模数据库 Lindorm 核心能力实现的数据库内 高性能、低成本、稳定可靠 的分布式计算服务，满足用户在 云原生多模数据库 Lindorm 支撑场景下的数据生产、交互式分析、机器学习和图计算等场景中的计算需求...
什么是PolarDB MySQL企业版
计算与存储分离 PolarDB 采用计算与存储分离的设计理念，满足公共云计算环境下根据业务发展弹性扩展集群的刚性需求。数据库的计算节点（Database Engine Server）仅存储元数据，而将数据文件、Redo Log等存储于远端的存储节点（Database ...
阿里云异构计算产品总览
阿里云异构计算产品为您提供了软件与硬件结合的完整服务体系，助力您在人工智能业务中实现资源的灵活分配、弹性扩展、算力的提升以及成本的控制。什么是异构计算 异构计算（Heterogeneous Computing）是指使用不同类型指令集和体系架构的...
2024年
MaxFrame是由阿里云自研的分布式计算框架，支持Python编程接口、兼容Pandas接口且自动进行分布式计算，同时可直接使用MaxCompute计算资源及数据接口，与MaxCompute Notebook、镜像管理等功能共同构成了MaxCompute完整的Python开发生态。...
什么是阿里云实时计算Flink版
在稳定性上，服务分布式集群计算无单点，保障高可用。在功能上，提供数十种作业指标监控和一站式开发界面，支持SQL作业调试，支持作业运行期间智能调优。提供了丰富的数据实时入湖入仓和实时风控场景能力。在使用过程中，已有开源Flink任务...
序言
我们把这套金融级云原生的分布式架构解决方案，称之为 SOFAStack™（Scalable Open Financial Architecture Stack），源于自蚂蚁内部沉淀十多年的金融级分布式中间件技术体系，吸收了支付宝自创立以来在关键金融交易系统锤炼出来的架构实践...
什么是PolarDB PostgreSQL标准版
ESSD云盘采用多副本的分布式机制，具有低延时、高性能、持久性、高可靠等特点。ESSD云盘是阿里云全新推出的超高性能云盘产品。ESSD云盘基于新一代分布式块存储架构，结合25 GE网络和RDMA技术，为您提供单盘高达100万的随机读写能力和更低的...
典型客户案例
完成农信支付中台等 4 个代表性业务的分布式应用改造上云，借用 PaaS 平台能力与云下传统架构系统对接，平稳地支持过渡期多框架形态下的业务正常生产。客户收益 借助金融 PaaS 平台落地，浙江农信完成全方位的分布式架构转型。满足金融网络...
什么是神行工具包（DeepGPU）
神行工具包主要包括以下组件：什么是Deepytorch Training（训练加速）什么是Deepytorch Inference（推理加速）什么是AI通信加速库Deepnccl 什么是推理引擎DeepGPU-LLM AI分布式训练通信优化库AIACC-ACSpeed 计算优化编译器AIACC-AGSpeed ...
跨机并行查询
PolarDB PostgreSQL版（兼容Oracle）提供了跨机并行查询（Parallel Execution）的功能，支持多个计算节点分布式地执行SQL查询，加速 PolarDB PostgreSQL版（兼容Oracle）的分析型查询性能，充分发挥存储层PolarFileSystem的高I/O吞吐能力，...
技术架构
高兼容 PolarDB-X 1.0 主要兼容MySQL，包括SQL、函数类型等，技术上引入全局时间授时服务，提供全局一致性的分布式事务能力，通过TSO+2PC提供数据库完整的ACID能力，满足分布式下的Read-Commited/Repeatable-Read的隔离级别。同时在分布式...
基本概念
J 计算引擎 与Lindorm存储引擎深度融合，基于云原生架构提供的分布式计算服务，满足用户在数据生产、交互式分析、机器学习和图计算等场景的计算需求，兼容开源Spark标准接口。更多信息，请参见 计算引擎介绍。JDBC Java Database ...
块存储概述
充分满足以Hadoop为代表的分布式计算业务类型对ECS实例存储性能、存储容量和内网带宽的多方面要求。说明 本文主要描述当前与ECS实例一起销售的本地盘的信息。有关本地SSD型实例规格和大数据型实例规格的性能详情，请参见 实例规格族。有关...
什么是GPU云服务器
工具名称 说明 神龙AI训练加速引擎AIACC-Training（AIACC训练加速）阿里云自研的分布式训练任务AI加速器，可以显著提升训练性能。神龙AI推理加速引擎AIACC-Inference（AIACC推理加速）阿里云自研的推理AI加速器，可以显著提升推理性能。AI...
数据分析整体趋势
以Teradata，Oracle Exadata为代表的数仓技术陆续出现，具备了较好的分布式横向扩展能力。Teradata、Exadata都是以一体机形态输出，对硬件有特定要求，整体价格昂贵，通常面向传统金融，交通，能源等大企业。随着Google等互联网企业崛起，...
产品概述
什么是PolarDB PolarDB 是阿里巴巴自研的新一代云原生数据库，在计算存储分离架构下，利用了软硬件结合的优势，为用户提供具备极致弹性、高性能、海量存储、安全可靠的数据库服务。100%兼容MySQL和PostgreSQL生态，高度兼容Oracle语法。...
流式数据通道概述
MaxCompute流式数据通道服务提供了以流式的方式把数据写入MaxCompute的能力，使用与原批量数据通道服务不同的一套全新的API及后端服务。流式服务在API上极大简化了分布式服务的开发成本，同时解决了批量数据通道在高并发、高QPS（Queries-...
四川农信
实现从应用到数据的分布式多活架构 四川农信建成的下一代 IT 架构，要对标行业内的先进实践，并保证架构的持续迭代和进化能力，目前来看，需要实现“两地三中心异地多活”，多活机制覆盖从接入层、应用层到数据层，在接入层建立相应的流量...
产品概述
在 PolarDB-X 1.0 层面DB-X计算层面实现分布式逻辑，最终得到一个具有稳定可靠、高度扩展性的分布式关系型数据库系统。相比于全自研分布式NewSQL数据库，PolarDB-X 1.0 产品始终以持续稳定性和可运维性作为第一要务，同时通过标准数据库...
什么是PolarDB MySQL标准版
ESSD云盘采用多副本的分布式机制，具有低延时、高性能、持久性、高可靠等特点。ESSD云盘是阿里云全新推出的超高性能云盘产品。ESSD云盘基于新一代分布式块存储架构，结合25 GE网络和RDMA技术，为您提供单盘高达100万的随机读写能力和更低的...
基于Flink的资讯场景实时数仓
部署架构图 选用的产品 云消息队列 Kafka 版 云消息队列 Kafka 版 是阿里云基于Apache Kafka构建的高吞吐量、高可扩展性的分布式消息队列服务，广泛用于日志收集、监控数据聚合、流式数据处理、在线和离线分析等，是大数据生态中不可或缺的...
产品架构
计算引擎 计算引擎 是基于云原生架构提供的分布式计算服务，计算节点运行在阿里云Serverless Kubernetes（简称ASK）容器服务中。计算引擎支持社区版计算模型以及编程接口，同时深度融合Lindorm存储引擎特性，充分利用底层数据存储特征以及...
PingCAP与阿里云计算巢联合方案深度解析：数据库软件...
本文介绍了PingCAP与阿里云计算巢联合方案。把复杂留给自己，把简单留给用户一直是阿里云坚持的产品理念。企业级开源分布式数据库厂商PingCAP创始人兼CEO刘奇也曾说：“PingCAP未来仍将坚持做好一件简单的事情，那就是让数据库回归本来的...
实例介绍
PolarDB-X 1.0 由计算层与存储层资源构成，计算层是由多个计算节点所组成的分布式集群，业务数据存储在下挂的多个 私有定制RDS 实例中。目前售卖的 PolarDB-X 1.0 皆为专享实例，其中包括主实例和只读实例。主实例 PolarDB-X 1.0 主实例...
- 产品推荐
- 这些文档可能帮助您