产品架构
Shared Disk/Storage（共享存储）有一个分布式的存储集群，每个计算节点像访问单机数据一样访问这个共享存储上的数据。这种架构的存储层可以比较方便的扩展，但是计算节点需要引入分布式协调机制保证数据同步和一致性，因此计算节点的可...
文件存储CPFS
数据持久性和服务可用性 文件存储CPFS的数据持久化存储于阿里云自研的盘古分布式存储系统，支持多份数据拷贝，可以提供99.999999999%（11个9）的数据可靠性。文件存储CPFS的所有节点均为高可用设计。实现集群内秒级别的故障检测，并由CPFS...
技术面临的挑战与革新
在这样的基础架构下计算和存储耦合的架构已经变得不透明不合理，此时存储计算分离的架构的优势体现了出来，存储计算分离，分布式存储系统使用高密度，低功耗的服务器来解决存储容量的水平扩展问题，计算集群使用高主频，多CPU，大内存的...
PolarDB技术内幕
本文档介绍PolarDB云数据库的性能优点以及共享存储、物理复制和使用场景中优化的过程。背景信息 传统的关系型数据库有着悠久的历史，从上世纪60年代开始就已经在航空领域发挥作用。因为其严谨的一致性保证以及通用的关系型数据模型接口，...
PolarDB PostgreSQL版架构介绍
分布式执行加速索引创建 分布式并行执行加速多模：时空数据库 传统数据库的问题 随着用户业务数据量越来越大，业务越来越复杂，传统数据库系统面临巨大挑战，例如：存储空间无法超过单机上限。通过只读实例进行读扩展，每个只读实例独享一...
PolarDB PostgreSQL版架构介绍
加速比 TPC-H性能：和传统MPP数仓对比 分布式执行加速索引创建 分布式并行执行加速多模：时空数据库 传统数据库的问题 随着用户业务数据量越来越大，业务越来越复杂，传统数据库系统面临巨大挑战，例如：存储空间无法超过单机上限。...
PolarDB PostgreSQL版：ePQ架构详解
相较于单机并行，分布式ePQ并行充分利用了所有RO节点的计算资源和底层共享存储的I/O带宽，从根本上解决了前文提及的HTAP诸多挑战。在TPC-H的22条SQL中，有3条SQL加速了60多倍，19条SQL加速了10多倍，平均加速23倍。如图所示：测试弹性扩展...
PolarDB PostgreSQL版：ePQ架构详解
相较于单机并行，分布式ePQ并行充分利用了所有RO节点的计算资源和底层共享存储的I/O带宽，从根本上解决了前文提及的HTAP诸多挑战。在TPC-H的22条SQL中，有3条SQL加速了60多倍，19条SQL加速了10多倍，平均加速23倍。如图所示：测试弹性扩展...
推荐的挂载方式
容器网络文件系统CNFS（推荐）在容器中使用传统的NAS共享文件系统存在小文件读写延迟高，缺少容量配额的精确控制、无法恢复误删文件、缺失存储卷可观测指标等等问题。阿里云容器服务ACK的CNFS将阿里云的文件存储NAS抽象为一个K8s对象（CRD...
云存储网关
普通的文件系统如果在同一目录下存放太多文件，经常会出现问题。而OSS总的存储容量以及单个存储空间的容量均无上限。您可以在一个存储空间内存放无限量的文件，OSS自动将您的数据副本存储至同一地域的不同服务器，所有数据副本共享阿里云的...
使用NAS静态存储卷
NAS存储卷是一种可共享访问、弹性扩展、高可靠以及高性能的分布式文件系统，适用于大数据分析及共享数据等场景，您可以通过容器服务控制台或kubectl两种方式进行挂载。本文介绍如何使用阿里云NAS静态存储卷，以及如何验证持久化存储与共享...
基本概念
发起方 Initiator，分布式事务的发起方负责启动分布式事务，通过调用参与者的服务，将参与者纳入到分布式事务当中，并决定整个分布式事务是提交还是回滚。一个分布式事务有且只能有一个发起方。分组标识 用于在网关上做全局的唯一标识，...
集群容量规划
存储容量评估 存储容量评估主要考虑以下几点：副本数量：默认建议副本为0，搜索引擎基于分布式共享存储，节点宕机后，数据可以自动迁移到其它节点上提供服务，对于部分可靠性要求高的场景，可考虑设置副本数量为1。索引数据膨胀：数据一般...
设置NAS存储
文件存储 NAS（Apsara File Storage NAS）是一种可共享访问、弹性扩展、高可靠、高性能的分布式文件系统，为阿里云ECS实例、E-HPC、容器服务等计算节点提供了文件存储服务。本文介绍如何在 SAE 控制台为应用设置NAS存储。背景信息 通常情况...
产品概述
MySQL Share Nothing，分布式 公共云、专有云企业版、DBStack MySQL生态下的大规模数据、超高并发应用 PolarDB MySQL版和PolarDB PostgreSQL版 产品架构 PolarDB MySQL版 和PolarDB PostgreSQL版均为计算存储分离、共享存储的架构，...
表设计
主键设计——数据散列 为什么需要数据散列 数据散列是分布式数据系统中的通常要考虑的问题，散列的目的是让数据分布更均匀，避免热点。假设数据分布不均匀，会出现以下问题：数据写入和读取能力受限于单个分区的能力，或者是单机能力，存在...
四川农信
完成云平台 PaaS 层建设，构建分布式系统上下游生态，实现分布式云原生架构体系 实现分布式云原生架构体系，需要从技术规范、基础设施、生产力工具、组织流程等各个方面进行持续革新：建立一个面向分布式架构的开发平台和运行平台，结合...
企业版产品系列
集群中所有的数据文件都存放在共享存储（PolarStore）中，各个主节点通过分布式文件系统（PolarFileSystem）共享底层存储（PolarStore）中的数据文件。用户可以通过集群地址访问整个集群，数据库代理会自动转发SQL命令到正确的主节点。多主...
方案分析
在开源方案中，通常会在选择了关系型数据库作为存储系统的基础上，选择开源Redis，这样既能覆盖上述的几个特征，还能保证Feed流系统正常运行起来，但是也会带来一些其他问题：表格存储 Redis 存储成本 磁盘性数据库，费用比内存性的要低几...
参与者接入模式
FMT 模式 为了解决 TCC 模式的易用性问题，分布式事务推出了框架管理事务模式（Framework-managed transactions，简称 FMT）。FMT 是一种无侵入的分布式事务解决方案，该模式解决了分布式事务的易用性问题，最大的特点是易于使用、快速接入...
方案选择
使用表格存储研发的多元索引（SearchIndex）方案，则可以解决亿量级订单系统问题。表格存储具有即开即用，按量收费等特点。多元索引随时创建，是海量电商订单元数据管理的优质方案。表格存储作为面向海量结构化数据提供的Serverless表存储...
产品架构
分布式文件系统 LDFS（Lindorm DFS，也称为Lindorm文件引擎）是面向云基础存储设施设计、兼容HDFS协议的分布式存储系统，并同时支持运行在本地盘环境，以满足部分大客户的需求，向多模引擎和外部计算系统提供统一的、与环境无关的标准接口...
典型客户案例
完成云平台 PaaS 层建设，构建分布式系统上下游生态，实现分布式云原生架构体系 实现分布式云原生架构体系，需要从技术规范、基础设施、生产力工具、组织流程等各个方面进行持续革新：需要一个面向分布式架构的开发平台和运行平台，结合...
行业趋势与背景
在这种需求下，大规模分布式事务型数据库成为解决分布式系统数据存储、管理的主要方向。PolarDB-X 技术发展 产品前言 PolarDB-X 是由阿里巴巴自主研发的云原生分布式数据库，融合分布式SQL引擎DRDS与分布式自研存储X-DB，基于云原生一体化...
数据卷概述
支持 不支持 NAS NAS是阿里云提供的一种可共享访问、弹性扩展、高可靠以及高性能的分布式文件系统。更多信息，请参见 文件存储NAS概述。NAS数据卷适用于以下场景：共享数据场景 NAS为共享存储，支持多个实例同时访问一份数据。NAS数据卷中...
存储资源
分布式存储：将数据分布到多个计算节点的存储设备上，采用分布式存储系统或数据分片的方式。这样可以分散磁盘IO负载，平衡数据访问压力，并利用多个计算节点的磁盘IO资源，提高系统的并发能力。数据压缩：对需要存储的数据进行压缩和存储...
数据分析整体趋势
以Teradata，Oracle Exadata为代表的数仓技术陆续出现，具备了较好的分布式横向扩展能力。Teradata、Exadata都是以一体机形态输出，对硬件有特定要求，整体价格昂贵，通常面向传统金融，交通，能源等大企业。随着Google等互联网企业崛起，...
附录：SOFAStack 产品目录
FMT 模式：为了解决 TCC 模式的易用性问题，分布式事务推出了框架管理事务模式（Framework-Managed Transactions，简称 FMT）。FMT 是一种无侵入的分布式事务解决方案，该模式解决了分布式事务的易用性问题，最大的特点是易于使用、快速接...
高压缩引擎（X-Engine）介绍
随着业务发展，数据库系统中会积累大量访问频率很低甚至为0的数据，这些数据的积累容易导致如下问题：历史数据和最新数据存储在同一数据库系统中，导致磁盘空间不足。大量数据共享数据库系统的内存、缓存空间、磁盘IOPS等，导致性能问题。...
基础术语
分布式事务 distributed transaction 事务的发起者、资源及资源管理器和事务协调者分别位于不同的分布式系统的不同节点之上。分支事务 action 一个分布式事务可能包含多个数据库本地事务，在分布式事务框架下，分支事务可能是一个分库上...
SDS分布式存储售后服务承诺
详细信息，请参见 阿里云SDS分布式存储售后服务承诺。
NVMe协议介绍
分布式缓存加速 NVMe共享云盘具备很高的性能、IOPS和吞吐，可以为其他中低速的存储系统提供性能加速能力。例如数据湖场景，数据湖通常基于OSS搭建，可同时被多个客户端访问，同时具备很高的顺序读吞吐、和追加写吞吐能力，但是其顺序读写...
常见问题
阿里云文件存储NAS是一个可共享访问、弹性扩展、高可靠、高性能的分布式文件系统。NAS兼容了POSIX文件接口，可支持数千台计算节点共享访问，可以挂载到弹性计算ECS、神龙裸金属、容器服务ACK、弹性容器ECI、批量计算BCS、高性能计算EHPC及...
基本概念
分布式链路跟踪 EDAS鹰眼监控系统能够分析分布式系统的每一次系统调用、消息发送和数据库访问，从而精准发现系统的瓶颈和隐患。分布式任务管理 SchedulerX 是阿里巴巴中间件团队开发的一款分布式任务调度产品。用户在应用中依赖SchedulerX-...
未来规划
架构上分布式共享存储、存储计算分离，云原生架构+Shared Nothing分布式架构，满足弹性、高可用、水平拓展的能力。数据挑战：多模，结构化与非结构化数据（多源异构数据）。结构化与非结构化数据如何融合异构处理，比如如何用向量处理引擎...
应用场景
对于传统企业的服务化转型来说，使用分布式框架不是银弹，在解决了传统的单块架构系统随着业务需求的快速变化而面临的挑战后，分布式架构也为研发和运维增加了更大的复杂度和管理成本，基于分布式框架来进行架构改造的应用和业务通常会面临...
NAS存储卷概述（ASK）
它是一种可共享访问、弹性扩展、高可靠以及高性能的分布式文件系统。NAS基于POSIX文件接口，天然适配原生操作系统，提供共享访问，同时保证数据一致性和锁互斥。它提供了简单的可扩展文件存储以供与ECS配合使用，多个ECS实例可以同时访问...
NAS存储卷概述
它是一种可共享访问、弹性扩展、高可靠以及高性能的分布式文件系统。NAS基于POSIX文件接口，天然适配原生操作系统，提供共享访问，同时保证数据一致性和锁互斥。它提供了简单的可扩展文件存储以供与ECS配合使用，多个ECS实例可以同时访问...
方案背景
表格存储作为阿里云提供的一款全托管、分布式NoSql型数据存储服务，具有【海量数据存储】、【热点数据自动分片】、【海量数据多维检索】等功能，天然地解决了数据大爆炸这一挑战；在应对数据横向、纵向扩展上能充分发挥其优势。多元索引...
应用部署在多个实例后，集群中会话如何共享？
目前EDAS尚未提供分布式Session管理的功能，您可以借助一些可以共享存储信息的缓存系统（例如：云数据库Memcache版，Redis等）进行管理。
- 产品推荐
- 这些文档可能帮助您