HDFS概述

HDFS(Hadoop Distributed File System)是一种Hadoop分布式文件系统,具备高度容错特性,支持高吞吐量数据访问,可以在处理海量数据(TB或PB级别以上)的同时最大可能的降低成本。HDFS适用于大规模数据的分布式读写,特别是读多写少的场景...

产品优势

高可用和高可靠保障,数据安全可靠 共享分布式存储的设计,彻底解决了主从(Master-Slave)异步复制所带来的备库数据非强一致的缺陷,使得整个数据库集群在应对任何单点故障时,可以保证数据零丢失。多可用区架构,在多个可用区内都有数据...

产品优势

高可用和高可靠保障,数据安全可靠 共享分布式存储的设计,彻底解决了主从(Master-Slave)异步复制所带来的备库数据非强一致的缺陷,使得整个数据库集群在应对任何单点故障时,可以保证数据零丢失。多可用区架构,在多个可用区内都有数据...

概述

存储层:自研Lizard事务系统,对接日志层,可以替换传统MySQL InnoDB的单机事务系统,分别设计了SCN单机事务系统和GCN分布式事务系统来解决这些弊端,可以满足集中式和分布式一体化的事务优化,同时 PolarDB-X 标准版基于SCN单机事务系统...

性能优化指导原则

当您构建高性能应用程序时,可将OSS作为一个大的分布式系统,而不是像传统存储服务器那样作为单个网络终端节点。您可以通过向OSS发送多个并发请求来实现最佳性能。将这些请求分散到不同的连接上,可以最大限度地利用阿里云OSS的可访问带宽...

顺德农商

解决方案 通过引入阿里“飞天”云计算操作系统分布式中间件体系 SOFAStack、分布式数据库平台 OceanBase、金融核心套件 bPaaS、mPaaS、金融数据智能平台、移动开发平台等,逐渐打造了覆盖底层 IDC 到上层移动应用在内的金融级全分布式...

文件存储CPFS

数据持久性和服务可用性 文件存储CPFS的数据持久化存储于阿里云自研的盘古分布式存储系统,支持多份数据拷贝,可以提供99.999999999%(11个9)的数据可靠性。文件存储CPFS的所有节点均为高可用设计。实现集群内秒级别的故障检测,并由CPFS...

产品架构

SOFARPC SOFARPC 是一个分布式服务框架,为应用提供高性能、透明化、点对点的远程服务调用方案。产品架构如下:核心功能:包括 core 和 core-impl 两部分,主要内容为 API 和一些扩展机制。扩展及实现:即 extension-impl 部分,主要包含了...

什么是PolarDB MySQL企业版

高可用和高可靠保障,数据安全可靠 共享分布式存储的设计,彻底解决了主从异步复制所带来的备库数据非强一致的缺陷,使得整个数据库集群在应对任何单点故障时,可以保证数据零丢失。数据多副本跨可用区部署,主节点故障后RTO。GDN集群间...

混合云存储

混合云存储包括混合云存储阵列、混合云CPFS存储、混合云分布式存储等多种形态,用户可以像使用本地存储一样使用和管理本地和云端的各种存储资源(块、文件和对象)。本地存储可以通过云缓存、云同步、云分层、云备份等方式无缝连通云存储,...

产品概述

通过云原生架构、软硬件一体化、共享分布式存储的设计,主节点和只读节点使用物理复制、RDMA网络低时延,能够快速同步数据,彻底解决了主从异步复制所带来的备库数据非强一致的问题,使得整个数据库集群在应对任何单点故障时,都可以保证...

什么是云原生数据库PolarDB分布式

高性能强一致分布式事务,PolarDB-X 采用自研的X-Paxos协议保证数据存储故障切换过程中RPO=0的基础上,使用TSO策略和分布式的MVCC能力保证了分布式事务的隔离性和一致性。分布式线性扩展,PolarDB-X 基于一致性Hash的分区策略有效地进行...

文件存储NAS

阿里云文件存储NAS是一个可共享访问,弹性扩展,高可靠,高性能的分布式文件系统。兼容POSIX文件接口,可支持上千台弹性计算ECS、容器服务ACK等计算节点共享访问,您无需修改应用程序,即可无缝迁移业务系统上云。

技术架构

PolarFS是中国内地面向DB应用设计的采用了全用户空间I/O栈的低延迟高性能分布式存储系统(参见VLDB 2018 上的文章 PolarFS:An Ultra-low Latency and Failure Resilient Distributed FileSystem for Shared Storage Cloud Database),其...

开启CNFS NAS计算端分布式缓存

CNFS文件存储计算端分布式缓存可提供多链接访问、元数据缓存、分布式数据缓存等加速能力,并提供端侧性能监控、QoS能力。本文介绍如何在ACK集群中开启CNFS NAS计算端分布式缓存,并通过分布式缓存功能加速读取数据。索引 前提条件 分布式...

开启CNFS NAS计算端分布式缓存

CNFS文件存储计算端分布式缓存可提供多链接访问、元数据缓存、分布式数据缓存等加速能力,并提供端侧性能监控、QoS能力。本文介绍如何在ACK集群中开启CNFS NAS计算端分布式缓存,并通过分布式缓存功能加速读取数据。索引 前提条件 分布式...

产品架构

共享分布式存储 多个计算节点共享一份数据,而不是每个计算节点都存储一份数据,极大降低了用户的存储成本。基于全新打造的分布式块存储(Distributed Storage)和文件系统(Distributed Filesystem),存储容量可以在线平滑扩展,不会受到...

产品架构

共享分布式存储 多个计算节点共享一份数据,而不是每个计算节点都存储一份数据,极大降低了用户的存储成本。基于全新打造的分布式块存储(Distributed Storage)和文件系统(Distributed Filesystem),存储容量可以在线平滑扩展,不会受到...

四川农信

完成云平台 PaaS 层建设,构建分布式系统上下游生态,实现分布式云原生架构体系 实现分布式云原生架构体系,需要从技术规范、基础设施、生产力工具、组织流程等各个方面进行持续革新:建立一个面向分布式架构的开发平台和运行平台,结合...

核心特性

PolarDB-X 支持集中式和分布式一体化形态,具备金融级数据高可用、分布式水平扩展、HTAP混合负载、低成本存储和极致弹性等能力。PolarDB-X 坚定以兼容MySQL开源生态,从SQL语法、事务行为、生态工具等多个维度都做了深度兼容,应用无需或者...

技术面临的挑战与革新

随着云的概念不断发展,公有云厂商使用基于网络的块存储逐步代替了单机的本地存储,在这样的基础架构下计算和存储耦合的架构已经变得不透明不合理,此时存储计算分离的架构的优势体现了出来,存储计算分离,分布式存储系统使用高密度,低...

功能特性

无缝集成 文件存储 HDFS 版 允许您就像在Hadoop分布式文件系统(HDFS)中一样管理和访问数据。文件存储 HDFS 版 SDK可在所有Apache Hadoop 2.x环境中使用,包括阿里云EMR和阿里云Flink。文件存储 HDFS 版 支持的原生文件系统语义被开发人员...

应用场景

混合分布式事务 有些系统在使用数据库保证系统内数据一致的同时,也会使用消息队列作为和其他系统间的消息传递,完成不同系统间的数据一致。例如会员注册服务和邮件发送服务,当用户注册会员成功,需要给用户发送一封邮件,告诉用户注册...

典型客户案例

完成云平台 PaaS 层建设,构建分布式系统上下游生态,实现分布式云原生架构体系 实现分布式云原生架构体系,需要从技术规范、基础设施、生产力工具、组织流程等各个方面进行持续革新:需要一个面向分布式架构的开发平台和运行平台,结合...

技术架构

架构演进理念 当前,分布式领域有3大技术方向:Sharding技术,NewSQL原生分布式技术,云原生DB技术。每种分布式都有其独特的优势和特点。PolarDB-X 1.0 的架构继承了DRDS和X-DB技术的稳定性,结合了PolarDB的云原生技术,融入了NewSQL对于...

产品架构

分布式文件系统 LDFS(Lindorm DFS,也称为Lindorm文件引擎)是面向云基础存储设施设计、兼容HDFS协议的分布式存储系统,并同时支持运行在本地盘环境,以满足部分大客户的需求,向多模引擎和外部计算系统提供统一的、与环境无关的标准接口...

概述

背景信息 Kafka是一个分布式消息队列系统,不同的数据系统可以通过Kafka Connect工具将数据流输入Kafka和从Kafka获取数据流。表格存储团队基于Kafka Connect开发了Tablestore Sink Connector。Tablestore Sink Connector会根据订阅的主题...

灾备方案

图 1.Tair 容灾架构演进 灾备方案 灾备级别 说明 单可用区高可用方案★主备节点部署在同一可用区中的不同机器上,当任一节点发生故障时,由高可用HA(High Availability)系统自动执行故障切换,避免单点故障引起的服务中断。同城容灾方案...

文件存储HDFS版

您可以像在Hadoop分布式文件系统(Hadoop Distributed File System)中管理和访问数据那样使用文件存储HDFS版。您无需对现有大数据分析应用做任何修改,即可使用具备无限容量及性能扩展、单一命名空间、多共享、高可靠和高可用等特性的分布...

灾备方案介绍

图 1.Redis容灾架构演进 灾备方案 灾备级别 说明 单可用区高可用方案★主备节点部署在同一可用区中的不同机器上,当任一节点发生故障时,由高可用HA(High Availability)系统自动执行故障切换,避免单点故障引起的服务中断。同城容灾方案...

OSS与文件系统的对比

对比项 OSS 文件系统 数据模型 OSS是一个分布式的对象存储服务,提供的是一个Key-Value对形式的对象存储服务。文件系统是一种典型的树状索引结构。数据获取 根据Object的名称(Key)唯一的获取该Object的内容。虽然您可以使用类似 test1/...

产品优势

作为行业领先的区块链数字身份管理服务,蚂蚁链分布式身份服务 DIS 具备以下优势:分布式 基于区块链构建分布式数字身份系统,摆脱了对单一中心企业的依赖,抵御故障和篡改。各生态参与方平权参与,易于生态合作。身份自主控制 打通用户...

技术架构

存储节点(Data Node,DN),主要提供数据存储引擎,基于多数派Paxos共识协议提供高可靠存储分布式事务的MVCC多版本存储,另外提供计算下推能力满足分布式的计算下推要求(比如Project/Filter/Join/Agg等下推计算),可支持本地盘和共享...

强弱依赖治理概述

强弱依赖治理的应用 强弱依赖治理主要可以被应用到以下场景:系统改造验收:对于分布式系统,至少在运行态中,不会因为依赖的系统后台出现故障,引起当前应用出现系统级可用性的故障,例如进程挂掉、频繁FullGC、负载飙高等,何时何地都应...

应用场景

对于传统企业的服务化转型来说,使用分布式框架不是银弹,在解决了传统的单块架构系统随着业务需求的快速变化而面临的挑战后,分布式架构也为研发和运维增加了更大的复杂度和管理成本,基于分布式框架来进行架构改造的应用和业务通常会面临...

概述

任务调度 TS(Task Scheduler)提供分布式任务调度框架,实现任务的分布式处理,并能规范化、自动化、可视化和集中化对金融企业不同业务系统的任务进行统一的调度和全方位监控运维管理,达到所有任务有序、高效运行的目的,极大降低开发和...

集群容量规划

存储容量评估 存储容量评估主要考虑以下几点:副本数量:默认建议副本为0,搜索引擎基于分布式共享存储,节点宕机后,数据可以自动迁移到其它节点上提供服务,对于部分可靠性要求高的场景,可考虑设置副本数量为1。索引数据膨胀:数据一般...

CPFS并行文件存储

该产品单集群最大可扩展至16384个节点,提供高性能、高可扩展性、低时延的分布式文件存储服务。可适用于自动驾驶模型训练、基因组测序数据组装和石油勘探业务分析等场景。产品优势 优势 说明 混合云存储架构 集成公共云存储服务,为Cloud ...

选择存储卷类型

阿里云 NAS 阿里云文件存储 NAS(Apsara File Storage)是面向云服务器 ECS 实例、容器服务等计算节点的文件存储服务,是一种可共享访问、弹性扩展、高可靠、高性能的分布式文件系统。它的读写性能相较于对象存储 OSS 而言较高。使用说明 ...

NVMe协议介绍

分布式缓存加速 NVMe共享云盘具备很高的性能、IOPS和吞吐,可以为其他中低速的存储系统提供性能加速能力。例如数据湖场景,数据湖通常基于OSS搭建,可同时被多个客户端访问,同时具备很高的顺序读吞吐、和追加写吞吐能力,但是其顺序读写...
共有200条 < 1 2 3 4 ... 200 >
跳转至: GO
产品推荐
云服务器 安全管家服务 安全中心
这些文档可能帮助您
对象存储 文件存储NAS 负载均衡 弹性公网IP 短信服务 人工智能平台 PAI
新人特惠 爆款特惠 最新活动 免费试用