华为分布式存储技术与应用实践

合集下载

大数据分布式存储工程师实习工作总结

大数据分布式存储工程师实习工作总结

大数据分布式存储工程师实习工作总结一、引言在本次实习中,我作为一名大数据分布式存储工程师实习生,在公司的指导下,参与了多个项目的开发和实施。

通过实习,我深入了解了大数据分布式存储的原理和技术,并通过实际操作提升了自己的技能和经验。

本文将对我在实习期间所从事的工作进行总结和归纳。

二、项目一:搭建大数据存储平台在项目一中,我负责搭建公司的大数据存储平台,采用了分布式文件系统HDFS和列式数据库HBase。

首先,我通过学习和研究相关文档,了解了HDFS和HBase的工作原理和基本使用方法。

然后,我按照实际需求,设计了存储平台的架构,并进行了系统的搭建和配置。

同时,我也负责解决平台搭建过程中的各种问题,例如网络配置、权限管理等。

最后,我对平台进行了性能测试和优化,确保了其稳定性和高可用性。

三、项目二:数据备份与恢复在项目二中,我参与了公司的数据备份与恢复工作。

首先,我对已有的备份系统进行了调研和分析,了解了其优缺点及存在的问题。

然后,我根据需求提出了新的备份方案,并进行了系统设计和实施。

在整个过程中,我使用了分布式存储技术,保证了备份数据的高可用性和可靠性。

同时,我也负责监测备份系统的运行状态,并及时处理发现的问题,确保了备份和恢复的效果。

四、项目三:容灾系统建设在项目三中,我参与了公司的容灾系统建设工作。

首先,我对已有的容灾方案进行了评估和分析,并发现了其中的问题和隐患。

然后,我重新设计和实施了容灾系统,使用了分布式存储技术和备份方案,提高了系统的稳定性和可靠性。

同时,我也负责容灾系统的监测和维护工作,保证了系统的正常运行。

在整个项目中,我学习了容灾技术和方法,并通过实际操作提升了自己的技能和经验。

五、项目四:性能优化与调优在项目四中,我参与了公司的性能优化与调优工作。

首先,我通过对系统的性能数据进行分析和监测,了解了系统的瓶颈和性能问题。

然后,我提出了性能优化方案,并进行了系统的调整和优化。

在整个过程中,我注重数据的分布式存储和读写性能的提升,通过调整系统参数和优化代码,达到了显著的性能改进效果。

云计算中的分布式存储技术研究与应用

云计算中的分布式存储技术研究与应用

云计算中的分布式存储技术研究与应用一、引言随着互联网技术的迅猛发展,大数据时代已然来临,大量数据的存储和处理已经成为了企业发展的重要战略之一。

而云计算技术作为当下互联网技术的代表,为企业提供了高效、可靠、安全的数据存储和处理方案。

分布式存储技术是云计算技术的核心之一,本文将从理论与实践两个角度,探讨云计算中的分布式存储技术研究与应用。

二、分布式存储技术的基本架构分布式存储技术是一种通过将数据分散存储在多个物理设备上,实现数据冗余备份、提升数据处理性能、保证存储可靠性的存储技术。

分布式存储技术的核心思想是将数据分散存储在多个节点上,从而实现数据的可靠性和高性能处理。

分布式存储技术的基本架构可以分为以下几个部分。

1、分布式文件系统分布式文件系统是分布式存储技术的核心组成部分,它负责管理分布在不同节点上的文件和文件系统元数据。

分布式文件系统有许多成熟的开源实现,如Hadoop Distributed File System、Google File System等。

2、分布式存储服务分布式存储服务是构建分布式存储系统的关键,它通过提供数据访问接口、数据备份和复制、数据恢复等功能,为上层应用程序提供数据存储服务。

常用的分布式存储服务包括Amazon S3、Azure Blob Storage等。

3、分布式存储节点分布式存储节点是存储分散在多个设备上的数据的物理节点,每个节点都可以是一个计算机、一个存储设备或者一个存储设备和计算机的组合体。

分布式存储节点的数量可以根据系统需求进行增减。

4、数据管理与负载均衡数据管理与负载均衡是分布式存储系统的重要组成部分,它们负责将数据均衡分布在不同的存储节点上,降低节点的负载,提升系统稳定性和处理性能。

三、分布式存储技术的研究和发展分布式存储技术的诞生可以追溯到上个世纪90年代初期,当时研究人员开始尝试将文件分布在多台计算机上,以提高数据访问速度和可靠性。

到了21世纪,随着云计算技术的兴起和应用需求的增加,分布式存储技术得到了迅猛发展。

云计算中的分布式储存技术与应用

云计算中的分布式储存技术与应用

云计算中的分布式储存技术与应用随着互联网的快速发展,我们生活中面对的数据量越来越大。

这让存储成为了互联网发展的一个重要问题。

分布式储存技术,尤其是云计算的分布式储存技术因此得到了越来越广泛的应用和关注。

本文将从分布式储存的概念、云计算中的分布式储存技术的发展、优势、应用及其实现原理等方面讨论云计算中的分布式储存技术以及它在互联网信息化时代中的重要作用。

一、分布式储存的概念分布式储存,顾名思义,是指把数据分散存放在多个不同的物理节点上。

每个节点都可以独立运行并保有一部分数据。

由于数据分成多个部分存储在不同的地方,所以该系统对于单点故障和数据损失具有很好的容错性。

二、云计算中的分布式储存技术的发展随着云计算的发展,传统的单节点储存方式已不能满足现代互联网应用的需求。

分布式储存技术因此得到了广泛的应用。

目前,市场上主流的云计算服务提供商都提供了分布式储存服务。

例如,著名的S3服务就是亚马逊AWS提供的分布式储存服务,而Google Cloud的分布式储存服务则名为Google Cloud Storage。

三、云计算中的分布式储存技术的优势1.高可用性:分布式储存技术通过将数据分布在多个节点上,实现了数据的冗余备份,保证系统在物理节点故障时不会因此影响到系统的正常使用。

2.高扩展性:采用分布式储存技术的系统可以通过增加节点来扩展存储容量,这种方式相对来说更为经济实惠。

3.高性能:由于数据分散在多个节点上,分配给不同的处理单元进行处理,因此在某些情况下分布式储存技术可以比传统存储技术更具优势。

4.数据安全:分布式储存技术让数据存在于不同的地点,因此对于数据的安全性以及对攻击和用户误操作等情况的容错性有一定的保障作用。

同时,在分布式储存系统中,数据使用加密技术加密存储,可以有效地防止数据的泄露。

四、云计算中的分布式储存技术的应用云计算中的分布式储存技术广泛应用于各种应用场景,如存储、备份、互联网数据中心(IDC)、企业级云解决方案、在线视频等。

分布式存储技术及其应用

分布式存储技术及其应用

分布式存储技术及其应用一、引言分布式存储技术在当今互联网时代得到了广泛的应用,最初应用于大型网站、互联网公司及数据中心等领域。

它是一种新型的存储技术,相比于传统的集中式存储技术有着很大的优势。

本文将分别从分布式存储技术的概念,技术特点,分类以及应用领域等方面进行深入浅出的介绍。

二、分布式存储技术的概念分布式存储技术是将数据分散存储在多个节点上的一种技术。

与传统的集中式存储技术相比,它的优势在于可以实现数据的高可用性、高可靠性以及横向扩展等功能。

当其中某个节点崩溃后,系统仍然可以继续运行,这种弹性不仅可以提高数据存储的可靠性,还能够大大提高系统的性能与可扩展性。

三、分布式存储技术的技术特点1. 高可用性:分布式存储技术可以实现数据的镜像备份,即将数据同时存储在多个节点上,一旦其中某一个节点发生故障,系统也可以从其他节点上恢复数据存储。

2. 高可靠性:分布式存储技术可以利用多个节点进行数据的存储和备份,从而实现数据的冗余存储,一旦其中某一个节点出现故障,系统可以从其他节点上恢复数据,从而保证数据的完整性和安全性。

3. 弹性扩展:随着数据量的不断增加,分布式存储技术可以根据实际情况增加节点数,实现数据的“横向扩展”,从而提高系统的可扩展性。

4. 高数据处理能力:分布式存储技术可以将数据分散存储在多个节点上,每个节点都具有数据处理的能力,可以通过负载均衡技术,将数据均匀分配到各个节点上并行处理,从而提高系统的处理能力。

四、分布式存储技术的分类1. 文件系统:Infiniband、Interconnect、GPFS等,具有高效率、可扩展性强等优点。

2. 分布式对象存储:Ceph、Swift、HDFS等,多用于云存储和大规模数据中心。

3. 分布式块存储:Gluster、DRBD等,常见于虚拟化环境中。

五、分布式存储技术的应用领域1. 互联网公司:分布式存储技术可以为互联网公司提供海量的数据存储,快速响应和高可靠性的服务支持;2. 科研领域:分布式存储技术可以为科研领域提供高效的分布式计算服务,支持海量数据分析和处理;3. 视频监控领域:分布式存储技术可以为视频监控领域提供高可靠性的数据存储和备份支持,以及快速的数据检索和回放服务。

DTCC2014:华为分布式存储技术与应用实践_IT168文库

DTCC2014:华为分布式存储技术与应用实践_IT168文库
制协议;及在单节点故障时,集群故障自愈与
E9000计算、存储融合刀片式服务器
硬件 设备层
并行数据重建子系统
PCI-E SSD卡
X86 CPU
SAS/SATA IB
硬件设备层:
基于E9000计算、存储融合刀片式服务器,无
需外置SAN,支持IB高速交换、PCI-E SSD卡
9
Page 9
FusionStorage 基本原理-卷映射
3
18
华为FusionCube数据仓库加速解决方案
高性能、低成本的基础设施平台,混搭架构,可灵活应对不同应用负载
大数据和MPP DB 内存数据库 传统数据仓库 数据库整合 ETL、建模、分析
FusionInsight
Oracle
SQL Server
• 海量数据非结构化
Leader
MDC MDC MDC
• 全分布式架构,水平扩展 :无状态机头层,
每个机头可以平滑添加与减少; • 无状态分布式存储引擎: 可以水平扩展单
状态控制路径
板、磁盘
状态控制路径
• 计算、存储全融合架构,超高性能:
Cache更大,不再受到传统SAN机头限制
SCSI/iSCSI
SCSI/iSCSI

大容量: 最大96块盘,提升超大存储空间,避免高IO应用导致热点瓶颈 动态热备:所有硬盘都可用作资源池的热备盘 简单结构:资源池、Volume二层结构,没有LUN结构,服务器直接看到Volume
10
FusionStorage 分布式软件架构
基于PAXOS机制的高 可靠、大规模存储集 群总控MDC集群
全宽单槽位
计算节点
电源模块 风扇模块 管理模块

华为FusionStorage技术建议书分布式存储

华为FusionStorage技术建议书分布式存储

华为FusionStorage分布式存储技术建议书Huawei Technologies Co., Ltd.华为技术有限公司All rights reserved版权所有侵权必究Revision record 修订记录//在提供给客户前需删除本页“修订记录”。

本文档只是供内部参考使用,禁止将本文档原封不动发给客户或代理商。

请结合实际项目需要进行必要增删调整。

Table of Contents 目录Revision record 修订记录....................................... Table of Contents 目录.......................................1 项目概述..................................................1.1 项目背景 ..................................................1.2 项目需求 ..................................................1.3 功能需求 ..................................................2 项目技术方案..............................................2.1 FusionStorage总体架构 .....................................2.2 FusionStorage优点概述 .....................................2.3 FusionStorage应用场景 .....................................2.3.1 FusionStorage与FusionSphere融合场景...............2.3.2 FusionStorage与VMware融合场景.....................2.3.3 FusionStorage与OpenStack融合场景..................3 FusionStorage应用中典型硬件平台...........................3.1 FusionStorage在机架式服务器上使用 .........................3.2 FusionStorage在刀片式服务器上使用 .........................4 FusionStorage应用中网络设计方案...........................4.1 总体组网方案 ..............................................4.2 在机架式服务器上使用组网方案 ..............................4.2.1 单柜10GE组网......................................4.2.2 单柜IB存储组网....................................4.3 在刀片服务器上使用组网方案 ................................4.3.1 虚拟化10GE 刀片服务器组网.........................4.3.2 虚拟化IB+SSD组网..................................5 服务器数量规划............................................5.1 FusionStorage按容量和性能计算服务器数量 ...................6 FusionStorage产品特性介绍.................................6.1 性能卓越 ..................................................6.2 高可靠 ....................................................6.3 弹性扩展 ..................................................6.4 管理简便 ..................................................6.5 兼容性 ....................................................7 FusionStorage典型应用案例.................................7.1 浙江电信选择FusionStorage建设存储资源池 ...................7.2 华为公司计算云-单资源池5K VM ..............................7.3 FusionStorage帮助江苏移动CRM系统建设高性能数据库平台 ......7.4 华为携手沃达丰打造分布式数据中心 ..........................7.5 华为FusionStorage助力深圳海关加速大数据分析 ...............7.6 FusionStorage:汇港资讯高效证券交易数据发布云平台建设 .....7.7 华为FusionStorage助力BME高效交付股票交易系统 ..............8 系统软硬件配置清单及说明..................................8.1 软件配置 ..................................................8.2 硬件配置 ..................................................9 缩略语....................................................1项目概述1.1 项目背景XXX单位准备采用虚拟化与云计算技术来构建IT系统,提升IT系统的资源利用率,但是传统SAN在企业基础设施池化、云化中面临的主要问题:存储资源弹性问题:多业务负载、资源的动态需求变化存储扩展的问题:共享、扩展面临了诸多的瓶颈和问题(机头、前后端网络、CPU/Cache与HDD不同步问题)形态和实施的成本、复杂性问题:独立的存储网络,建设成本高、实施复杂(初始实施、扩减容等)容错和可靠性问题:大规模集群中容忍的故障域问题(跨机柜、跨机房),硬盘重建时间长问题针对上述问题,建议使用FusionStorage 分布式存储产品解决上述问题,为满足业务平台日益增长的存储需求,为业务平台提供高安全性、高可靠性、高可用性和开放性的存储服务。

分布式存储技术及应用介绍

分布式存储技术及应用介绍

分布式存储技术及应用介绍分布式存储技术是指将数据分散存储在多个节点(服务器)上的一种存储方式。

它能够提供高可靠性、高扩展性和高并发性,因此在大规模数据存储和多用户访问的场景下被广泛应用。

下面将介绍几种常见的分布式存储技术及其应用。

1.分布式文件系统分布式文件系统是一种能够在多台独立的计算机上存储和访问文件的系统。

它将文件分割成多个块,并将这些块分散存储在多个节点上。

用户可以通过统一的文件路径来访问分布式文件系统中的文件,而不需要关心文件所存储的具体位置。

分布式文件系统常用的开源实现包括HDFS (Hadoop Distributed File System)和Ceph。

应用:分布式文件系统广泛应用于大数据领域,可以用于存储海量的数据文件,同时支持高并发访问。

例如,HDFS被广泛应用于Hadoop生态系统中,用于存储和处理大规模的数据集。

2.分布式对象存储分布式对象存储是一种将对象以键值对的形式存储在多个节点上的存储方式。

每个对象都有一个唯一的标识符,并且可以通过该标识符进行读写操作。

分布式对象存储系统通常提供高可靠性和高可用性,可以通过数据冗余和自动容错机制来保证数据的安全性和可靠性。

常见的分布式对象存储系统有OpenStack Swift和Amazon S3应用:分布式对象存储常用于存储海量的非结构化数据,例如图片、视频、日志等。

它可以提供高并发的访问能力,并且支持自动扩展存储容量。

例如,Amazon S3被广泛应用于云存储服务中,提供了安全、可靠的存储和访问服务。

3.分布式块存储分布式块存储是一种将数据以块的形式存储在多个节点上的存储方式。

每个块都有一个唯一的标识符,并且可以通过该标识符进行读写操作。

分布式块存储系统通常提供高性能和高容量的存储能力,可以通过数据冗余和数据分片技术来提高数据的可靠性和可用性。

常见的分布式块存储系统有Ceph和GlusterFS。

应用:分布式块存储常用于虚拟化环境中,提供虚拟机镜像的存储和访问。

分布式存储技术在数据备份中的应用实践

分布式存储技术在数据备份中的应用实践

分布式存储技术在数据备份中的应用实践随着互联网信息化程度的不断加深,人们的生活已经离不开数据了。

然而,数据的安全备份已经成为了人们不可忽视的问题。

因为数据的丢失对于企业和个人来说都是极其严重的后果。

对于企业来说,丢失数据往往会导致业务流程的中断,甚至引起巨额经济损失。

对于个人来说,数据的丢失不仅仅是意义上的蒙受损失,更可能会严重影响个人的安全和隐私。

因此,对数据的安全备份显得尤为重要。

为了保障数据的安全备份,相信许多人都听说过RAID技术和防止单点故障技术,而在业内人士中,分布式存储技术被更多的人广泛关注和应用。

分布式存储技术是指将数据分别存储在多个节点上,并通过网络进行连通的一种数据存储方案。

在应用实践中,分布式存储技术的数据冗余备份和数据扩展能力不仅是防止数据丢失的重要手段,更可以实现数据的快速定位和恢复。

数据存储方案的架构设计和实现方式对于分布式存储技术的应用具有决定性的影响。

具体地说,数据存储方案的架构设计应该满足数据高可用、数据持久性、数据等同性、数据一致性等基本要求,并合理考虑数据的访问模式和数据分布的特殊性。

而实现方式则主要包括了数据的需要的加密存储和技术架构的选用等。

对于分布式存储技术的应用,传统的数据备份仅仅保留了数据的一个性质,即数据的备份可以和源数据存放在同一台服务器上,同时备份的方式和源数据也相似,这样的方式会导致单个节点的存储空间越来越紧张,且故障率不可避免式地增加。

相比之下,分布式存储技术在数据备份中的应用会将数据切分成更小的数据块,并分别存储在多个节点上。

这种方式在效率和安全上的优势也比传统的数据备份方式更加明显。

另外,由于分布式存储技术可以方便地实现数据备份的访问控制和敏感数据的加密存储,这种技术无疑也能更好地保护数据的安全性。

使用密钥进行加密,可以让数据的备份只能由具有正确密钥的人来进行访问,保证企业数据在备份过程中不被非法窃取或在备份期间遭受病毒攻击等安全备份方面的危险。

  1. 1、下载文档前请自行甄别文档内容的完整性,平台不提供额外的编辑、内容补充、找答案等附加服务。
  2. 2、"仅部分预览"的文档,不可在线预览部分如存在完整性等问题,可反馈申请退款(可完整预览的文档不适用该条件!)。
  3. 3、如文档侵犯您的权益,请联系客服反馈,我们会尽快为您处理(人工客服工作时间:9:00-18:30)。
Server Server Server
资源池1
资源池2
Volume1
Volume2
Volume3
Volume10
Volume12
P1
P2
资源池1
P3 P1 P6
P2
资源池2
P3

P4
P5
资源池1
资源池1
P7
P8
P9
Disk
Disk
Disk
Disk
Disk
Disk
资源池: 类似于SAN的RAID组概念,与RAID相比,其优点是:
备份
存储服务层:提供各种存储高级特性,如快照、 链接克隆、精简配置、分布式cache、容灾备 份等
存储 管理
存储 服务层
存储引擎层: FusionStorage存储基本功能,包括MDC总控
存储 引擎层
MDC状态控制 DHT数据分布
强一致性复制协议
并行数据重建
集群故 障自愈
集群、DHT数据路由、分布系统、强一致性复
服务器 /小机
Group Join
SAN
读 瓶颈
全表扫描,瓶颈在于磁盘 IO
星型/雪花型模型
数据仓库主要的瓶颈是计算和存储节点torage主要特点
主要特点
计算网络(10GE)/IB/FOCE Server1 App App Server2 App App Server3 App App
SSD
更低
• 数据重建快:并行重建,重建数据量小 • 管理简单:结构简单带来管理简单
FusionStorage 分布式存储系统
8
FusionStorage 总体架构
存储 驱动层
SCSI驱动/iSCSI
分布式链接克隆 分布式快照 分布式精简配置 容灾 分布式Cache
存储接口层:
通过SCSI驱动接口向操作系统、数据库提供卷
• 强一致性复制协议: 应用程序写入一份数据时,如果成功,
Cache
SSD HDD
Cache
SSD
后端的一份或多份副本必然一致,再次读时,无论从哪个副 本都可读到正确的数据; • 数据高可用: 可以跨服务器或跨机柜分布数据,不会因某个
服务器、或者某个机柜故障导致数据不可访问;
14
高可靠——并行、快速数据重建
VBS
VBS

SCSI/iSCSI
Disk1
Disk2
VBS
IO路径
OSD
OSD

Diskn
• 高 吞 吐 量 , 不 再 有 机 头 瓶 颈 :
OSD
IB/10GE/FOCE 并 发 支 持 , 带 宽 是 传 统
SAN的10倍以上
无状态分布式机头层,可水平扩展
分布式存储引擎,可水平扩展
11
FusionStorage 基本原理-DHT寻址与水平扩展技术
Server 1
Disk1
P1 P5’ P2 P9’ P3 P17’ P4 P21’
Server 2
Disk2
P5 P1’ P6 P10’ P7 P13’ P8 P22’
Server 3
Disk3
P9 P2’ P10 P6’
P11
P14’
P12 P18’
Disk4
P13
P7’ P14 P11’ P15 P19’ P16 P23’
数据逻辑地址 数据逻辑地址 数据逻辑地址 数据逻辑地址 … Hash Key1 Key2 Key3 Key4 分段寻址
Pn
DHT环
P1 P2
物理节点 映射物理空间 Disk1

P6
DHT
P5 P4
Disk2
P3

Keyn
数据逻辑地址
Diskn
DHT(Distributed Hash Table)
DHT环:232 超大虚拟节点构成的环形空间
Partition:将DHT环空间划分为N等份,每一等份是一个分区 物理节点:即一个DISK, 与Partition分区对应
优点:
水平扩展速度快: 新物理节点加入时, 只需要搬移部分数据 (partition),并达到负载均衡 数据可靠性高:可灵活配置的分区分配算法,避免2个副本位于 同一个Disk、同一块板、同一个机柜

InfiniBand
1/100~1/1000
Node1 Node2
PCIE
Cache Cache Cache
Node3
• 高吞吐:整柜带宽达120 GB/s
SSD
SSD
SSD
SSD
SSD
SSD
分布式SSD存储系统,主要用于数据仓库一体机场景
17
Content
1
2
技术趋势
华为分布式存储技术原理与优势 华为分布式存储应用实践
Disk5
P17 P3’ P18 P12’ P19 P15’ P20 P24’
Disk6
P21
P4’
P22
P8’
P23
P16’
P24 P20’
数据分布可以跨服务器或跨机柜,不会因某个服务器、机柜故障导致数据不可访问 数据分片在资源池内打散,硬盘故障后,可在全资源池范围内自动并行重建,仅重建实际数据,无需热备盘;
5
CH223 IO扩展型计算节点
CH222 存储扩展型计算节点
CH240 计算节点
交换模块
CX116 GE直通模块 CX310 10GE交换模块 CX311 10GE/FCoE/FC融合交换 模块 CX911 10GE/FC多平面交换模块
CX110 GE交换模块
CX317 10GE直通模块
CX610 Infiniband QDR/ FDR融合交换模块
重建1TB数据时间 < 30分钟( 传统IPSAN 重建1TB数据需要12小时)
15
高速Infiniband网络互联,计算、存储交换无瓶颈
• 56Gbps FDR InfiniBand,超高速互联
单链路速率对比
8000
6000 4000 2000 0 GE 8G FC 10GE 56G FDR GE
融合架构
应用整合
Application deployment template
Management Platform
Physical and virtual resource pool management
I/O acceleration (exclusive)
CPU Memory Network External storage
Content
1
2
技术趋势
华为分布式存储技术原理与优势 华为分布式存储应用实践
3
6
数据仓库性能瓶颈在于IO吞吐
传统架构
Switch
可视化图表
OLAP过程
读写 瓶颈 FC Switch 写 瓶颈 内存 限制 时延 瓶颈
Avg/Sum
需要从磁盘读取大量的 临时数据, ,瓶颈在 于网络和磁盘IO
由于内存大小限制, 需要将 Group操作的临时数据写 入磁盘,瓶颈在于网络和 磁盘IO。
I/O acceleration (exclusive / shared)
Server
CPU
Memory
High-speed network
CPU Memory Storage
Network
Storage
系统性能和灵活性不断增强,OPEX不断降低
创新公司不断涌现,传统IT软硬件厂商也纷纷加入计算存储融合阵营
• P2P无阻塞通信网络,数据交换无瓶颈
• ns级通信时延,计算存储信息及时传递
8G FC
10GE 56G FDR
16
高性能、低时延—支持全SSD 存储
Database
Instance1 Instance2 Instance n
• 高IO: 整柜IOPS达240万 • 低时延:读时延49us,写时延8us,仅为传统SAS盘的

大容量: 最大96块盘,提升超大存储空间,避免高IO应用导致热点瓶颈 动态热备:所有硬盘都可用作资源池的热备盘 简单结构:资源池、Volume二层结构,没有LUN结构,服务器直接看到Volume
10
FusionStorage 分布式软件架构
基于PAXOS机制的高 可靠、大规模存储集 群总控MDC集群
全宽单槽位
计算节点
电源模块 风扇模块 管理模块
CH121 计算节点
CH221 IO扩展型计算节点
单刀片:未来四代CPU; 756G~1.5T内存;15块硬盘;4 PCIE标准扩展卡; 网络:GE/10GE/IB 40G/IB 56G交换;15.6Tbps无源背板; 存储: 无须外置San存储; 3~5倍 IOPS; 单机框64颗cpu
12
高性能——DHT并行IO读写
传统SAN外置存储
Applications
App1 App2 App3
FusionStorage分布式存储
Applications
App1
App2 App3
LUN内共享IO LUN内共享IO LUN内共享IO
VS.
P2P集群级共享IO
RAID Array
大资源池集群
Leader
MDC MDC MDC
• 全分布式架构,水平扩展 :无状态机头层,
每个机头可以平滑添加与减少; • 无状态分布式存储引擎: 可以水平扩展单
状态控制路径
板、磁盘
状态控制路径
• 计算、存储全融合架构,超高性能:
Cache更大,不再受到传统SAN机头限制
相关文档
最新文档