存储系统主流技术比较分析
大数据的存储技术

大数据的存储技术随着互联网的快速发展和应用范围的不断扩大,大数据已经成为了互联网时代的主要特征之一。
然而,大数据的存储、处理和分析需要强大的技术支持。
本文将重点讨论大数据的存储技术,包括传统的存储技术和最新的存储技术,如分布式文件系统、NoSQL数据库和大数据存储平台等。
一、传统的存储技术在大数据存储技术的发展过程中,传统的存储技术总是扮演着重要的角色。
传统的存储技术主要包括关系型数据库和文件系统。
1、关系型数据库关系型数据库是传统的数据库存储技术,它采用表格的方式来存储数据,支持SQL查询语言,具有成熟、稳定、易用等特点。
关系型数据库包括MySQL、Oracle、SQL Server等,它们在企业信息系统和金融系统中得到广泛应用。
然而,关系型数据库在存储大数据时存在着一些问题,比如性能瓶颈、扩展性差、成本高等。
2、文件系统文件系统是用于存储和管理文件的系统软件,它是操作系统的一部分,用于将文件存储到硬盘或其他存储设备上。
常见的文件系统包括NTFS、FAT32、EXT4等。
文件系统广泛应用于个人电脑、服务器和嵌入式系统中,但它在存储大数据时面临着诸多挑战,比如单点故障、扩展性差、性能瓶颈等。
二、分布式文件系统为了解决传统存储技术的问题,分布式文件系统应运而生,它是一种通过网络连接来提供文件服务的分布式系统。
分布式文件系统采用了分布式存储的方式,将数据存储在多台服务器上,并通过网络进行数据访问和管理,具有良好的扩展性、容错性和高性能。
1、HDFSHDFS是Apache Hadoop项目中的分布式文件系统,它是Hadoop生态系统的核心组件之一。
HDFS采用主从架构,包括一个NameNode和多个DataNode,它通过数据块的方式来存储大数据,支持高并发的数据读写和副本数据备份。
HDFS具有良好的扩展性和容错性,是存储大数据的首选技术。
2、GFSGFS(Google File System)是谷歌公司开发的分布式文件系统,用于支持谷歌搜索引擎的大规模数据存储和处理。
主流数据库系统的特点与比较

主流数据库系统的特点与比较随着信息化和数据化的进一步推进,数据库系统越来越成为企业信息管理的关键。
由于数据管理的要求和需求多种多样,各类数据库系统不断涌现,主流数据库系统也在不断演进和创新。
本文将就主流数据库系统的特点进行比较和分析,旨在帮助读者更好地了解和选择适合自身需求的数据库系统。
一、关系型数据库系统关系型数据库系统是目前企业中最为普遍的数据库系统,其特点在于采用表格和关系进行数据存储管理。
表格存储数据的方式使得数据可以快速查询和处理,同时避免了数据冗余和重复。
关系型数据库系统还一般具有以下特点:1. 高度结构化:数据库系统需要经过建模和设计才能创建出适合企业需要的数据库。
2. 类似SQL的命令语言:SQL语言已成为数据库系统最为普遍的数据查询和管理语言。
3. 事务处理和ACID(Atomicity, Consistency, Isolation, Durability)支持:事务处理可以确保数据的完整性和一致性,而ACID支持可以保证数据的可靠性和安全性。
4. 数据完整性检查:关系型数据库系统可以通过约束和索引等手段对数据进行完整性检查,从而避免数据出现错误和重复。
主流的关系型数据库系统包括Oracle、MySQL、Microsoft SQL Server等,不同的数据库系统在处理效率、性能、安全性等方面都有自己的特点和优劣。
二、非关系型数据库系统除了关系型数据库系统,近年来出现了一种新型的数据库系统:非关系型数据库系统(Nosql)。
与关系型数据库不同,Nosql支持非结构化数据的存储和查询,在大数据量环境和高并发环境下有更好的性能表现。
Nosql数据库有以下特点:1. 非结构化数据支持:Nosql数据库支持非结构化或半结构化的数据存储和查询,可以灵活地应对不同的数据存储需求。
2. 分布式处理:Nosql数据库采用分布式架构,可以很好地处理大规模数据和高并发量的数据操作。
3. 可扩展性:Nosql数据库具有良好的可扩展性,可以根据需求高效地进行横向和纵向的自动扩展。
FCSAN和IPSAN技术介绍

FC SAN 和 IP SAN 技术介绍1. 存储发展历程 源于系统对于转发和存储的要求不断提高,存储的发展日新月异。
从最早的内置硬盘到 DAS 存储,再到 20 世纪末出现的 FC SAN 以及今天已经被广泛使用的 IP SAN ,大型复杂的 IT 系统不 断推动着存储架构的发展。
早期的大型服务器存储使用 DAS ( Direct Attached Storage ),又称直连存储。
在这种方式中, 存储设备是通过电缆 (通常是 SCSI 接口电缆) 直接和服务器相连。
I/O 请求直接从服务器发送到存 储设备。
由于早期的网络十分简单,所以直连式存储得到发展。
DAS 存储方式如下图所示:DAS 曾经是一种流行的存储系统,但不能满足大容量存储和设备共享需求,于是出现了 SAN 等其他存储技术。
SAN ( Storage Area Network ,存储局域网络)的诞生,使存储空间得到更加充分的利用以 及安装和管理更加有效。
SAN 是一种将存储设备、连接设备和接口集成在一个高速网络中的技术。
SAN 本身就是一个存储网络,承担了数据存储任务, SAN 网络与 LAN 业务网络相隔离,存储数据 流不会占用业务网络带宽。
SAN 存储方式如下图所示:在 SAN 网络中,所有的数据传输在高速、高带宽的网络中进行, 理硬件的块级存储访问,提高了存储的性能和升级能力。
早期的 SAN 采用的是光纤通道( FC ,Fiber Channel )技术,所以,以前的 SAN 多指采用光 纤通道的存储局域网络,到了 iSCSI 协议出现以后,为了区分,业界就把 SAN 分为 FC-SAN 和 IP-SAN 。
FC 和 IP 都是存储传输协议,二者孰优孰劣一直是业界争论的焦点。
接下来的部分将会从二者的起源、发展、协SAN 存储实现的是直接对物议、安全、可管理、兼容性等各方面对其进行阐述。
2. FC 协议FC 开发于1988 年,最早是用来提高硬盘协议的传输带宽,侧重于数据的快速、高效、可靠传输。
DAS、NAS、SAN存储系统完全分析

DAS、NAS、SAN存储系统完全分析目前磁盘存储市场上,存储分类(如下表一)根据服务器类型分为:封闭系统的存储和开放系统的存储,封闭系统主要指大型机,AS400等服务器,开放系统指基于包括Windows、UNIX、Linux等操作系统的服务器;开放系统的存储分为:内置存储和外挂存储;开放系统的外挂存储根据连接的方式分为:直连式存储(Direct-Attached Storage,简称DAS)和网络化存储(Fabric-Attached Storage,简称FAS);开放系统的网络化存储根据传输协议又分为:网络接入存储(Network-Attached Storage,简称NAS)和存储区域网络(Storage Area Network,简称SAN)。
由于目前绝大部分用户采用的是开放系统,其外挂存储占有目前磁盘存储市场的70%以上,因此本文主要针对开放系统的外挂存储进行论述说明。
表一今天的存储解决方案主要为:直连式存储(DAS)、存储区域网络(SAN)、网络接入存储(NAS)。
如下表二:表二开放系统的直连式存储(Direct-Attached Storage,简称DAS)已经有近四十年的使用历史,随着用户数据的不断增长,尤其是数百GB以上时,其在备份、恢复、扩展、灾备等方面的问题变得日益困扰系统管理员。
直连式存储依赖服务器主机操作系统进行数据的IO读写和存储维护管理,数据备份和恢复要求占用服务器主机资源(包括CPU、系统IO等),数据流需要回流主机再到服务器连接着的磁带机(库),数据备份通常占用服务器主机资源20-30%,因此许多企业用户的日常数据备份常常在深夜或业务系统不繁忙时进行,以免影响正常业务系统的运行。
直连式存储的数据量越大,备份和恢复的时间就越长,对服务器硬件的依赖性和影响就越大。
直连式存储与服务器主机之间的连接通道通常采用SCSI连接,带宽为10MB/s、20MB/s、40MB/s、80MB/s等,随着服务器CPU的处理能力越来越强,存储硬盘空间越来越大,阵列的硬盘数量越来越多,SCSI通道将会成为IO瓶颈;服务器主机SCSI ID资源有限,能够建立的SCSI通道连接有限。
大规模数据存储技术的选型和应用分析

大规模数据存储技术的选型和应用分析随着科技的发展和互联网的普及,数据的产生和存储量不断增加。
如今,大规模数据的存储已经成为各行各业的标配,企业、政府乃至个人都面临着海量数据的存储和管理问题。
在面对如此多的数据量和数据种类的不同的情况下,很多机构选择了大规模数据存储技术,门槛低、容易上手、数据处理速度快等优点受到了各行业机构的关注。
那么,在进行大规模数据存储技术选型之前,需要先对不同类型的存储技术进行一个分析,以了解其适用性,以及其各自的优缺点。
## 存储技术### 文件存储文件存储通常使用本地硬盘、网络存储设备、网络文件系统(NFS)、共享文件系统(SAN / NAS)等设备来完成,是最常见的存储方式之一。
文件存储的基本特点是:简化之后即是将数据保存在文件中,数据的组织形式灵活。
选择文件系统也是一项关键的工作。
例如,大部分Linux及BSD-like操作系统支持EXT 4、XFS等文件系统,备份、安全、容错优秀。
### 关系型数据库技术关系型数据库技术是指以表格为基本数据单位,基于关系型模型开发的一种数据管理软件。
常用的应用有Oracle、MySQL、PostgreSQL、SQL Server等。
一个让人兴奋的特点是,关系型数据库使用 SQL(Structured Query Language)查询语言,在数据检索和转换方面具有强大的功能,同时它也支持复杂事务。
### NoSQL技术NoSQL技术(Not only SQL)是指非关系型数据库,在分布式大数据环境下,NoSQL存储技术解决了关系型数据的瓶颈,例如垂直伸缩、读写性能等问题。
NoSQL中有几个最常用和最重要的技术类型:1. 键值存储:例如Memcached和Redis,他们用于大量库的高速存储,例如内存的Key-Value数据存储应用。
它们通常用于缓存和Session存储。
2. 列存储:例如 HBase、Cassandra,用于分布式文件存储和处理海量数据,当前已经发展成为了NoSQL存储中的主流。
关于云存储系统的六大技术分析

关于云存储系统的六大技术分析云存储系统是一种基于云计算技术的存储解决方案,它可以提供大规模的、高可靠性的存储服务。
云存储系统涵盖了多个技术领域,以下是关于云存储系统的六大技术分析。
1.数据存储技术:数据存储是云存储系统的核心技术之一、在云存储系统中,数据被存储在分布式的存储设备上,以实现高可靠、高可扩展性的存储服务。
这种分布式存储技术可以保证数据的冗余备份,以提供数据的可靠性。
常见的数据存储技术包括分布式文件系统、对象存储等。
2.数据传输技术:数据传输是云存储系统中的一项重要技术。
由于互联网的发展,数据的传输已经成为了一个非常重要的环节。
数据传输技术可以通过调整网络传输协议、优化网络拓扑结构、增加网络带宽等方式来提高数据的传输效率和稳定性。
在云存储系统中,数据传输技术的发展可以帮助用户更快速、可靠地将数据存储到云端或从云端中获取数据。
3.数据加密技术:由于云存储系统中用户的数据存储在云端,因此数据的安全性是一个重要的问题。
数据加密技术可以保护用户的数据免受未经授权的访问。
这包括对数据在传输过程中的加密,以及对数据在存储过程中的加密。
数据的加密技术通常包括对称加密和非对称加密等方式,可以有效地保护用户的数据隐私。
4.数据备份和恢复技术:在云存储系统中,数据备份和恢复是非常重要的技术。
数据备份可以提供数据的冗余备份,当发生数据损坏或丢失的情况时,可以从备份中恢复数据。
备份技术可以通过多副本存储、增量备份等方式实现数据的备份。
而数据恢复技术包括快速恢复、增量恢复等方式,可以使用户快速恢复丢失的数据。
5.数据一致性技术:在云存储系统中,数据一致性是一个关键问题。
由于云存储系统可能存储了大量的数据,而这些数据往往需要在多个节点上进行读写操作。
数据一致性技术可以确保多个节点上的数据是一致的,防止数据的不一致性对用户造成的问题。
常见的数据一致性技术包括分布式事务、分布式锁等。
6.性能优化技术:为了提供高效可靠的云存储服务,性能优化技术是不可或缺的。
技术方案比较

技术方案比较引言在当前快速发展的技术环境中,选择一种适合自己应用需求的技术方案是至关重要的。
本文将比较三种主流的技术方案:A方案、B方案和C方案,并对它们的优缺点进行分析,帮助读者选择最适合自己应用需求的技术方案。
A方案A方案是一种基于云计算的技术方案,它提供了强大的计算和存储能力。
A方案的核心是通过云平台提供的虚拟机实例,将应用程序部署在云上。
这种方案具有以下优点和缺点。
优点1.弹性扩展:A方案可以根据实际需求快速调整计算和存储资源。
通过增加或减少虚拟机实例的数量,可以满足应用的高负载或低负载需求。
2.高可靠性:云平台提供了故障恢复和备份功能,可以防止意外中断和数据丢失。
3.无需硬件设备:A方案不需要购买和维护硬件设备,节省了成本和时间。
缺点1.依赖互联网:A方案要求应用程序始终能够访问互联网,否则无法正常工作。
2.安全性问题:将应用程序托管在云上可能面临安全性风险,需要额外的安全措施来保护数据和系统。
B方案B方案是一种基于微服务架构的技术方案,它通过将应用程序拆分成多个小的、自治的服务,来提供灵活性和可扩展性。
这种方案具有以下优点和缺点。
优点1.灵活性:B方案允许独立开发和部署各个微服务,使开发团队能够快速、独立地迭代和扩展功能。
2.可扩展性:B方案可以根据需求独立地扩展某个微服务,而不必扩展整个应用程序,从而提高资源利用率。
3.易于维护:微服务之间的松耦合性使得维护和更新变得更加容易。
缺点1.复杂性:B方案中的微服务需要通过网络进行通信,增加了系统的复杂性和延迟。
2.运维成本:B方案需要对多个微服务进行管理和监控,增加了运维成本和复杂性。
3.集成困难:由于微服务的自治性,不同的微服务可能使用不同的技术栈或数据存储方式,导致集成困难。
C方案C方案是一种基于容器化的技术方案,它使用容器将应用程序与其依赖项进行隔离,提供了一种轻量、可移植的部署方式。
这种方案具有以下优点和缺点。
优点1.轻量级:C方案使用容器,可以快速启动和停止应用程序,减少了系统资源的消耗。
大数据存储技术

大数据存储技术随着信息时代的到来,大数据逐渐成为各个领域中最重要的资源之一。
大数据存储技术的发展对于数据的管理和分析具有至关重要的意义。
本文将探讨当前主流的大数据存储技术,并分析其应用和发展趋势。
一、Hadoop分布式文件系统Hadoop分布式文件系统(HDFS)是大数据存储应用最广泛的技术之一。
HDFS基于Google的GFS(Google File System)而开发,通过将文件划分为多个数据块并存储在各个分布式节点上,实现了高容错性和高可扩展性。
HDFS的设计理念是通过横向扩展来增加存储容量和处理能力,从而适应海量数据的存储需求。
二、NoSQL数据库传统的关系型数据库在存储大数据时遇到了困难,这促使了NoSQL(Not only SQL)数据库的兴起。
NoSQL数据库通过键值对、文档、列族等非关系型存储方式,弥补了关系型数据库的不足。
例如,MongoDB和Cassandra是两种常用的NoSQL数据库,它们在大规模数据存储和高速读写方面具备很好的性能。
三、列式存储技术传统的行式存储数据库以行为单位存储数据,但在大数据存储中,读取特定字段的列式存储方式更具优势。
列式存储技术将不同的列存储在不同的文件中,通过在内存中建立索引来提高查询效率。
列式存储技术在数据分析、数据挖掘等领域有广泛的应用,例如,HBase是一种基于列式存储的分布式数据库。
四、分布式文件系统分布式文件系统(DFS)被广泛应用于大数据存储和处理。
DFS将文件划分为多个块,并将这些块分散存储在不同的节点上。
通过数据冗余和数据分布策略,DFS实现了数据的高可靠性和高可用性。
Hadoop的HDFS就是一种分布式文件系统,它经过了多年的发展和改进,在大数据存储领域有着较高的市场份额。
五、云存储技术随着云计算的兴起,云存储技术成为了大数据存储的新趋势。
云存储通过将数据存储在云平台上,实现了数据的共享和弹性扩展。
云存储服务商如Amazon S3和Google Cloud Storage提供了可靠、安全、高性能的大数据存储解决方案,为用户提供了方便的数据管理和访问方式。
- 1、下载文档前请自行甄别文档内容的完整性,平台不提供额外的编辑、内容补充、找答案等附加服务。
- 2、"仅部分预览"的文档,不可在线预览部分如存在完整性等问题,可反馈申请退款(可完整预览的文档不适用该条件!)。
- 3、如文档侵犯您的权益,请联系客服反馈,我们会尽快为您处理(人工客服工作时间:9:00-18:30)。
存储系统主流技术比较分析信息技术系统现已进入以数据为中心的时代,随着存储技术的不断发展和完善,企业的技术基础架构正在从以前复杂的以服务器为中心的IT 架构逐渐向以数据存储为中心的方向演变。
我公司目前技术系统已初步建成以SAN 存储(主要为EMC 的 Symmetrix DMX )为核心,NAS (主要为NetAPP 的FAS3170)存储为补充的多层次的存储系统架构。
下面将从存储系统架构、磁盘技术、存储管理和云存储等几个方面分析存储技术在我公司技术系统的应用和发展方向。
一、 存储系统架构存储系统架构的发展由内置存储进化为独立的外置存储,再由直连式存储发展为网络式存储,由功能单一的SAN 存储网络发展为统一多功能存储,目前SAN 架构与IP 网络也有逐渐融合的趋势。
发展过程如下图所示:1.1、 内置存储与外置存储内置存储外置存储Direct-Attached Storage直接式存储(DAS ) Fabric-Attached Storage网络存储(FAS )Network-Attached Storage 网络接入存储(NAS ) Storage Area Network存储区域网络(SAN )传统的内置存储是将存储设备(通常是磁盘)与服务器其他硬件直接安装于同一个机箱之内,且该存储设备是为服务器所独占使用。
外置存储既是将存储设备从服务器中独立出来,根据与服务器物理连接的方式可分为:直连式存储(Direct-Attached Storage,简称DAS)和网络化存储(Fabric-Attached Storage,简称FAS);网络化存储根据传输协议又分为:网络接入存储(Network-Attached Storage,简称NAS)和存储区域网络(Storage Area Network,简称SAN)。
1.2、直连式存储(Direct-Attached Storage,DAS)直连式存储必须依赖服务器主机操作系统进行数据的IO读写和存储维护管理,所以数据备份和恢复必然占用服务器主机资源(包括CPU、系统IO等),直连式存储与服务器主机之间的连接通道通常采用SCSI连接,带宽为10MB/s、20MB/s、40MB/s、80MB/s等,随着服务器CPU的处理能力越来越强,存储硬盘空间越来越大,阵列的硬盘数量越来越多,SCSI通道将会成为IO瓶颈;服务器主机SCSI ID资源有限,能够建立的SCSI通道连接有限。
而且直连式存储无法很好的处理数据共享的需求,目前只使用于较简单的应用中。
1.3、SAN与NAS使用存储网络可以提高数据存储的统一性,实现数据集中管理,且数据容易扩充并具有容错功能。
针对存储网络可采取两种不同的实现手段,即SAN(Storage Area Networks)存储区域网络和NAS(Network Attached Storage)网络接入存储。
存储区域网络(SAN)采用光纤通道(Fibre Channel)技术,通过光纤通道交换机连接存储阵列和服务器主机,采用SCSI、FC-AL接口,建立专用于数据存储的区域网络。
网络接入存储(NAS)采用网络技术,通过网络交换机连接存储系统和服务器主机,建立专用于数据存储的存储私网。
随着IP网络技术的发展,网络接入存储(NAS)技术正发生质的飞跃。
随着千兆以太网(1000Mbps)的商用化,为网络接入存储(NAS)带来质的变化和市场广泛认可。
由于网络接入存储采用TCP/IP网络进行数据交换,并采用业界标准文件共享协议如:NFS、HTTP、CIFS 实现共享。
不同厂商的产品(服务器、交换机、NAS存储)只要满足协议标准就能够实现互连互通,无兼容性的要求;目前万兆以太网(10000Mbps)的成熟和推广,存储网络带宽将大大提高NAS存储的性能。
NAS和SAN最本质的不同就是文件管理系统在哪里。
SAN结构中,文件管理系统(FS)还是分别在每一个应用服务器上;而NAS则是每个应用服务器通过网络共享协议(如:NFS、CIFS)使用同一个文件管理系统。
换句话说:SAN 提供的是存储空间服务(磁盘)而NAS提供文件系统管理与服务(文件服务)。
NAS的结构及采用的协议使得NAS具有以下优点:异构平台下的文件共享;容易安装,使用和管理都很方便,实现即插即用;广泛的连接性,可以适应复杂的网络环境;较低的总拥有成本等。
但是在实际应用中NAS也表现出一些缺陷:(1)在文件访问的速度方面:NAS采用的是File I/O 方式,File的I/O请求先经过整个TCP/IP协议栈封装,再经过网络传输,再对存储设备进行读写。
数据取出来之后要经过类似的与之相反的过程,这带来巨大的网络处理开销,因此NAS的文件访问速度相对SAN 而言较低,不适合对访问速度要求高的应用场合,如数据库应用,在线事务处理等。
2)NAS需要占用LAN的带宽,需要为NAS划分独立的存储专用网络。
而SAN采用Fibre Channel协议构建的专用于存储的网络。
存储设备和SAN 中的应用服务器之间采用Block I/O的方式进行数据交换。
独特的体系结构和构建技术使得SAN具有如下优点:高性能、高速存取,目前光纤通道可提供2Gbps-4 Gbps的带宽,新的8Gbps的设备也已投入商用;集中存储和管理:可以整合各种不同的存储设备形成一个统一的存储池,向用户提供服务;可扩展:服务器和存储设备相分离,两者的扩展可以独立进行;实现LAN—free backup,数据备份不占用LAN带宽;当然SAN也有自身的缺陷:如异构环境下的文件共享方面以及较高的拥有与维护成本。
1.4、IP与SAN的融合(iSCSI与FCoE)SAN(Storage Area Networks)是专用于存储的网络。
基于FC(Fibre Channel网状通道)协议的SAN是目前存储系统的主流技术。
但是IP技术仍然是IT行业中最成熟、最开放、发展最迅速、成本最低、管理最方便的数据通讯方式。
通过IP技术实现存储架构,可以更好的适应广域网数据应用、大规模服务器数据集中、海量数据存储等应用对新一代存储系统的要求。
其中代表性技术就是iSCSI(TCP/IP上的SCSI )。
iSCSI协议是一种纯粹的IP存储网络技术,它不包含任何的FC内容,iSCSI 通过IP网络传输SCSI指令集,在IP网络上实现块级数据传输。
iSCSI协议位于TCP/IP协议和SCSI协议之间,可以起到连接这两种协议网络的作用。
2003年,以IBM等公司共同发起的iSCSI(Internet SCSI)协议,通过IETF组织的审议,公布为RFC标准。
基于iSCSI协议构建的IP SAN存储,已崭露头角,成为新一代存储系统的标准,成为IT新时代围绕IP技术进行的网络与存储融合的标志性技术。
我公司基础网络系统中已实现10Gb网络技术的应用,为IP存储技术在我公司存储系统中的推广建立了坚实的网络基础。
且目前Citrix终端虚拟化系统已实际使用iSCSI存储技术并表现良好。
随着基础网络设备的不断更新,10Gb网络技术将在我公司技术系统很快得到普及,届时IP-SAN技术也将在我公司的存储系统中成为越来越重要的组成部分。
随着网络技术的高速发展,网络传输带宽正成倍增长。
目前10GB正成为商用主流技术,且20Gb/s,20Gb/s甚至100Gb/s的技术标准正在制定中。
而FC SAN的带宽主流仍为2-4Gb,8Gb技术正逐渐推广。
传统FC在底层传输速率的发展已明显落后于以太网。
为了让存储系统更好的使用以太网资源,目前已推出了FCoE(Fibre Channel over Ethernet以太网光纤通道)。
即将光纤通道架构运行于10Gbps 增强型以太网(CEE)上,从而形成融合网络。
FCoE技术标准可以将光纤通道映射到以太网,可以将光纤通道信息插入以太网信息包内,从而让服务器-SAN 存储设备的光纤通道请求和数据可以通过以太网连接来传输,而无需专门的光纤通道结构,从而可以在以太网上传输SAN数据。
FCoE面向的是10G以太网,其应用的优点是在维持原有服务的基础上,可以大幅减少服务器上的网络接口数量(同时减少了电缆、节省了交换机端口和管理员需要管理的控制点数量),从而降低了功耗,给管理带来方便。
此外它还提高了系统的可用性。
由于FCoE不使用TCP/IP协议,因此FCoE数据传输不能使用IP网络。
FCoE 是专门为低延迟性、高性能、二层数据中心网络所设计的网络协议。
FCoE协议要求底层的物理传输是无损失的。
因此,厂商已经开发了针对以太网标准的扩展,尤其是针对无损10Gb以太网的速度和数据中心架构。
这些扩展可以进行所有类型的传输。
这些针对以太网标准的扩展被Brocade等厂商称为“融合型增强以太网(CEE)”,被思科称为“数据中心以太网(DCE)”。
增强型以太网能够支持多种传输类型,包括FCoE和TCP/IP,因此许多厂商认为它将是下一代数据中心的统一架构,增强型以太网将能够将服务器和存储、IP网络以及其他服务器连接在一起,从而为集群式应用程序服务。
FCoE技术被业界认为有可能将彻底颠覆存储网络架构目前的格局,成为未来主导的存储传输协议。
虽然目前尚未在我公司存储系统中实际应用,但是该技术仍值得我们长期关注和了解。
二、磁盘技术磁盘是存储系统的基础部件,磁盘的性能与稳定性是存储系统的重要性能指标之一。
磁盘随着接口类型的不同可以分为IDE、SATA、SCSI、SAS、FC等类型。
其中目前主要为外置存储设备所使用的是SATA磁盘、SAS磁盘与FC磁盘。
2.1、SATA磁盘、SAS磁盘与FC磁盘SATA(Serial ATA)磁盘属于高性价比磁盘,其单个磁盘容量比SAS和FC 磁盘大,转速比SAS和FC磁盘低,当然价格也比后者低,因此SATA磁盘主要应用于对容量需求大或者性能要求相对不高的场合,例如视频监控、文件服务、数据备份等应用,或者小型的数据库、应用系统等。
而SAS(Serial Attached SCSI即串行连接SCSI)磁盘和FC(Fiber Channel,光纤通道)磁盘都属于高性能磁盘(主流转速15000转/s,主流容量300GB),主要用于对性能要求苛刻的关键核心应用。
SAS和FC磁盘都是采用相同的内部结构,包括相同的物理盘片、相同的读写磁头、相同的传动装置,采用相同的读写原理。
从结构上看,两者的唯一区别在于磁盘与外部系统连接的接口,SAS磁盘采用了SAS接口,FC磁盘采用了FC接口,满足不同的连接接口要求。
决定磁盘性能的主要指标包括磁盘转速、缓存容量、内部数据传输率、平均寻道时间、延迟时间等,其中磁盘转速是最关键的指标。
主流SAS磁盘和FC磁盘采用相同的内部结构,同时都采用15000转的转速,决定了两者绝大部分指标都相同。