图书馆存储架构技术建议书

合集下载

数字图书馆系统的存储解决方案

数字图书馆系统的存储解决方案

数字图书馆系统的存储解决方案引言概述数字图书馆系统是利用数字化技术对图书馆资源进行管理和服务的一种新型图书馆系统。

在数字图书馆系统中,存储解决方案是至关重要的,它直接影响到系统的性能和稳定性。

本文将从存储解决方案的角度探讨数字图书馆系统的存储问题,并提出一些解决方案。

一、存储技术选择1.1 硬盘存储:传统的硬盘存储技术在数字图书馆系统中仍然具有一定的应用价值,主要体现在成本较低、容量较大等方面。

1.2 固态硬盘存储:固态硬盘存储技术由于其读写速度快、耐用性强等优点,在数字图书馆系统中越来越受到青睐。

1.3 云存储:云存储技术是一种新兴的存储方式,具有弹性扩展、高可靠性等特点,在数字图书馆系统中也有广泛应用。

二、存储架构设计2.1 分布式存储架构:采用分布式存储架构可以有效提高系统的可扩展性和容错性,保证系统的稳定性和性能。

2.2 冗余备份:在存储架构设计中,冗余备份是必不可少的,可以保证数据的安全性和可靠性。

2.3 数据压缩和加密:为了节省存储空间和保护数据安全,数字图书馆系统中的数据通常需要进行压缩和加密处理。

三、存储管理策略3.1 数据分类存储:根据数据的重要性和访问频率,采用不同的存储策略,提高系统的存取效率。

3.2 数据迁移策略:定期对数据进行迁移,将不常用的数据存储在低成本的存储介质上,提高系统的整体性能。

3.3 容量规划和监控:对存储容量进行规划和监控,及时扩展存储空间,避免因存储空间不足导致系统崩溃。

四、存储性能优化4.1 缓存技术应用:通过缓存技术可以提高数据的读取速度,减轻存储系统的负担,提高系统的性能。

4.2 数据分区和索引优化:合理的数据分区和索引设计可以提高数据的查找效率,优化系统的性能。

4.3 IO优化:对存储系统的IO进行优化,可以提高数据的读写速度,提高系统的响应速度。

五、存储安全策略5.1 访问控制:对存储系统进行访问控制,限制非法访问,保护数据的安全性。

5.2 数据加密:对存储的数据进行加密处理,防止数据泄露和非法访问。

数字图书馆系统的存储解决方案

数字图书馆系统的存储解决方案

数字图书馆系统的存储解决方案引言概述:数字图书馆系统的存储解决方案是指为数字图书馆系统提供高效、可靠的数据存储和管理方案,以确保数字图书馆系统的正常运行和数据的安全性。

本文将从五个大点阐述数字图书馆系统的存储解决方案,包括存储技术选择、数据备份与恢复、数据迁移与追踪、数据安全与权限管理以及容量规划与扩展。

正文内容:1. 存储技术选择:1.1 存储介质选择:数字图书馆系统的存储介质选择应考虑到数据的容量、访问速度、可靠性和成本等因素。

常见的存储介质包括硬盘、固态硬盘和磁带等。

硬盘具有较高的读写速度和较低的成本,适合存储频繁访问的数据;固态硬盘具有更高的读写速度和更低的能耗,适合存储对速度要求较高的数据;磁带具有较高的存储密度和可靠性,适合长期备份和归档数据。

1.2 存储系统选择:数字图书馆系统的存储系统选择应考虑到系统的可扩展性、可靠性和性能等因素。

常见的存储系统包括网络附加存储(NAS)和存储区域网络(SAN)等。

NAS具有易于管理和部署的优势,适合小规模的数字图书馆系统;SAN具有高性能和可扩展性的优势,适合大规模的数字图书馆系统。

2. 数据备份与恢复:2.1 定期备份:数字图书馆系统的数据备份应定期进行,以防止数据丢失。

定期备份可以采用全量备份和增量备份相结合的方式,全量备份用于恢复整个系统,增量备份用于恢复最新的数据。

2.2 冷备份与热备份:数字图书馆系统的数据备份可以采用冷备份和热备份相结合的方式。

冷备份是指将数据备份到离线介质中,如磁带,以提高数据的安全性;热备份是指将数据备份到在线存储设备中,以提高数据的恢复速度。

2.3 数据恢复测试:数字图书馆系统的数据备份应进行定期的恢复测试,以确保备份数据的完整性和可用性。

通过摹拟数据丢失的情况,测试备份数据的恢复过程,及时发现和解决潜在的问题。

3. 数据迁移与追踪:3.1 数据迁移计划:数字图书馆系统的数据迁移应制定详细的计划,包括迁移的时间、迁移的数据量和迁移的方式等。

数字图书馆系统的存储解决方案

数字图书馆系统的存储解决方案

数字图书馆系统的存储解决方案一、引言数字图书馆系统是为了满足用户对于图书、期刊、论文等电子资源的检索、浏览和下载需求而开发的系统。

为了保证数字图书馆系统的正常运行和高效存储,需要一个可靠的存储解决方案。

本文将详细介绍数字图书馆系统的存储解决方案,包括存储介质的选择、存储架构的设计和数据备份与恢复策略等。

二、存储介质的选择为了满足数字图书馆系统对于大规模数据存储和高性能读写的需求,我们建议采用分布式存储系统和固态硬盘(SSD)作为存储介质。

1. 分布式存储系统分布式存储系统可以将数据分散存储在多个节点上,提高存储的可靠性和可扩展性。

我们可以采用Hadoop分布式文件系统(HDFS)作为存储系统的基础架构,它具有高容错性和高吞吐量的特点,适合处理大规模数据。

2. 固态硬盘(SSD)固态硬盘相比传统的机械硬盘具有更高的读写性能和更低的能耗。

我们建议将SSD作为数字图书馆系统的主要存储介质,以提高数据的访问速度和系统的响应能力。

同时,为了进一步提高存储的可靠性,可以采用RAID技术对SSD进行冗余备份。

三、存储架构的设计为了满足数字图书馆系统对于大规模数据存储和高并发访问的需求,我们提出了以下存储架构设计方案:1. 分层存储架构采用分层存储架构可以根据数据的访问频率和重要性将数据分散存储在不同的存储介质上。

我们可以将热数据(访问频率较高的数据)存储在SSD上,冷数据(访问频率较低的数据)存储在机械硬盘上,以实现存储资源的优化利用。

2. 数据缓存为了进一步提高数据的读取性能,可以在存储系统中引入数据缓存机制。

我们可以采用分布式缓存系统(如Redis)将热数据缓存到内存中,以减少对存储介质的访问次数,提高系统的响应速度。

3. 数据分片为了实现存储的横向扩展,可以将数据进行分片存储。

我们可以采用一致性哈希算法将数据按照一定的规则分散存储在不同的节点上,以提高存储系统的可扩展性和负载均衡能力。

四、数据备份与恢复策略为了保证数字图书馆系统的数据安全性和可靠性,我们需要制定合理的数据备份与恢复策略。

数字图书馆系统的存储解决方案

数字图书馆系统的存储解决方案

数字图书馆系统的存储解决方案概述:数字图书馆系统是一个用于管理、存储和提供电子图书、期刊、论文等数字化文献资源的系统。

为了确保数字图书馆系统的高效运行和可靠性,一个合适的存储解决方案是至关重要的。

本文将介绍一个标准格式的文本,详细描述数字图书馆系统的存储解决方案。

1. 存储需求分析:首先,我们需要对数字图书馆系统的存储需求进行分析。

这包括以下几个方面:- 数据规模:估计数字图书馆系统的数据规模,包括电子图书、期刊、论文等文献资源的数量和大小。

- 数据类型:确定存储的数据类型,例如文本、图像、音频、视频等。

- 数据访问模式:分析用户对数字图书馆系统的访问模式,包括并发访问量、读写比例等。

- 数据保护需求:确定对数据的备份、恢复和灾难恢复的需求,以确保数据的安全性和可靠性。

2. 存储架构设计:基于存储需求的分析结果,我们可以设计一个合适的存储架构。

以下是一些常用的存储架构组件:- 存储设备:选择合适的存储设备,包括硬盘、固态硬盘、磁带库等。

根据数据规模和性能需求,确定存储设备的容量和数量。

- 存储网络:设计存储网络,包括局域网、广域网等,以支持用户对数字图书馆系统的远程访问。

- 存储协议:选择合适的存储协议,例如NFS、CIFS等,以实现数据的共享和访问。

- 存储管理软件:选择合适的存储管理软件,用于管理存储设备、数据备份和恢复等操作。

3. 存储容量规划:根据数据规模和增长趋势,进行存储容量规划。

这包括以下几个步骤:- 数据容量估算:根据数字图书馆系统的数据规模和类型,估计未来一段时间内的数据容量需求。

- 存储设备配置:根据数据容量需求,选择合适的存储设备,并确定其容量和数量。

- 存储空间管理:设计存储空间管理策略,包括数据的分区、压缩、归档等,以最大限度地利用存储空间。

4. 数据备份和恢复:为了确保数据的安全性和可靠性,需要进行数据备份和恢复操作。

以下是一些备份和恢复策略:- 定期备份:制定定期备份计划,根据数据的重要性和变化频率,确定备份的频率和时间。

数字图书馆系统的存储解决方案

数字图书馆系统的存储解决方案

数字图书馆系统的存储解决方案一、引言数字图书馆系统是以数字化形式存储和管理图书馆资源的系统。

在数字化时代,数字图书馆系统的存储解决方案成为了图书馆发展的重要组成部份。

本文将详细介绍数字图书馆系统的存储解决方案,包括存储技术、存储架构和存储管理等方面的内容。

二、存储技术1. 硬盘存储技术硬盘存储技术是数字图书馆系统中常用的存储技术之一。

它采用磁性材料在磁盘上存储数据,具有容量大、读写速度快的特点。

数字图书馆系统可以采用传统的机械硬盘或者更先进的固态硬盘进行存储。

2. 网络存储技术网络存储技术是数字图书馆系统中的另一种重要存储技术。

它利用网络连接将数据存储在远程服务器上,实现数据的共享和备份。

网络存储技术可以采用网络附加存储(NAS)或者存储区域网络(SAN)等方式进行实现。

3. 云存储技术云存储技术是近年来兴起的一种存储技术,它将数据存储在云服务器上,用户可以通过互联网进行访问和管理。

数字图书馆系统可以利用云存储技术实现数据的弹性扩展和高可用性。

三、存储架构1. 分布式存储架构分布式存储架构是数字图书馆系统中常用的存储架构之一。

它将数据分散存储在多个节点上,提高了系统的可靠性和性能。

分布式存储架构可以采用主从复制、分片存储等方式进行实现。

2. 对象存储架构对象存储架构是一种将数据存储为对象的存储架构。

每一个对象都有惟一的标识符,可以通过标识符进行访问和管理。

对象存储架构具有高可扩展性和可靠性的特点,适合于数字图书馆系统中大规模数据的存储。

3. 混合存储架构混合存储架构将多种存储技术结合起来,根据数据的特点和需求选择最合适的存储方式。

数字图书馆系统可以采用混合存储架构,将热数据存储在高性能的硬盘或者固态硬盘上,将冷数据存储在便宜的磁带库中,实现存储成本的优化。

四、存储管理1. 数据备份与恢复数字图书馆系统的数据备份与恢复是保证数据安全性和可靠性的重要措施。

可以采用定期备份和增量备份的方式进行数据备份,并配合灾难恢复方案,确保数据在灾难发生时能够及时恢复。

数字图书馆系统的存储解决方案

数字图书馆系统的存储解决方案

数字图书馆系统的存储解决方案一、引言数字图书馆系统是现代图书馆的重要组成部分,它通过数字化技术实现了图书馆资源的数字化存储、管理和检索,为读者提供了便捷的图书查询和阅读服务。

为了保证数字图书馆系统的正常运行和高效性能,合理的存储解决方案是必不可少的。

本文将介绍数字图书馆系统的存储解决方案,包括存储架构、存储设备选型、数据备份和恢复策略等。

二、存储架构数字图书馆系统的存储架构应该具备高可用性、可扩展性和性能优化的特点。

一般来说,存储架构可以采用分层架构,包括三层:前端应用层、中间存储层和后端存储层。

1. 前端应用层:负责用户的请求接收和处理,包括用户登录、图书查询、阅读等功能。

这一层可以采用分布式架构,通过负载均衡技术实现请求的分发和负载均衡,提高系统的并发处理能力。

2. 中间存储层:负责数据的存储和管理,包括图书元数据、图书内容、用户信息等。

这一层可以采用分布式文件系统,如Hadoop分布式文件系统(HDFS),实现数据的分布式存储和高可用性。

3. 后端存储层:负责数据的物理存储,包括磁盘阵列、存储服务器等。

这一层可以采用网络存储技术,如网络附加存储(Network Attached Storage,简称NAS)或存储区域网络(Storage Area Network,简称SAN),提供高速、可扩展的存储容量。

三、存储设备选型为了满足数字图书馆系统的存储需求,需要选择适合的存储设备。

存储设备的选型应考虑以下几个因素:1. 存储容量:根据图书馆的规模和预计的图书数量,选择具有足够存储容量的设备。

可以根据实际需求选择磁盘阵列的规模和数量,或者采用分布式存储系统。

2. 存储性能:数字图书馆系统需要快速响应用户的请求,因此存储设备的性能是关键因素。

可以选择具有高速读写能力的磁盘阵列,或者采用固态硬盘(SSD)来提高存储性能。

3. 可靠性和可用性:数字图书馆系统的数据是非常重要的,因此存储设备的可靠性和可用性是必须考虑的因素。

数字图书馆系统的存储解决方案

数字图书馆系统的存储解决方案

数字图书馆系统的存储解决方案概述:数字图书馆系统是一种用于管理、存储和检索电子图书、期刊、论文等数字化文献资源的系统。

为了保证数字图书馆系统的高效运行和可靠性,需要采用合适的存储解决方案来满足数据的存储、备份和恢复需求。

本文将介绍一种适用于数字图书馆系统的存储解决方案,并详细说明其架构、技术特点和优势。

一、存储解决方案架构数字图书馆系统的存储解决方案主要包括存储设备、存储软件和存储网络三个方面。

1. 存储设备:采用高性能、高可靠性的存储设备是数字图书馆系统的关键。

可以选择使用磁盘阵列(RAID)作为主要存储设备,通过数据分布和冗余技术提高数据访问性能和容错能力。

同时,为了满足大规模数据存储的需求,可以采用分布式存储系统,将数据分散存储在多个节点上,提高存储容量和并行性。

2. 存储软件:存储软件是数字图书馆系统的核心组成部分,负责数据的管理、存储和检索。

可以选择使用开源的存储软件,如Ceph、GlusterFS等,这些软件具有良好的可扩展性和可靠性,能够满足数字图书馆系统的存储需求。

此外,还可以根据具体需求进行定制开发,提供更加灵活和高效的存储功能。

3. 存储网络:存储网络是连接存储设备和存储软件的关键环节,对数据的传输速度和稳定性有重要影响。

可以选择使用高速网络技术,如光纤通信、以太网等,提供高带宽和低延迟的存储网络。

此外,还可以采用网络存储协议,如NFS、iSCSI等,实现存储设备和存储软件之间的数据传输和通信。

二、存储解决方案技术特点数字图书馆系统的存储解决方案具有以下几个技术特点:1. 可扩展性:存储解决方案能够根据需要进行灵活扩展,满足数字图书馆系统不断增长的存储需求。

可以通过增加存储设备、调整存储软件配置和优化存储网络等方式,提高存储容量和性能。

2. 可靠性:存储解决方案采用冗余和备份技术,确保数据的可靠性和安全性。

可以通过数据镜像、数据备份和故障转移等手段,减少数据丢失和系统故障对数字图书馆系统的影响。

数字图书馆系统的存储解决方案

数字图书馆系统的存储解决方案

数字图书馆系统的存储解决方案一、引言数字图书馆系统是现代图书馆发展的重要组成部分,它将传统图书馆的资源数字化并提供在线访问。

为了保证数字图书馆系统的正常运行和高效管理,一个可靠的存储解决方案是必不可少的。

本文将介绍数字图书馆系统的存储解决方案,包括存储架构设计、数据备份和恢复、容量规划等方面的内容。

二、存储架构设计1. 存储设备选择数字图书馆系统的存储设备应具备高性能、高可靠性和可扩展性。

常见的存储设备包括硬盘阵列、网络存储设备和磁带库等。

根据实际需求和预算限制,可以选择合适的存储设备组合。

2. 存储网络设计为了提供高速的数据传输和可靠的存储访问,数字图书馆系统的存储网络应采用高速以太网或光纤通道等技术。

此外,还可以考虑使用虚拟存储网络(SAN)或网络附加存储(NAS)等技术,以提高存储性能和管理效率。

3. 存储架构布局根据数字图书馆系统的规模和性能需求,可以采用分布式存储架构或集中式存储架构。

分布式存储架构将存储资源分散在各个节点上,可以提高系统的可用性和容错性;集中式存储架构将存储资源集中在一个节点上,可以简化管理和维护。

三、数据备份和恢复1. 定期备份为了防止数据丢失和系统故障,数字图书馆系统的数据应定期进行备份。

备份可以分为完全备份和增量备份两种方式。

完全备份是将整个系统的数据进行复制,适用于系统初始备份或重要数据的备份;增量备份是只备份发生变化的数据,适用于日常的备份操作。

2. 备份策略备份策略应根据系统的重要性和数据的变化频率来确定。

对于重要数据,可以采用更频繁的备份策略,如每天或每周进行备份;对于不太重要的数据,可以采用较少的备份策略,如每月进行备份。

此外,还可以采用异地备份的方式,将备份数据存储在不同的地理位置,以提高数据的安全性。

3. 数据恢复在数据丢失或系统故障发生时,数字图书馆系统应具备快速恢复数据的能力。

可以通过备份数据进行恢复,或者采用数据镜像和快照技术来实现实时恢复。

  1. 1、下载文档前请自行甄别文档内容的完整性,平台不提供额外的编辑、内容补充、找答案等附加服务。
  2. 2、"仅部分预览"的文档,不可在线预览部分如存在完整性等问题,可反馈申请退款(可完整预览的文档不适用该条件!)。
  3. 3、如文档侵犯您的权益,请联系客服反馈,我们会尽快为您处理(人工客服工作时间:9:00-18:30)。

某某图书馆存储架构技术建议书杭州宏杉科技有限公司2012年3月目录第1章宏杉科技存储简介 (3)第2章存储技术发展趋势 (4)第3章需求分析 (6)3.1数字图书馆概述 (6)3.2某某图书馆需求分析 (9)3.3存储架构分析 (9)3.4某某图书馆存储系统需求 (10)第4章存储架构设计方案 (12)4.1方案设计 (12)4.2实施规划 (13)第5章集中存储解决方案 (14)5.1宏杉科技存储简介 (14)5.2产品特点 (15)5.3方案优势 (21)第6章CDP(持续数据保护)方案详述 (22)6.1总体方案描述 (22)6.2方案实施阶段描述 (23)6.3CDP特点描述 (24)6.3.1用更先进的持续数据保护(CDP)技术替代了陈旧的磁带库备份方式 (24)6.3.2明确的RPO(数据恢复点目标)和RTO(数据恢复时间目标) (24)6.3.3能感知应用,确保数据完整性的机制 (25)6.3.4管理简单、实施方便 (25)6.3.5彻底消除了封闭技术带来的不兼容和后期品牌锁定 (25)第7章数据备份 (25)7.1数据备份实施描述 (25)7.2数据备份功能描述 (26)第8章服务器系统保护 (27)第1章宏杉科技存储简介杭州宏杉科技有限公司(MacroSAN Technologies Co., Ltd. 中文简称:宏杉科技,英文简称:MacroSAN)是一家专注于企业级存储系统及解决方案研发、生产与销售的厂商,是目前全球存储行业中少数具有从低端到高端全系列产品研发生产能力的高科技企业。

宏杉科技推出的宏杉科技 MS系列企业级存储系统可广泛适用于云计算、物联网与智能监控等大中型数据中心应用。

●挑战在云计算带来新一代数据中心技术融合和技术变革的背景下,终端的多样化与海量化、应用的虚拟化与分布化、数据中心的大型化对存储系统带来巨大挑战。

传统存储系统在新一代数据中心需求面前捉襟见肘:半手工式使用和管理、低速低并发访问性能的硬件结构,单一存储介质的技术成本局限、预设和固定的应用与存储资源绑定、封闭式数据管理等缺陷都严重制约着数据中心的发展。

以云计算为代表的新一代应用系统对存储系统软硬件设计提出了严峻挑战,要求数十倍地提高性能、实现动态配置和自动化管理、实现应用驱动和智能化管理、大幅降低一次性采购成本、能耗和人员维护管理成本。

局部功能的增加和改进已无法应对,必须对传统存储软硬件架构进行变革性设计和根本性创新。

●创新·变革宏杉科技 MS系列存储系统创新性地采用最新芯片技术,设计出高性能和高可靠的硬件结构,为海量应用并发提供了大缓存、高带宽、高处理能力的百G级硬件平台。

在此基础上,宏杉科技进一步开发出双活控制器技术、控制器自动负载均衡、智能缓存配置技术等,实现了业务驱动的硬件资源动态部署。

宏杉科技创新性地开发出ICMT技术(Intelligent Cell Management Technology智能数据块管理技术),革命性地采用虚拟化技术设计存储系统核心架构,将存储的介质资源与应用访问分离。

存储系统因此能够根据应用热点变化,自动将存储介质资源与应用热点智能匹配。

ICMT技术在大幅度提升应用性能的同时,大幅度降低了硬件的一次性采购成本,为数据中心运营带来巨大的效益。

宏杉科技在实践中发现:当前广泛使用大容量数TB硬盘,但硬盘转速和性能并未随容量同步提升。

传统RAID技术在处理频繁的磁盘介质错误时,暴露出低性能、重建时间超长的问题,数据丢失风险数倍提高。

宏杉科技带来新一代CRAID技术(基于Cell的RAID管理),创新性地对传统RAID进行深度改进和提升。

CRAID技术在保留传统RAID数据校验特性的同时,大幅度提升了系统对磁盘介质错误的容错和处理能力,普通RAID5和RAID6等出现多块磁盘介质错误就会丢失数据,而采用CRAID技术后,系统仍然能够保证RAID组正常运行和数据安全。

宏杉科技 MS系列引入IDDC机制(Initiative Disk Diagnosis Center主动式磁盘检测中心),主动检测和预防磁盘介质错误。

基于CRAID技术和IDCC机制的宏杉科技 MS全系列产品,在用户采用大容量低成本硬盘时,能够大比例降低磁盘介质错误引发RAID重建的机率,大幅度缩短重建时的RAID重建时间,有效改善RAID重建对业务应用带来的性能影响,显著降低磁盘损坏未及时更换带来的数据丢失风险。

●开放架构在云计算带来业务应用和IT管理的深刻变化之际,宏杉科技认识到存储在数据管理方面扮演的重要角色。

作为IT基础架构的三大支柱(网络、服务器、存储)之一,传统存储系统却一直是远离数据中心整体管理的孤岛。

宏杉科技从应用系统整体管理和大型数据中心运营的角度出发,将软硬件设计构建为“开放式数据存储平台”(ODSP Open Data Storage Platform),使存储不再是一个传统的“数据存取黑盒子”。

ODSP能够通过应用自动化驱动、接口开放、规格功能定制、行业特性开发移植等多种方式,将存储系统真正与用户业务系统无缝融合,使存储真正成为为业务应用提供智能、弹性、高性能、高可靠的数据服务平台。

宏杉科技把传统上相互分离的存储数据管理各项功能从技术核心层进行了统一的设计和模块化规范,提供了包括自动精简配置、自动数据分层管理、数据备份、容灾、数据归档、重复数据删除、业务按需资源分配、统一存储等在内的各项功能。

ODSP使宏杉科技存储系统成为应用驱动的智能化动态资源配置系统。

整个软硬件平台能够根据用户和合作伙伴的业务需求进行高效部署和定制,成为用户和合作伙伴运营数据业务的最佳平台和强大支撑。

●合作共创今天,中国IT需求正在向更深更广的方向推进。

电子政务云、商务云、三网融合、智能电网、物联网、智能监控等新型应用正在主导下一个十年的IT建设浪潮。

这些新型应用的背后,无疑都蕴藏着中国各行业用户新一轮业务创新和管理模式创新的巨大需求,同时也蕴藏着对本地化技术供应商的巨大需求。

宏杉科技立足于专业化的存储和数据管理平台,通过开放合作策略,愿与各界云服务提供商、软件开发商、行业应用开发商、行业集成商、专业设备提供商一起,面向新一代应用打造基于云计算的创新平台和解决方案。

第2章存储技术发展趋势信息或数据在IT系统中,总是必然处于“计算”、“存储”、“传输”三个状态之一。

这三个方面也正好对应于整个IT技术的三个基础架构单元——计算、存储和网络。

传统上,主机系统既负责数据的计算,也在通过文件系统、数据库系统等手段对数据进行逻辑和物理层面的管理,而存储设备,则是以直连存储(DAS)方式连接在主机系统中。

然而,由于历史发展的原因,各种标准和各种版本的操作系统、文件系统拥挤在用户的系统环境中,使数据被分割成杂乱分散的“数据孤岛” (data island),无法在系统间自由流动,自然也就谈不上设备的充分利用和资源共享。

有鉴于此,人们开始寻找存储网络化和智能化的方法,希望通过提高存储自身的数据管理能力,独立于主机系统之外,以网络方式连接主机和存储系统,以设备资源透明的方式为计算提供数据服务。

从而将数据管理的职能,从标准混乱、应用负荷沉重的主机中分离出来。

在网络存储的发展过程中,SAN(存储区域网络)和NAS(网络附加存储)得到了迅速的发展。

NAS是一种直接利用局域网,基于文件的存储架构,存储数据的传输也是基于局域网。

NAS的最大优点是可以很容易实现异构平台的文件共享,NAS的另一个优点在于其扩展性,因为存储单元可以比较容易地加入到网络中。

然而,NAS存储在数据备份或存储过程中会占用网络的带宽,可扩展性有限,并且访问需要经过文件系统格式转换,所以是以文件一级来访问,不适合Block级的应用,尤其是要求使用裸设备的数据库系统。

而SAN存储架构的出现弥补了NAS的不足,为存储系统的发展产生了巨大的推动力。

SAN (Storage Area Network)存储区域网络,是一种通过网络方式连接存储设备和应用服务器的存储架构,这个网络专用于主机和存储设备之间的访问。

当有数据的存取需求时,数据可以通过存储区域网络在服务器和后台存储设备之间高速传输。

FC光纤通道技术使得存储系统的可升级性、稳定性、可用性和性能都大大加强。

不过,它最大的优势是集中的管理,这就降低了总拥有成本。

光纤通道主要应用在某些重要业务和高性能应用,如数据中心环境。

然而,在过去8年以FC协议为主的SAN存储系统建设中,人们逐渐发现FC协议虽然基本解决了传输速度和扩大容量的问题,却难以完全承担起存储系统独立化的重任。

FC SAN的互操作性仍是实施过程中存在的主要问题。

SAN本身缺乏标准,尤其是在管理上更是如此。

虽然光纤通道(Fibre Channel)技术标准的确存在,但各家厂商却有不同的解释,于是,互操作性问题就像沙尘暴一样迎面扑来,让人猝不及防。

这就导致了FC兼容性差、成本高昂、扩展能力差、异构化严重的问题。

在存储以SAN的名义独立走上IT舞台的同时,IP和以太网技术在网络领域突飞猛进,在同样1997-2005的8年中,主流商用协议标准从10M发展到了10G,整整提升了1000倍,行业的发展动力和技术标准的成熟性已无可争辩。

IP技术已经成为整个IT行业中最成熟、最开放、发展最迅速、成本最低、管理最方便的数据通讯方式。

在经历了FC SAN发展的过渡性尝试后,整个行业开始考虑将FC传输技术替代为更加成熟可靠、成本更低的IP技术,以适应广域网数据应用、大规模服务器数据集中、海量数据存储等应用对新一代存储系统的要求,同时为“随需应变”的IT新时代到来,奠定坚实的开放化标准基础。

2003年,以IBM等公司共同发起的iSCSI(Internet SCSI)协议,通过IETF组织的审议,公布为RFC标准。

iSCSI协议实际就是将标准的SCSI存储访问指令,打包到TCP/IP中进行传输。

iSCSI标准一经公布,就以其低成本、高可管理性、天然的跨广域数据传输和管理能力、海量组网能力得到了业界的青睐。

基于iSCSI协议构建的IP SAN存储,已崭露头角,成为新一代存储系统的标准,成为IT新时代围绕IP技术进行的网络与存储融合的标志性技术。

由于iSCSI协议将SCSI数据传输的基础从封闭昂贵的FC协议转移到IP之上,使存储系统突破了长期困扰着存储系统的兼容性、成本和管理性桎梏,使存储网格、广域数据传输、大规模服务器数据集中、远程容灾、高性能交换式存储架构等存储技术脱下昂贵的外衣,成为广大行业客户均能轻松获得的最新存储技术。

随着iSCSI技术的完善,数据块级的存储应用将变得更为普遍,存储资源的通用性、数据共享能力都将大大增强,并且更加易于管理。

相关文档
最新文档