中科曙光ParaStor200-G10并行存储系统用户手册V10
923842-服务器-曙光海量非结构化数据存储解决方案(Parastor200)
第一章概述1.1.什么是并行存储系统并行存储系统基于一种开放式的存储架构，采用并行文件系统，将多台物理存储设备（这些物理设备可以是磁盘阵列，也可以是通用的存储服务器）的存储空间虚拟成一个具有统一访问接口和管理界面的存储池（也叫统一命名空间）。
应用服务器通过统一访问接口获得所需得存储资源。
用户的数据按照一定的负载均衡策略，条带化的分布到后台的多套存储设备上，从而能够实现数据的并行读写以获得更高的并发访问性能，充分利用多台存储设备的性能和更大的存储容量，并有效的提高存储空间利用率，并且所有的存储设备可以实现统一的管理和监控，大大减轻了管理工作负担！1.2.并行存储系统的特点⏹开放式架构（高扩展性）。
开放式架构是针对并行存储系统内部构成单元而言。
并行存储系统通常包括元数据单元、数据单元、网络单元、客户端单元，每个单元都可以按需进行动态扩展，并且每个单元可以开放的采用其业界最新的技术，而无需改变系统架构。
⏹并行文件系统。
并行文件系统是并行存储系统的灵魂所在，所有对并行存储系统的操作都经由并行文件系统统一调度和分发，分散到并行存储系统各个数据节点上完成。
⏹全局统一命名空间。
全局统一命名空间在很多厂家的存储概念中都出现过，在并行存储系统中全局统一命名空间强调的是同一个文件系统下的统一命名空间。
⏹易管理性。
并行存储系统通常能够提供一种集中的、简便易用的管理方式，不需要修改或重新编译客户端操作系统，采用文件系统提供的高速客户端软件或是业界标准的访问协议访问存储系统。
而且，随着存储容量的增加，客户不需要增加额外的管理人员，将精力更多的投向自己的应用领域。
⏹动态负载均衡。
在并行存储系统中，前端访问存储系统的读写操作，通过并行文件系统的负载均衡策略，将数据访问分散到存储系统的各个数据节点上，大大减轻了每个节点的负载。
而后端访问数据，通过开放式的架构和存储网络，数据会分布在所有存储设备上进行存放和读取，每个读写操作都由更多的磁盘参与，因此大大的提高了读写操作的性能。
923845-服务器-中科曙光ParaStor200并行存储系统介绍
信息技术的发展带来数据的爆炸性增长，PB 规模的数据越来越常见，这些数据80%以上是视频、音频、图片等非结构化数据，如何有效地管理海量非结构化数据已成为IT 管理者所必须重视的问题。
传统的SAN 和NAS 存储架构已经无法满足海量非结构化数据处理的密集型I/O 及海量并发访问的需求。
ParaStor200并行存储系统汇集了曙光公司多年以来在并行计算和海量数据处理方面的丰富经验，从架构上彻底消除了传统存储系统的瓶颈，能够满足高带宽和高并发的海量文件存取的需求，为用户带来前所未有的存储性能体验。
产品概述ParaStor200并行存储系统采用了代表存储技术、网络通信技术以及数据管理技术发展方向的并行体系架构，是一款面向海量非结构化数据处理、拥有自主知识产权的高端存储系统。
它可以提供TB/s 级的高速带宽和EB 级的海量存储空间，能够满足飞机汽车船舶设计、生物基因研究、材料科学研究、天气预报、地震监测、环境监测分析、能源勘探、电子商务、网络游戏、社交与视频分享网站建设、动漫渲染、视频编辑处理等领域中对于存储容量和I/O 性能要求极高的应用，可广泛应用于政府、教育、科研、制造、企业、医疗、石油、广电、互联网等行业。
ParaStor200并行存储系统先进的架构使其具备超强的横向扩展能力，只需要简单地增加数据控制器，即可获得更大的存储容量和更多的数据通道，从而获得更高的系统聚合带宽和I/O 性能。
随着数据控制器的增加，所有物理资源(CPU 、缓存、网络带宽和磁盘读写带宽)自动实现负载均衡，满足成千上万个客户端的数据并发存取需求。
此外，ParaStor200高可用、全冗余的架构设计也使其具有及时的系统预警、准确的故障定位和优越的容错恢复能力，可以保障业务系统7×24小时的持续可用，实现海量存储系统最高级别的可靠性。
曙光并行存储系统ParaStor200特点：● EB 级单一命名空间●支持高并发I/O ● TByte/s 级聚合带宽 ● 性能随容量的增加呈线性增长● 全冗余架构，无单点故障● 自动化故障恢复产品特性EB级单一命名空间全局单一命名空间可以为用户构建EB级容量的虚拟存储池，所有客户端可以在同一个命名空间下共享访问所有的数据。
曙光集群简明使用手册ppt课件
2020/2/20
曙光集群系统使用和管理
8/56
集群系统的体系结构
2020/2/20
曙光集群系统使用和管理
9/56
集群系统的物理架构
(InfiniBand)
2020/2/20
曙光集群系统使用和管理
10/56
曙光集群的计算系统
计算节点
一般为双路或四路 刀片或机架式服务 器，为计算系统的 主力。
SMP 胖节点 一般用于一些有大 内 多存核内、处容高理I的O需或求单，机 满足一些特殊应用 的需求。
计算 系统
2020/2/20
曙光集群系统使用和管理
GPGPU节点
GPU即图形处理单元， GPGPU的意思为使用显 卡做通用计算，由于 GPU卡具有更多计算核 心数，更高的能效比和 更强的浮点计算能力， 所以对于适合GPU，并 在GPU上移植成功的应 用软件提供更高的性能
14/56
曙光集群网络拓扑图(示例)
2020/2/20
曙光集群系统使用和管理
15/56
曙光集群用户视图(示例)
2020/2/20
曙光集群系统使用和管理
16/56
三、曙光集群的使用
• 远程登录系统 • 上传下载数据 • Linux常用命令 • 安装和运行程序 • 使用作业调度
2020/2/20
曙光集群系统使用和管理
VNC是一款优秀的远程控制工具软件，由AT&T的欧洲研究实验室开 发，是基于UNIX和Linux操作系统的免费开放源码软件，远程控制能 力强大，高效实用。
11/56
曙光集群功能节点
管理节点
•用于运行系统级的管 理软件，性能要求不 高，但可靠性要求高， 数量少
曙光ParaStor300S并行分布式云存储系统产品技术白皮书V1.6
曙光ParaStor300S并⾏分布式云存储系统产品技术⽩⽪书V1.6信息技术的发展带来数据的爆炸性增长，⽏庸置疑，我们已经全⾯跨⼊⼤数据时代，PB 规模的⾮结构化数据越来越常见，如何有效地管理这些数据，并进⼀步发掘数据价值，已成为IT 管理者所必须重视的问题。
同时⼤数据4V 特性也对存储系统的⼤容量、⾼性能、易扩展、易⽤性等提出了更⾼要求。
传统的SAN 和NAS 存储架构已经难以满⾜海量数据的密集型I/O 并发访问需求。
ParaStor300S 并⾏分布式云存储系统，是在曙光公司近10年来海量数据存储与处理的基础之上，针对⼤数据时代的特点，全新设计并全⾯优化的⾼端存储系统。
产品定位集群⽂件/对象统⼀存储基于曙光完全⾃主研发的并⾏分布式软件ParaStor 构建的集群存储系统，对外统⼀提供多种存储协议：提供⽂件存储服务，包括Linux POSIX 、NFS 、SMB 、FTP 等，满⾜Windows 、Linux 、Unix 等异构平台的不同访问需求；提供对象存储服务，兼容Amazon S3接⼝，满⾜云⽣态的应⽤需求。
特别地，同⼀集群可以同时提供⽂件/对象接⼝，访问⽅式更为灵活。
Scale-Out 横向扩展的并⾏架构基于服务器构建的并⾏分布式存储系统，对外提供单⼀的命名空间。
⽀持3~4096节点的弹性⽆缝扩展，单⼀存储空间容量可扩展⾄EB 级。
具备超强的横向扩展能⼒，只需简单地增加存储节点，即可获得更⼤的存储容量和更多的数据通道，从⽽获得更⾼的系统聚合带宽和I/O 性能。
⾯向海量⾮结构化数据存储场景 ParaStor300S 并⾏分布式云存储系统适⽤于存在数据共享需求的多种应⽤领域，如⾼性能计算、⽣物信息、⽓象预报、环境监测分析、地震监测、能源勘探、卫星遥感、视频监控、媒资管理、视频编辑处理等，可以⼴泛应⽤于政府、教育、科研、医疗、⽯油、⼴电、企业等⾏业。
ParaStor300S 并⾏分布式云存储系统新⼀代⾃主研发的海量⾮结构化数据存储 EB 级共享空间3~4096节点单⼀命名空间按需分配，在线扩容多种访问协议 ? Linux POSIXNFS/CIFS/FTPS3多款硬件平台2U12、4U24、4U36SATA/SAS/SSD 混插智能存储策略SSD 读缓存加速细粒度配额管理多重数据保护2~4副本N+M:b 纠删码快照全冗余设计，⽆单点故障简易运维管理多套集群统⼀管理资源、状态实时监控邮件、短信、SNMP 告警系统架构 ParaStor300S 并⾏分布式云存储系统（下⽂简称为ParaStor300S ）的整体逻辑架构如图 1所⽰：NFS CIFS FTP 硬件节点层数据处理层应⽤协议层存储节点池Node Node …...Node Node Node …...Node 存储节点池Node Node …...Node Node Node …...NodePOSIX S3UNIX/LINUX Windows 图 1 系统架构ParaStor300S 基于服务器构建，多个节点构成硬件资源池；数据处理层将硬件资源池统⼀管理，对外提供单⼀的命名空间；通过POSIX 、集群NAS （NFS 、CIFS 、FTP ）、S3等协议供上层应⽤访问。
曙光MPI用户手册(TC1700&TC4000L)
曙光MPI用户手册(TC1700 & TC4000L)曙光信息产业有限公司2003-9目录MPI的使用 (1)1.MPI简介 (1)2.MPI的程序设计 (1)2.1 MPI的基本功能 (1)2.2 MPI的几个重要元素 (2)2.3 消息 (2)2.4 point-to-point通信 (3)2.5 集群通信 (5)3. MPI应用程序的编译 (6)3.1 环境设置 (6)3.2 make (6)3.3 mpif77和mpicc (7)4. MPI应用程序的运行 (8)5. 常见问题分析 (8)附录MPI函数简表 (9)MPI的使用1.MPI简介MPI（M essage P assing I nterface）是消息传递接口的标准，当前通用的是MPI1.2规范。
不久前制定的MPI2.0规范除支持消息传递外，还支持MPI的I/O规范和进程管理规范。
MPI正成为并行程序设计事实上的工业标准。
MPICH含三层结构，最上层是MPI的API，基本是点到点通信和点到点通信基础上构造的集群通信（Collective Communication）；中间层是ADI层（Abstract Device Interface），其中device可以简单地理解为某一种底层通信库，ADI就是对各种不同的底层通信库的不同接口的统一标准；最下层是具体的底层通信库，例如工作站机群上的p4通信库。
MPICH在不同平台上的实现都是根据不同的device（即平台或底层通信）实现不同的ADI 接口，这种实现机制的好处有：将与device有关和无关的代码分开，减小实现难度；利于MPI的不断升级；提高MPI的性能。
2.MPI的程序设计2.1 MPI的基本功能MPI1.2标准中没有对如何产生多个MPI进程作标准性规定，而把这一工作交给了具体的实现。
但是它有如下众所周知的假设：静态加载，即所有进程在加载完以后就全部确定，直至整个程序结束才终止，在程序正常运行期间没有进程的创建和结束。
中科曙光云盘系统用户手册
用户手册
声 明
本手册的用途在于帮助您正确地使用曙光公司服务器产品(以下称“本产品”)，在安装和第一次使用本产品前，请您务必先 仔细阅读随机配送的所有资料，特别是本手册中所提及的注意事项。这会有助于您更好和安全地使用本产品。请妥善保管本 手册，以便日后参阅
本手册的描述幵不代表对本产品觃栺和软.硬件配置的任何说明。有关本产品的实际觃栺和配置，请查阅相关协议.装箱单.产 品觃栺配置描述文件，或向产品的销售商咨询。
电源要求 安装本设备时， 必须遵守当地或区域有关安装信息技术设备的电气法觃， 而且必须由经过认可的电气工程师来完成安装操作。 本设备经过精心设计，可在符合国家供电觃范的安装环境中运行。有关选件的电源额定值，请参阅产品额定值标签或随该选 件提供的用户文档。 安装多台服务器时，可能需要使用其它配电设备来为所有设备安全供电。请遵守以下准则： ·平衡可用交流电源分支电路乊间的服务器电源负荷。 ·不允许系统总的交流电流负荷超过分支电路交流电流额定值的80%。 ·请勿使用普通的电源接线板来连接本设备。 ·通过单独的电路为服务器供电。
2 使用说明 ................................................................................................................ 16
2.1 云盘软件安装 ..................................................................................................... 16 2.2 网页版云盘的使用.............................................................................................. 16 2.2.1 2.2.2 2.2.3 2.2.4 2.2.5 2.2.6 2.2.7 2.2.8 2.2.9 用户注册 ......................................................................................................... 16 用户登彔 ......................................................................................................... 16 用户注销 ......................................................................................................... 17 曙光云盘导航栏 .............................................................................................. 17 我的曙光云盘 ................................................................................................. 19 鼠标右键功能 ................................................................................................. 24 社交分享 ......................................................................................................... 30 文件整理功能 ................................................................................................. 33 相册地点 ......................................................................................................... 35
曙光ParaStor云存储系统
软件特性
内嵌ParaStor组件及软件
POSIX/NFS/CIFS/FTP接口 RESTful接口 双副本（推荐）、2+2:1 权限管理、配额、WORM
适合容量小、大文件存储场景 适用于金融票据、医疗PACS等市场 小文件存储、有扩容要求不建议推荐
曙光ParaStor云存储系统
目录
1 2
市场地位 产品规格
产品特性
3
4 5
应用场景
竞争分析
存储市场发展趋势
存储市场变化
2015年，全球存储市场缓慢增长（2.2%） 2015年中国大陆增长率14.8%，全球市 场份额7.8% 国有厂商市场增长率为43.3%，目前市 场份额达56.9%
$18.00 $16.00 $14.00 $12.00 $10.00 $8.00 $6.00 $4.00 $2.00 $0.00
视频监控专用存储系统
视频监控专 用存储系统
硬件
单路服务器 4U24、4U36盘位 32GB Cache/3.5”HDD 1GbE/10GbE
98000974
主推 场景 推广 “死 区”
视频监控对成本要求较为严格 仅作为存储资源池，节点与 视频业务无复用需求
存储节点上需要运行视频业务软件 对性能要求较高
2013年 2010年单一 中国区NAS IDC 系统16PB 排名第3
2014年
中国区NAS IDC 排名第２
2015年 中国区 NAS IDC 排名第1
截至2015年 1100+用户成功应用 累计销售容量260+PB
曙光磁盘阵列DS800-G10售前培训资料V1.0
数据安全性提升
节省投资
DDP 存储池介绍
每一个卷被分成不同的数据块，写到不同的硬盘上 当DDP扩容或者失效重建过程，会大幅度提升扩容和重建效率 每块硬盘中空闲的空间会被使用，提升读写性能
传统RAID
磁盘组织管理通过RAID组 卷空间只能分布在RAID组中的磁盘上
– 性能受磁盘数目限制 热备盘直到硬盘故障的时候参与工作 热备的空间总是处于备用状态
DS800-G10产品视图
4个 6Gb SAS 4X 主机接口,8个8Gb FC主机接口 2个 6Gb SAS 4X扩展接口 4个管理网口，互为冗余，数字Debug状态LED灯 冗余电源，冗余散热器设计
DS800-G10产品架构
高效能处理器，内置XOR加速引擎 端对端6Gb SAS通道，保障无阻塞传输 灵活搭配FC,IP子卡，可实现丰富的拓扑连接
提供丰富的拓扑连接方案
SAS
iSCSI
优点
价格低廉的共享 DAS 简易 良好的性能
低成本存储网络 被广泛了解的技术 应用广泛
可靠成熟的技术 性能与可靠性 具有自动连接速度向下兼容的 投资保护
目标市场/应用程序
集成机架解决方案 单个数据中心存储解决方案 小型服务器/BladeCenter 整合 虚拟化与 MS 应用程序
DDP Optimal
– 硬盘故障对系统的性能影响最小 Acceptable
Performance
– 显著加快系统恢复时间
RAID
Rebuild
– 10倍于传统RAID的恢复速度
– 加速数据重建
Time
磁盘池规避硬盘热点
– 所有的卷空间分布在磁盘池中全部的硬盘中
– 降低硬盘故障率
动态的数据分布和再分配由后台持续进行
- 1、下载文档前请自行甄别文档内容的完整性，平台不提供额外的编辑、内容补充、找答案等附加服务。
- 2、"仅部分预览"的文档,不可在线预览部分如存在完整性等问题,可反馈申请退款(可完整预览的文档不适用该条件!)。
- 3、如文档侵犯您的权益，请联系客服反馈,我们会尽快为您处理(人工客服工作时间：9:00-18:30)。
·在将静电敏感部件运抵不受静电影响的工作区之前，请将它们放在各自的包装中进行保管。
·将设备从包中取出，不要放下，直接安装到服务器中。如果需要放下设备，请将它放回防静电包中。请勿将设备放在服务器外盖或金属表面上。
·当设备仍然在防静电包中时，将它与服务器外部未上漆的金属表面接触至少2秒。这样可以释放防静电包和您身体上的静电。
中科曙光ParaStor200云存储系统
用户手册
声 明
本手册的用途在于帮助您正确地使用曙光公司云存储产品(以下称“本产品”)，在安装和第一次使用本产品前，请您务必先仔细阅读随机配送的所有资料，特别是本手册中所提及的注意事项。这会有助于您更好和安全地使用本产品。请妥善保管本手册，以便日后参阅
本手册的描述并不代表对本产品规格和软.硬件配置的任何说明。有关本产品的实际规格和配置，请查阅相关协议.装箱单.产品规格配置描述文件，或向产品的销售商咨询。
商标和版权
“SUGON”及图标是曙光信息产业股份有限公司的商标或注册商标。
“中科曙光”及图标是曙光信息产业股份有限公司的商标或注册商标，文中“曙光信息产业股份有限公司”简称“曙光公司”。
“AMD”，“Opteron”及图标是Advanced Micro Devices公司的注册商标。
“Microsoft”.“Windows”.“Windows Server”及“Windows Server System”是微软公司的商标或注册商标。
·减少移动。移动会导致您身体周围的静电积累。
·握住设备的边缘或框架，小心操作设备。
·请勿触摸焊接点.引脚或裸露的电路。
如您不正确地或未按本手册的指示和要求安装.使用或保管本产品，或让非曙光公司授权的技术人员修理.变更本产品，曙光公司将不对由此导致的损害承担任何责任。
本手册中所提供照片.图形.图表和插图，仅用于解释和说明目的，可能与实际产品有些差别，另外，产品实际规格和配置可能会根据需要不时变更，因此与本手册内容有所不同。请以实际产品为准。
电源相关的操作说明
接通服务器电源
要接通服务器电源，请按“开机/关机”按钮2.按照操作系统文档的说明关闭操作系统。
（如果操作系统自动将服务器置于待机模式，则忽略下一步。）
3.按开机/关机按钮，将服务器置于待机模式。当服务器激活等待电源模式时，系统电源LED指示灯将变为红色。
4.拔下所有电源线插头。系统现在即处于断电状态。
电源要求
安装本设备时，必须遵守当地或区域有关安装信息技术设备的电气法规，而且必须由经过认可的电气工程师来完成安装操作。本设备经过精心设计，可在符合国家供电规范的安装环境中运行。有关选件的电源额定值，请参阅产品额定值标签或随该选件提供的用户文档。
安装多台服务器时，可能需要使用其它配电设备来为所有设备安全供电。请遵守以下准则：
上面未列明的本手册提及的其他产品.标志和商标名称也可能是其他公司的商标或注册商标，并由其各自公司.其他性质的机构或个人拥有。
在本用户手册中描述的随机软件，是基于最终用户许可协议的条款和条件提供的，只能按照该最终用户许可协议的规定使用和复制。
版权所有©2012曙光信息产业股份有限公司，所有权利保留。
本手册受到著作权法律法规保护，未经曙光信息产业股份有限公司事先书面授权，任何人士不得以任何方式对本手册的全部或任何部分进行复制.抄录.删减或将其编译为机读格式，以任何形式在可检索系统中存储.在有线或无线网络中传输，或以任何形式翻译为任何文字。
由于连在同一电源上的多台服务器需要将大量电流导入地下，因此曙光公司建议所用的PDU要么固定地连到建筑物的分支电路上，要么配装一根连接工业插头的不可拆卸的电线。那些符合IEC 60309标准的插头均视为适用插头。建议不要使用普通的电源接线板来连接本服务器。
静电释放
防止静电释放
为避免损坏系统，在安装系统或取放部件时应注意采取必要的防范措施。手指或其它导体所释放的静电可能损坏主板或其它对静电敏感的设备。由静电造成的损坏会缩短上述设备的预期使用时间。要避免静电损害，请注意以下事项：
对于您在本产品之外使用本产品随机提供的软件，或在本产品上使用非随机软件或经曙光公司认证推荐使用的专用软件之外的其他软件，曙光公司对其可靠性不做任何保证。
曙光公司已经对本手册进行了仔细的校勘和核对，但不能保证本手册完全没有任何错误和疏漏。为更好地提供服务，曙光公司可能会对本手册中描述的产品之软件和硬件及本手册的内容随时进行改进和/或修改，恕不另行通知。如果您在使用过程中发现本产品的实际情况与本手册有不一致之处，或您想得到最新的信息或有任何问题和想法，欢迎致电我们或登录曙光公司服务网站垂询。
本手册中所提及的非曙光公司网站信息，是为了方便起见而提供，此类网站中的信息不是曙光公司产品资料的一部分，也不是曙光公司服务的一部分，曙光公司对这些网站及信息的准确性和可用性不做任何保证。使用此类网站带来的风险将由您自行承担。
本手册不用于表明曙光公司对其产品和服务做了任何保证，无论是明示的还是默示的，包括(但不限于)本手册中推荐使用产品的适用性.安全性.适销性和适合某特定用途的保证。对本产品及相关服务的保证和保修承诺，应按可适用的协议或产品标准保修服务条款和条件执行。在法律法规的最大允许范围内，曙光公司对于您的使用或不能使用本产品而发生的任何损害(包括，但不限于直接或间接的个人损害.商业利润的损失.业务中断.商业信息的遗失或任何其他损失)，不负任何赔偿责任。
·平衡可用交流电源分支电路之间的服务器电源负荷。
·不允许系统总的交流电流负荷超过分支电路交流电流额定值的80%。
·请勿使用普通的电源接线板来连接本设备。
·通过单独的电路为服务器供电。
电气接地要求
服务器必须正确接地，以使其正常运行并确保安全。必须遵照以下要求安装本设备：任何区域性或国家/地区的电气连线规程，如国际电工委员会(IEC)规程364第1至7部分。此外，您必须确保安装过程中使用的所有配电设备（如分支连线和插座）均为已列出的或经过认证的接地型设备。