华为RAID2.0+技术培训胶片
T8000 Training Docs L2-4_RAID1制作部分

HUAWEI Confidential
Page 30
删除已有的RAID关系后硬盘数据会不会丢失
如果单板上已经做过RAID1并且安装好了操作系统,然后在LSI控制器配 置界面中选择“Delete Array”删除了RAID,两块硬盘上面的数据均不会 丢失,用任何一个硬盘都可以单独启动操作系统(如果两块硬盘都插在 单板上,则从Slot Num比较小那块硬盘引导)。因为“Delete Array”操 作仅删除两块硬盘的RAID关系,并不破坏硬盘数据。
HUAWEI TECHNOLOGIES Co., Ltd.
HUAWEI Confidential
Page 19
创建RAID1
此处如果按“D”,将删除两块硬盘 上所有的数据,创建一个新的RAID1。 如果按“M”,表示保留上一步选定的 主盘上的数据,并将其同步到从盘。
HUAWEI TECHNOLOGIES Co., Ltd.
HUAWEI Confidential
Page 20
创建RAID1
使用“↓”切换到Slot Num为3硬盘 的“RAID Disk”选项,对Slot Num 为3的硬盘进行设定。
HUAWEI TECHNOLOGIES Co., Ltd.
HUAWEI Confidential
Page 21
创建RAID1
HUAWEI TECHNOLOGIES Co., Ltd.
HUAWEI Confidential
Page 16
创建RAID1
如果需要创建RAID的硬盘是两块新硬盘,或者是两块有数据,但之前没 有创建RAID关系的硬盘,选择“RAID Properties”回车后,将进入如下 界面:
HUAWEI TECHNOLOGIES Co., Ltd.
华为服务器主打胶片_图文

1 客户挑战和发展趋势 2 华为服务器解决方案 3 创新增加客户价值 4 市场进展和全球案例
转型呼唤IT重构
完善开放平台
匹配云、大数据等新技术
降低TCO
传统IOE架构TCO高企
简化架构
提升管理和维护效率
应用加速
采用闪存技术、分布式架构
“云计算、大数据、移动、社 交等新技术和应用需要开放、 分布式,可灵活扩展的架构”
ES3500P/ES3600P V3
刀片 服务器
机架 服务器
FusionServer
NVMe SSD卡
E9000
4P
2 x 2P
12U 8/16/32节点
CH242 V3
CH140 V3
CH226 V3
2P
CH222 V3
CH220 V3
CH121 V3
高密度 服务器
X6800
4U 4/8节点
8U 8P
Latency
SATA HDD >100ms
SAS HDD >10ms
SATA SSD >100µs
SATA HDD SAS HDD
SATA SSD
PCIe SSD
PCIe SSD >10µs
DRAM >10ns
Memory
SRAM ns
CPU <50MB <32GB传统小机的 OPEX居高不下,去IOE是企业 IT重构的必经之路”
“计算、存储、网络融合的架 构能实现快速部署和一体化管 理,提高IT维护人员效率”
“I/O成为瓶颈, 闪存技术和分 布式架构是消除I/O瓶颈的有效 手段”
从封闭到开放架构
华为存储RAID2.0技术细节

存储阵列
Pool 0
Pool 1 …..…
Pool N
离
Pool示意图
HUAWEI TECHNOLOGIES CO., LTD.
Huawei Confidential
Page 5
Huawei Enterprise A Better Way
Pool
Pool即存储池,由存储阵列中多 个硬盘组成,硬盘可选择SSD、 SAS、NL-SAS中的一种或者多种 。 存储系统可划分为多个Pool,每 个Pool分别服务于不同的应用, 整个存储系统也可只有一个Pool 不同Pool之间故障和管理相互隔
Page 14
HUAWEI TECHNOLOGIES CO., LTD.
Huawei Confidential
Huawei Enterprise A Better Way
Copyright© 2012 Huawei Technologies Co., Ltd. All Rights Reserved. The information in this document may contain predictive statements including, without limitation, statements regarding the future financial and operating results, future product portfolio, new technology, etc. There are a number of factors that could cause actual results and developments to differ materially from those expressed or implied in the predictive statements. Therefore, such information is provided for reference purpose only and constitutes neither an offer nor an acceptance. Huawei may change the information at any time without notice.
华为IT产品与解决方案高层主打胶片

• 高性能数据库平台
业界最快交换网络,56Gbps InfiniBand 全SSD 分布式存储
HPC
•
FusionCube 9000 FusionCube 6000
高度集成的虚拟化平台
计算、存储、网络、管理、虚拟化超融合 预集成、预安装、整柜交付
10倍
应用加速
11 分钟
SR-IOV保障虚拟机直接读写SSD物理空间
• 带外管理,BMC智能管理,图形界面更简单
#1
读写带宽和IOPS性能
800K IOPS
全随机4KB稳定读
3.2 TB
单卡/盘最大容量
200万小时
平均无故障时间(MTBF)
27
OceanStor融合存储全景图
融合存储解决方案 大数据存储解决方案 闪存加速解决方案
10
快速成长:服务器
全球第四
连续十二个季度全球服务器发货量
HPE Dell Lenovo Huawei Inspur Cisco
Source: Servers_Marketshare_WW_by_Region_2016Q2, Gartner
11
快速成长:服务器
4路服务器全球发货量(2016 H1)
高校合作
美国 • UC Berkeley AMP Lab: Spark, Parallel Computing • Stanford ONRC Lab: SDN SEDCL: NVM • CMU New memory • UCSC Cold Storage 欧洲 • UK Imperial College London: Big data • Swiss EPFL: Big data • German CASED Institute: Cloud Security 亚洲 • Singapore DSI: NVM • HKUST: RAM Computing • Beijing THU: Cloud • Zhejiang University: VDI
华为服务器产品族主打胶片介绍-V2.0

高密度计算性能,满足IT基础应用的良好 扩展能力 多种可选的本地存储方案,适应对容量、 性能和成本不同需求 关键部件冗余设计,保证设备的高可靠性
(图片待补充)
•
应用场景及价值 RH1285V2规格
• • • • • • •
2 * Intel® Xeon E5-2400 CPU 12个RDIMM/LRDIMM内存插槽 8*2.5 ’ or 4*3.5 ’ SAS/SATA硬盘,支持RAID0/1/5 支持1024M Cache,电池/电容可选 板载2 个网口, 1个管理接口,2个 PCIe 8x 插槽 支持TPM、内置U盘/USB Flash卡 2个冗余热插拔电源
RH5885(2013)
BH620V1/V2 BH641(2013) BH640V2 X6000
刀片
4 CPU(E7-4800) 4 CPU(E5-4600)
定制化 机柜
4 Nodes/2U
80 Nodes/Cabinet
IDataplex
C6100
X8000
HUAWEI TECHNOLOGIES CO., LTD.
Huawei Confidential
Page 11
产品市场定位
RH5485V2 RH2488V2 RH2485V2
高端4插槽产品,华为最高端X86产品,主打最高 性能、扩展性、可靠性要求的市场 中端4插槽产品,满足需求高端处理器,但是价格、 空间要求严苛的市场 低端4插槽产品,适合计算和内存都密集应用,同 时价格、空间要求严苛的市场。 高端2U机架产品,2插槽服务器市场适用性最广泛 产品。 低端2U机架产品,主打IT基础和超大本地存储应 用需求。 低端1U机架产品,主打IT基础和高密应用需求
华为服务器服务工程师培训教材基础产品介绍及硬件拆装培训PPT演示课件

HUAWEI TECHNOLOGIES CO., LTD.
Huawei Confidential
Page 10
E6000 V2刀片产品概述
E6000 V2刀片单板概述-单板功能(处理、接口、管理) 单板处理功能 CPU核数、内存通道和channel、PCIE的链路和速率(3.0) 更多详细信息参考白皮书:
NEM2/3和NEM4/5单元连接,实现业务交换与冗余; 5. 每个服务器单元通过管理通道与2个SMM机框管理单元连接,实现机框内单板管理; 7. 业务交换可根据实际应用,采用主备用或负载均衡方式; 8. NIC交换通道采用的电气接口为 BASE-KX自适应; 9. 扣卡交换通道采用的电气接口可根据实际应用,采用SERDES、FC或其他;
Huawei Confidential
PCIE Page 9
E6000 V2刀片产品概述
E6000 V2刀片单板概述-在E6000系统中的位置和作用 单板主要作用
1. E6000通用业务处理平台是基于多平面、双星型交换结构的平台; 2. 单板插在E6000通用业务处理平台的服务器单元槽位,占用1个槽位空间; 3. 每个服务器单元通过1个双端口的GE芯片分别与NEM0/1单元连接,实现业务交换与冗 余; 4. 每个服务器单元通过两个扣卡,扩展1X/2X/4X Serdes(或其它协议类型)各自分别与
E6000 V2刀片产品概述
E6000 V2刀片产品的种类 BH622 V2 BH640 V2 BH620 V2 BH621 V2
HUAWEI TECHNOLOGIES CO., LTD.
Huawei Confidential
Page 5
E6000 V2刀片产品概述
E6000 V2刀片产品的种类 BH622 V2 BH640 V2 BH620 V2 BH621 V2
RAID2.0

1、在RADI2.0+中,把硬盘域内每个硬盘切分为固定64MB的块(CK),硬盘域内同种类型的硬盘被划分为一个个的Disk Group(DG),从同一个DG上随机选择多个硬盘,每个硬盘选取CK按照RAID算法组成Chunk Group(CKG),CKG被划分为固定大小的Extent, Thick LUN以Extent为单位映射到LUN, Grain在Extent的基础上进行更细粒度的划分,Thin LUN以Grain 为单位映射到LUN。
(1)Disk Domain(磁盘域),一个硬盘域上可以创建多个存储池(Storage Pool)一个硬盘域的硬盘可以选择SSD、SAS、NL-SAS中的一种或者多种,不同硬盘域之间是完全隔离的,包括故障域、性能和存储资源等。
(2)Storage Pool(存储池)& Tier,一个存储池基于指定的一个硬盘域创建,可以从该硬盘域上动态的分配Chunk(CK)资源,并按照每个存储层级(Tier)的“RAID策略”组成Chunk Group(CKG)向应用提供具有RAID保护的存储资源(3)Disk Group(DG),由硬盘域内相同类型的多个硬盘组成的集合,硬盘类型包括SSD、SAS和NL-SAS三种。
(4)LD(逻辑磁盘),是被存储系统所管理的硬盘,和物理硬盘一一对应。
(5)Chunk(CK),是存储池内的硬盘空间切分成若干固定大小的物理空间,每块物理空间的大小为64MB,是组成RAID的基本单位。
(6)Chunk Group(CKG),是由来自于同一个DG内不同硬盘的CK按照RAID算法组成的逻辑存储单元,是存储池从硬盘域上分配资源的最小单位。
(7)Extent,是在CKG基础上划分的固定大小的逻辑存储空间,大小可调,是热点数据统计和迁移的最小单元(数据迁移粒度),也是存储池中申请空间、释放空间的最小单位。
(8)Grain,在Thin LUN模式下,Extent按照固定大小被进一步划分为更细粒度的块,这些块称之为Grain,Thin LUN以Grain为粒度进行空间分配,Grain内的LBA是连续的。
存储产品渠道培训胶片2012.08

低TCO、低PUE 快速部署、模块化交付
应用存储
应
VIS6000
用
HDP3500
存 储
Virtual Intelligent Storage 领先架构
强大虚拟能力
Huawei Symantec Data Protection 集成BE和WSS
主流存储厂商都参加SPC-1和SPEC测试
HUAWEI TECHNOLOGIES CO., LTD.
Huawei Confidential
全方位的兼容性测试&解决方案验证中心
在成都成立了存储兼容性测试实验室、存储性能测试实验室及解决方案验证中心。
兼容性实验室目前已经完成了所有主流产品互操作性测试;解决方案验证中心负 责对典型解决方案进行全方位的验证。
实验室:建立了中国首个“容灾备份和云存储实验室”,并
投入1000多万美金成立首个存储兼容性测试实验室、存
储性能测试实验室及解决方案验证中心。
2008
2006
2009
•全面致力于云存储、云 计算、SSD;高端存储 和增值业务及其解决方 案
•推出中高端SAN 、NAS产品
2002
•存储技术预研
2003
HUAWEI TECHNOLOGIES CO., LTD.
https:///member_com/member_directory
Huawei Confidential
华为存储性能领先—SPC-1、SPEC测试
SAN标准性能测试
• 存储性能委员会(SPC:Storage Performance Council)的SPC-1测试 • 存储SPC-1认证,度量SAN阵列在OLTP、Database和Email三种应用的性能表现 • SPC-1 IOPS:衡量系统平均延迟小于30毫秒的系统最大IOPS性能,越高越好 • SPC-1 $/IOPS:衡量系统单位IOPS用户付出的费用,越低越好 • /results/benchmark_results_spc1#a00107 • 华为S6800T/S5600T在IOPS和$/IOPS测试中都取得同档次领先的成绩
- 1、下载文档前请自行甄别文档内容的完整性,平台不提供额外的编辑、内容补充、找答案等附加服务。
- 2、"仅部分预览"的文档,不可在线预览部分如存在完整性等问题,可反馈申请退款(可完整预览的文档不适用该条件!)。
- 3、如文档侵犯您的权益,请联系客服反馈,我们会尽快为您处理(人工客服工作时间:9:00-18:30)。
23
【关于RAID2.0+可靠性】
安全可信
弹性高效
负荷分担:RAID2.0+使得硬盘更加均衡地工作,避免了传统RAID可能出现的硬盘 “过劳死”问题。 稳健重构:RAID2.0+技术使得发生重构时有更多的硬盘来分担重构负荷,减少了每块 硬盘承担的重构工作量,大大降低了重构期间再发生硬盘故障的风险。 快速重构:RAID2.0+大大减少了重构的时间窗,使得系统能在尽可能短的时间内恢复 到容错状态,从而提升系统的可靠性。 精简重构:RAID2.0+能够通过元数据感知已分配空间中哪些是已使用的,因此在重构 时仅重构已使用空间,减少了重构数据量,进一步缩短了重构时间,降低了重构风险。 自检自愈:RAID2.0+采用分布式的热备空间,当系统检测到故障时,只要硬盘中有空 闲的空间(CK),即可自动启动重构,在提升可靠性的同时大大降低了管理成本。 失效数据量:传统RAID失效后,影响的是RAID组上的所有数据;而RAID2.0+发生多 盘失效后,只有和多块失效硬盘都相关联的数据才会失效,大部分的数据仍然可以访 问,失效数据量与传统RAID相比按数量级减少。
26
【RAID2.0+双盘失效分析】
27
【RAID2.0+双盘失效分析】
28
虚拟池化设计,降低存储规划管理难度
安全可信
弹性高效
基于虚拟化的RAID2.0+技术,使得管理员只需要维护少量的存储资源池,所 有的RAID配置在创建存储池时自动配置完成,同时,系统会自动根据制定的 策略来智能管理和调度系统资源,大大降低了规划和管理的难度。
10
Storage Pool(存储池) & Tier
Storage Pool即存储池,是存放存储空间资源的容器,所有应用服务器使用的存储空间 都来自于存储池。一个存储池基于指定的一个硬盘域创建,可以从该硬盘域上动态的分配 Chunk(CK)资源,并按照每个存储层级(Tier)的“RAID策略”组成Chunk Group (CKG)向应用提供具有RAID保护的存储资源。 Tier即存储层级,存储池中性能类似的存储介质集合,用于管理不同性能的存储介质,以 便为不同性能要求的应用提供不同存储空间。存储池根据硬盘类型可划分为多个Tier。 创建存储池可以指定该存储池从硬盘域上划分的存储层级(Tier)类型以及该类型的 “RAID策略”和“容量”。 OceanStor高端存储系统支持RAID5、RAID6和RAID10。 容量层由大容量的NL-SAS盘组成,RAID策略建议使用双重校验方式的RAID6。
20
快速精简重构,改善双盘失效率
传统RAID重构原理
安全可信 RAID2.0+重构原理
弹性高效
Few-to-One Rebuild hotspots & long rebuild exposure
21
Many-to-Many Rebuild parallel rebuilds in less time
T V2的Grain粒度默认为32KB(可通过CLI指定范围为8KB-256KB), OceanStor高端存储系统的Grain粒度固定为64KB。
Thin LUN以Grain为单位映射到LUN,对于Thick LUN,没有该对象
17
Volume & LUN
Volume即卷,是系统内部管理对象,一个Volume对象用于组织同一个LUN的 所有Extent、Grain逻辑存储单元,可动态申请释放Extent来增加或者减少 Volume实际占用的空间。 LUN是可以直接映射给主机读写的存储单元,是Volume对象的对外体现。
Extent
Grain Volume & LUN
9
Disk Domain(磁盘域)
Disk Domain即硬盘域,是一堆硬盘的组合(可以是整个系统所有硬盘),这 些硬盘整合并预留热备容量后统一向存储池提供存储资源。 OceanStor高端存储系统可以一个或多个硬盘域 一个硬盘域上可以创建多个存储池(Storage Pool) 一个硬盘域的硬盘可以选择SSD、SAS、NL-SAS中的一种或者多种 不同硬盘域之间是完全隔离的,包括故障域、性能和存储资源等
Release Data
2013-8-20
1
目录
1 2 3 4
RAID技术演变 RAID2.0+原理及概念
RAID2.0+技术亮点 块虚拟化技术竞争对比
2
什么是RAID?
RAID (Redundant Array of Independent Disks)即独立磁盘冗余阵列,1987年由美国加州大学
12
LD(逻辑磁盘)
Logical Drive(LD)即逻辑磁盘,是被OceanStor高端存储系统所管理的硬盘, 和物理硬盘一一对应。
13
Chunk(CK)
Chunk简称CK,是存储池内的硬盘空间切分成若干固定大小的物理空间,每块 物理空间的大小为64MB,是组成RAID的基本单位。
14
Chunk Group(CKG)
一个Extent归属于一个Volume或一个LUN
Extent大小在创建存储池时可以进行设置,创建之后不可更改 不同存储池的Extent大小可以不同,但同一存储池中的Extent大小是统一的
16
Grain
在Thin LUN模式下,Extent按照固定大小被进一步划分为更细粒度的块,这些 块称之为Grain。Thin LUN以Grain为粒度进行空间分配,Grain内的LBA是连 续的。
7
RAID2.0+关键原理
硬盘域 存储池
Extent CKG被划分为固定大小 硬盘域内同种类型的硬盘被划分 的Extent 为一个个的Disk Group(DG), 从同一个DG上随机选择多个硬盘, 每个硬盘选取一个CK按照RAID算 法组成Chunk Group(CKG) LUN以Extent为单 LUN Thick 0 (Thick) 位映射到LUN LUN 1 (Thick)
15
Extent
Extent是在CKG基础上划分的固定大小的逻辑存储空间,大小可调,是热点数 据统计和迁移的最小单元(数据迁移粒度),也是存储池中申请空间、释放空 间的最小单位。
OceanStor高端存储系统 C99和T V2的Extent范围为1MB~64MB, OceanStor高端存储系统 C00的Extent范围为512KB~64MB, 默认为4MB
11
Disk Group(DG)
Disk Group(DG)即硬盘组,由硬盘域内相同类型的多个硬盘组成的集合, 硬盘类型包括SSD、SAS和NL-SAS三种。OceanStor高端存储系统会在每个硬 盘域内根据每种类型的硬盘数量自动划分为一个或多个Disk Group(DG)。 一个Disk Group(DG)只包含一种硬盘类型 任意一个CKG的多个CK来自于同一个Disk Group(DG)的不同硬盘
Chunk Group简称CKG,是由来自于同一个DG内不同硬盘的CK按照RAID算 法组成的逻辑存储单元,是存储池从硬盘域上分配资源的最小单位。 一个CKG中的CK均来自于同一个DG中的硬盘 CKG具有RAID属性(RAID属性实际配置在Tier上) CK和CKG均属于系统内部对象,由OceanStor高端存储系统自动完成配置, 对外不体现。
硬盘域内每个硬盘被切分为 固定64MB的块(CK)
切分
映射
LUN 2 (Thin)
存储池
Extent Grain
Thin LUN以Grain 为单 Grain在Extent的基础上 进行更细粒度的划分 位映射到LUN
8
RAID2.0+软件逻辑对象
Disk Domain(磁盘域) Storage Pool(存储池)& Tier Disk Group(DG) LD(逻辑磁盘) Chunk(CK) Chunk Group(CKG)
4
块虚拟化的发展
热 备
传统RAID
LUN虚拟化
块虚拟化
传统RAID厂商
5
EMC、NetApp
华为、HP 3PAR、IBM
目录
1 2 3 4
RAID技术演变 RAID2.0+原理及概念
RAID2.0+技术亮点 块虚拟化技术竞争对比
6
RAID2.0+概述
Virtual for Pool
Virtual for Disk
24
【关于RAID2.0+可靠性】
安全可信
弹性高效
下表是基于Markov模型,综合考虑数据丢失概率和丢失数据量得出的两种技术的数 据丢失风险:
综合数据丢失概率和丢失数据量来看,不管是采用RAID5、RAID6还是RAID10, RAID2.0+丢失数据的风险与传统RAID相比均大幅降低(RAID5、RAID6、RAID10 分别降低约16倍、69倍、39倍) 故障隔离:通过Disk Domain和DG来进行资源和故障隔离。
的伯克利分校提出,其基本思想是把多个独立的物理硬盘通过相关的算法组合成一个虚拟的逻辑硬盘, 从而提供更大 容量 、更高 性能 ,或更高的 数据容错功能 。
3
块虚拟化技术背景
存储市场保持年平均增长10%,为了满足数据增长的需求,磁盘设备制 造商不断地提升技术来增加磁盘单位存储密度 传统RAID的重构:应用系统整体性能下降,漫长重构时间、数据丢失 风险剧增
华为RAID2.0+技术培训胶片
Author / ID Department Group Email Address Co-author / ID Approver / ID
秦烜(204091) 统一存储市场技术