1+X证书 智能计算平台应用开发【高级】第4章 数据存储(4.3 分布式文件系统)V1.0
1+X证书 智能计算平台应用开发【中级】第3章 平台管理 (3.1 服务器集群管理)V1.0
服务器2
服务器1
服务器3
服务器 集群
第2页
集群管理介绍
集群管理是一种通过集群化操作来减少 单点故障数量，并且实现了集群化资源 高可用性的高效管理。
第3页
提高服 务器性
能
降低成 本
提高服 务器的 可扩展
性 保证服 务器可
靠性
集群管理介绍——集群管理的主要特性
智能安装，自动交付。支持自动设备发现、管理IP自动配置、智能化配置部署、自动化批 量部署等特性，1天即可实现1000台服务器的安装配置管理，提升交付效率高达100%。
主动预防，快速诊断。支持7×24小时告警监控，提供远程通知、性能管理等特性，设备 仿真面板和拓扑图等工具帮助实现可视化诊断，有效减少设备80%停机时间。
华为eSight Server管理套件是面向华为全系列服务器集群化的全新运维解决方案，实现了 从服务器上电到退服全生命周期的精细化管理。
从极速智能化交付阶段到日常运维管理，均可通过可视化方式进行自动化管理，帮助企 业用户更有效简化服务器的运维管理，提升运维效率，全面降低运维成本。
第20页
集群管理工具简介——华为eSight Server
• 伸缩性（可扩展性）是一种评估软件系统计算处理能力的设计指标， 高可伸缩性代表一种弹性，在系统扩展成长过程中，软件能够保持 旺盛的生命力，通过很少的改动甚至只是硬件设备的添置，就能实 现整个系统处理能力的线性增长，实现高吞吐量和低延迟高性能。
第5页
集群管理介绍——集群管理的主要特性
集群管理的主要特性——伸缩性
第9页
集群管理介绍——集群管理的主要特性
可管理的软件和系统具有的主要特征包括检测、自动化操作、事件驱动、模式支持、基 于模型的操作，具体如下。
云计算的基础技术
云计算的基础技术云计算是一种基于互联网的计算服务模式，它通过虚拟化技术将计算资源、存储资源和网络资源整合在一起，用户可以根据自身需求弹性地使用和管理这些资源。
云计算的基础技术涵盖了虚拟化技术、容器技术、分布式系统、网络技术、存储技术等多个方面。
本文将从这些技术的角度介绍云计算的基础技术。
一、虚拟化技术虚拟化技术是云计算的基础之一，它通过将物理资源转化为虚拟资源，从而实现资源的隔离和动态分配。
虚拟化技术可以实现对CPU、内存、存储和网络等资源的虚拟化，使得用户可以根据需要在虚拟资源上创建和管理虚拟机，实现资源的灵活调度和高效利用。
1. CPU虚拟化CPU虚拟化是指将一个物理CPU变成多个逻辑CPU，使得多个操作系统能够同时运行在同一个物理服务器上。
目前比较流行的CPU虚拟化技术有Intel的VT-x和AMD的AMD-V等，它们通过提供多种CPU工作模式和指令集，实现了对CPU资源的虚拟化和隔离。
2.内存虚拟化内存虚拟化是指通过虚拟机监控程序（VMM）对内存资源进行管理和隔离，使得多个虚拟机可以共享物理内存，并且实现了内存资源的分配和回收。
内存虚拟化技术可以通过内存页面的共享和传输，以及对内存容量的动态分配等方式实现内存资源的高效利用。
3.存储虚拟化存储虚拟化是指通过虚拟存储设备将物理存储资源转化为虚拟存储资源，用户可以在虚拟存储资源上创建和管理虚拟磁盘、快照、镜像等存储对象。
存储虚拟化技术可以实现对存储资源的灵活管理和分配，提高了存储资源的利用效率。
4.网络虚拟化网络虚拟化是指通过虚拟交换机、虚拟路由器等网络设备将物理网络资源转化为虚拟网络资源，用户可以在虚拟网络资源上创建和管理虚拟网络，实现对网络资源的隔离和动态分配。
网络虚拟化技术可以实现对网络资源的高效利用和灵活管理，提高了网络资源的利用效率。
二、容器技术容器技术是一种轻量级的虚拟化技术，它通过将应用程序及其依赖环境打包成一个可移植的容器，使得应用程序可以在任何环境中运行。
1+X证书【初级】第1章 智能计算平台应用开发(初级)概述(1.2 智能计算平台应用开发(初级)知识点概要)
平台搭建——系统与软件
系统与软件
操作系统 脚本开发环境Python
其他依赖
第7页
平台搭建——系统与软件
操作系统
• Windows操作系统，包括 Windows操作系统发展历程、目前主流的 Windows个人操作系统、目前主流的Windows服务器操作系统。
• Linux操作系统，包括Linux操作系统发展历程、目前主流发行版本及其 应用领域。
第19页
数据管理——数据存储
数据库
• 数据库系统基础，包括数据的定义、数据库的概念、数据库的特点。 • 关系型数据库，包括关系型数据库的概念、常见的关系型数据库。 • NoSQL数据库，包括NoSQL数据库概念、NoSQL数据库使用场景、常见NoSQL数
据库类型、常见的NoSQL数据库、NoSQL数据库与关系型数据库的区别。
第20页
数据管理——数据存储
数据库可视化工具
• MySQL Workbench，包括MySQL Workbench的简介，以及SQL开发、数据建模、服务器管 理、MySQL Utilities等功能。
• Studio 3T，包括Studio 3T的简介，以及Visual Query Builder、IntelliShell、Aggregation Editor、 Map-Reduce、SQL查询、展开数据库并显示文档及呈现数据、数据导入及导出、创建用户 及角色、Schema、Compare、Server Status Chart等功能。
数据采集简介
• 基本内容，包括数据采集的定义、数据采集的作用、常见的数据来源、数据采集系统的结构。 • 常用的数据采集工具，包括Sqoop、Flume、Scribe、Chukwa、Logstash 5种数据采集工具的概
分布式应用编程教学大纲
《分布式应用编程》课程教学大纲一课程说明1.课程基本情况课程名称：分布式应用编程英文名称：Distributed Applications Programming课程编号：2413268开课专业：计算机科学与技术开课学期：第6学期学分/周学时：4/4课程类型：专业方向选修课2．课程性质（本课程在该专业的地位作用）本课程是计算机科学与技术专业的一门专业方向选修课。
本课程的内容涉及分布式系统的基本概念、基本原理和基本方法，具体涵盖了分布计算系统的基本概念和体系结构，分布计算系统的进程通信，分布式程序设计语言，命名与保护，分布式同步和互斥机构，死锁问题及其处理技术，容错技术，分布式数据管理，分布式文件系统的设计问题与实现方法，分布式调度，分布式共享存储器技术以及基于对象的分布式系统，以及相关的前沿主题，包括web服务、网格、移动系统和无处不在系统等。
通过这门课程的教学，使学生对分布式系统的基本概念、有关体系结构、分布式系统设计原理与方法有一个系统的掌握，能深入理解一些典型的分布式计算系统，为以后从事分布式系统研究与设计打下良好的理论和工程实践的基础。
3．本课程的教学目的和任务学生通过本门课程的学习，要求掌握分布式系统的基本概念、主要原理和主流分布式系统模型范例，主要包括分布式系统进程、分布式程序设计语言、分布式系统安全、分布式系统容错、分布式系统事务等；能掌握当前分布式系统技术的现状和发展趋势，具备分布式系统分析、研究和设计实现有关的基本能力。
4．本课程与相关课程的关系、教材体系特点及具体要求这门课程的先修课程为《计算机网络》、《操作系统》、《计算机系统结构》、《面向对象程序设计》和《软件工程》等。
5．教学时数及课时分配二教材及主要参考书（1）徐高潮等著，《分布计算系统》，高等教育出版社，2004（2）AndrewcS.Tanenbaum. Distributed Systems：Principles and Paradigms.清华大学出版社2002年影印版（3）吴杰. 分布式系统设计. 机械工业出版社2001年中译本（4）DoreencL.Galli. Distributed Operating Systems: Concepts and Practice.人民邮电出版社影印版2003（5）库劳里斯著，金蓓弘等译. 分布式系统概念与设计机械工业出版社2008年（6）Douglas E. Comer David L.Stevens. Client-Server Programming and Application. 1997，清华大学出版社，2002（7）陈志刚等著，《多层客户/服务计算模型与实现技术》，湖南科学技术出版社，2003三教学方法和教学手段说明主要使用多媒体教室进行理论讲解和演示实验步骤，然后再计算机实验室指导学生进行相关实验并撰写实验报告。
《储存技术》课程标准
《储存技术》课程标准一、课程说明课程编码〔37788〕承担单位〔计算机信息学院〕制定〔〕制定日期〔2022年11月16日〕审核〔专业指导委员会〕审核日期〔2022年11月20日〕批准〔二级学院（部）院长〕批准日期〔2022年11月28日〕（1）课程性质：《数据存储技术》是计算机网络技术专业的专业核心课程，是高职素质教育中的重要组成部分，本课程注重培养高职学生的计算机应用能力，是操作性和实践性很强的课程。
通过学习，使学生掌握必要的网络存储技术基础知识，具备调试技能，提高网络存储各部件的组装、设置、日常维护、维修及管理系统安装等使用技术能力，重点培养学生的综合处理能力的课程。
（2）课程任务：主要针对IT领域的网络存储工程师级别认证，此认证定位于全面介绍现代信息管理需求的存储技术基础知识，是对存储技术感兴趣的IT专业人员等岗位开设，主要任务是培养学生在企业具备构建SAN和NAS存储网络相关能力，并具备SAN和NAS存储系统和网络的运维与管理能力。
要求学生掌握存储系统通用技术及应用，并具备协助设计和部署运维管理SAN和NAS网络及存储设备实施和协助设计的基本技能。
（3）课程衔接：在课程设置上，前导课程有《计算机网络技术》、《Windows服务器配置与管理》、《Linux服务器配置与管理》课程学习后，理解了网络技术基本原理，掌握计算机网络基本技术、熟练使用服务器操作系统的基础上，重点学习网络存储技术，并为后期课程《云计算与存储技术》、《大数据》课程学习奠定理论基础和技术支撑。
二、学习目标（一）总体目标通过本课程的学习，使学生能够掌握网络存储和虚拟化技术的基础知识。
通过实际项目及任务，典型案例分析与实战操作为手段，培养学生进行网络存储与虚拟化实现方案系统分析与实践实施的能力，实现高职院校学生的自主学习、工作以及完成综合任务的能力，对职业素质养成起非常重要的作用。
（二）分目标（能力目标、知识目标、素质目标、情感态度目标）1.能力目标(1)能配置RAID1.RAID5。
1+X证书 智能计算平台应用开发【中级】第3章 平台管理 (3.3 系统管理)V1.0
第7页
系统管理介绍——系统管理的主要任务
系统故障调测 常见系统故障介绍
• 计算、存储、网络节点故障：磁盘空间不足、交换分区空间不足、内存空间不足、 CPU负载过高、文件系统故障、物理节点故障。
• 网络连接故障：IP冲突、交换机配置错误、网线故障。 • 其他故障：时间不同步、DNS解析错误、防火墙拦截。
第3页
系统管理介绍——系统管理的主要任务
系统管理的主要任务包括系统运行状态监控 与巡检、性能分析与优化、安全加固和系统 故障调测等。
系统运行状态监控与巡检 性能分析与优化
安全加固
系统故障调测
系统管理的主要任务
第4页
系统管理介绍——系统管理的主要任务
系统运行状态监控与巡检
• 监控是指对整个系统运行的状态是否正常进行监测，根据系统运行稳定性来 判断设备状态。
第2页
系统管理介绍
系统管理是管理者与管理对象组成的并由管理者负责控制的一个整体。 管理系统因具体对象不同而千差万别，具体对象可以是状态、性能、安全、维护等。 系统管理都是变化发展着的，而且任何变化和发展都会表现为管理的具体任务和管理目
标的实现条件的变化。 系统管理具有明确的目的性和组织性。
DFX等）
能故障管理、智能能效管理）
硬件资源管理
软件资源管理
计算资源
（X86、ARM)
加速资源
固件资源
裸机镜像资源
（GPU、FPGA、SOC) （BMC、NIC、BIOS) （Win、Linux、etc)
存储资源
（NOF、SSD、SCM)
网络资源
（PCle、ETH)
配置资源
模板资源
（计算、存储、网络) （节点、组、域)
1+X证书 智能计算平台应用开发【高级】第4章 数据存储(4.1 分布式存储系统)V1.0
分布式存储
高性能 高容错 易用
• 分布式存储数据的吞吐量非常高，能够高效读写数据。
• 分布式存储针对节点故障所造成的数据问题，有很好的副本存放机制或 故障转移机制。
• 分布式文件系统需要提供易用的对外接口，能够方便地与其他系统集成。
第10页
分布式存储
分布式存储技术根据对信息进行分类的思想，包含了对结构化数据（表）和非结构化数 据（文件）的支持。
第7页
分布式与集群的概念——分布式系统概述
如部署HDFS文件系统
在部署HDFS文件系统时，会在不同节点上部署NameNode、Secondary NameNode和 DataNode，这3个不同的组件实现的是不同的任务，此时HDFS是一个分布式系统。
为了能够有更多的存储资源用于存储数据，通常会部署多个DataNode节点增加存储 资源，此时因为多个部署DataNode的节点组成了集群，所以HDFS是一个分布式集群 结构的文件系统。
对本地事件响应迅速 节省数据传输时间 减轻主计算机的负担 简化系统程序设计 ……
第6页
分布式与集群的概念——分布式系统概述
好的设计应该是分布式和集群的结合，因为分布式系统的每一个节点都可以做集群，而 集群却不一定能实现分布式，所以需要先分布式再集群。
具体实现：将业务拆分成多个子业务，然后针对每个子业务进行集群部署，这样每个子业 务如果出了问题，那么整个系统运行不会受影响。
• 通常每台处理机或计算机均有其单独的操作系统，各自负责一个任务中的不同 子任务，并共享系统资源。
• 分布式系统通常是由一台大型计算机和若干台小型计算机或微型计算机组成， 各处理机或各计算机分布在不同地点，通过互联网络连结在一起。
第5页
分布式与集群的概念——分布式系统概述
华为1+X智能计算平台应用开发初级课程大纲V1.0
“智能计算平台应用开发（初级）”课程大纲一、课程概要二、课程定位本课程是计算机应用等专业的专业核心课程，主要目标是培养计算机应用等专业学生的智能计算平台搭建、平台管理、数据管理、基础应用开发测试等能力。
通过本课程的学习，能根据客户的需求完成智能计算软硬件平台的安装部署、软件开发环境部署，以及开发平台的日常管理、数据管理和基础应用功能开发测试等工作任务。
本课程以企业需求为导向，通过与华为等世界级主流企业建立密切合作关系，将企业的教育资源融入到教学体系中，确保学生学习到最先进和实用的智能计算技术。
学完本课程后，学生可以参加智能计算平台应用开发1+X认证考试，为将来走向工作岗位奠定坚实的基础。
三、教学目标（一）知识目标1.掌握智能计算平台的存储设备的安装、配置和维护技术；2.掌握人工智能专用型服务器设备的安装、配置和维护技术；3.掌握智能计算平台的操作系统和对应软件的安装、配置和调测技术；4.掌握分布式数据采集系统的应用技术；5.掌握软件移植至ARM服务器技术；6.掌握Python爬虫程序技术；7.掌握数据存储和管理技术。
（二）能力目标1.具备智能计算平台存储设备的硬件安装、初始化配置和日常运维管理能力；2.具备人工智能专用型服务器设备的硬件安装、初始化配置和日常维护管理能力；3.能够配置与调测智能计算平台的操作系统和集成应用软件开发环境；4.能够使用分布式数据采集系统或数据采集工具；5.能够移植基础应用软件至ARM服务器；6.能够使用Python脚本语言编写基础的爬虫程序；7.能够存储和管理数据库。
（三）素质目标1.培养学生掌握智能计算平台硬件、系统和软件的安装、配置和使用方法；2.培养学生团队意识、协作意识、表达能力和文档能力；3.培养学生认真负责、严谨细致的工作态度和工作作风；4.培养学生创新意识和创新思维；5.培养学生标准意识、操作规范意识、服务质量意识、尊重产权意识及环境保护意识；6.培养学生平台管理和数据管理的意识。
- 1、下载文档前请自行甄别文档内容的完整性，平台不提供额外的编辑、内容补充、找答案等附加服务。
- 2、"仅部分预览"的文档,不可在线预览部分如存在完整性等问题,可反馈申请退款(可完整预览的文档不适用该条件!)。
- 3、如文档侵犯您的权益，请联系客服反馈,我们会尽快为您处理(人工客服工作时间：9:00-18:30)。
常用的分布式文件系统工具——易用性
Lustre文件系统组成部分
元数据服务器MDS（MetadataServer）； 对象存储服务器OSS（Object Storage Server）； 客户端（Lustre Client）。
第8页
常用的分布式文件系统工具——易用性
CephFS
Ceph文件系统（CephFS）是一个兼容POSIX的文件系统，利用Ceph存储集群保存用户数据。 Linux内核驱动程序支持CephFS，使得CephFS高度适用于各大Linux操作系统发行版。 CephFS将数据和元数据分开存储，为上层的应用程序提供较高的性能以及可靠性。在
可靠性方面
NameNode只有一个，一旦失效，将导致整个文件系统无法对外提供服务。
DataNode数量众多，即使失效导致所存储数据块无法使用，NameNode仍会通知客户 端访问该数据块所在的其他DataNode，使系统继续正常运行，所以HDFS的可用性是 由NameNode的可用性决定的。
Ceph集群内部，Ceph文件系统库（libcephfs）运行在RADOS库（librados）之上，后者是 Ceph存储集群协议，由文件、块和对象存储共用。
第9页
常用的分布式文件系统工具——易用性
如果使用CephFS，那么集群节点上最少需要配置一个Ceph元数据服务器（MDS）。
需要注意的是，单一的MDS服务将成为Ceph文件系统的单点故障。 在MDS配置后，客户端可以采用多种方式使用CephFS。
第20页
常用的分布式文件系统工具——易用性
分散式架构
GlusterFS采用了分散式管理的方式，其所有元数据和文件数据通过一个分布式哈希表的 机制遍布整个集群，节点之间通过定时的网络通信相互告知运行状态。
采用分散式架构的分布式文件系统通常由客户端确定文件位置，所有客户端共享一个统 一的哈希算法，通过计算哈希值得到目标文件的位置，然后去对应的节点访问具体的文 件数据。
第5页
常用的分布式文件系统工具——易用性
为了优化特定场景下的应用， 不同的分布式文件系统有着 各自的设计侧重点，最终导 致了它们的不同特性。
第6页
目前被广泛使用且具有代表性的分布式文件系统
• GFS • HDFS • FastdFs • Alluxio（原名Tachyon） • CephFS • Lustre • GlusterFS • …….
GlusterFS是Scale-Out（横向扩展）存储解决方案Gluster的核心，具有强大的横向扩展能力， 通过扩展能够支持数PB存储容量和处理数千客户端。
GlusterFS借助TCP/IP或InfiniBand RDMA网络将物理分布的存储资源聚集在一起，并使用单 一全局命名空间来管理数据。
第2页
常用的分布式文件系统工具——可扩展性
分布式文件系统能够很好地适应大规模的分布式环境。为了实现对海量文件数 据的管理和维护，分布式文件系统通常利用多个存储节点分散文件数据。目前， 一个具有良好可扩展性的分布式文件系统己经能够顺利运行在拥有数百个甚至 上千个节点的集群环境中。
此外，分布式文件系统的可扩展性还包括支持动态地新増或者剔除一个或多个 存储节点，并借此达到动态扩容、缩容和平衡负载的目的。
第23页
常用的分布式文件系统工具——易用性
CephFS、HDFS和FastdFS的容错方式 CephFS、HDFS和FastdFS都使用了多副本的方式进行数据的容错，通常情况下一份文件数据
会被复制存放在2~3个数据存储节点中，以此降低因节点崩溃而导致数据丢失的风险。
GlusterFS的容错方式
GlusterFS将传统的基于磁盘的RAID容错机制扩展到了分布式环境下，在GlusterFS中，每个 节点上存储的数据被视为一个数据卷（Volume），在这些数据卷之间通过网络构造了一个 RAID环境，达到数据容错的效果。
HDFS的所有元数据及系统运行状态由NameNode（元数据节点）管理，由多节点 的DataNode（数据存储节点）存放具体的文件数据。
第19页
常用的分布式文件系统工具——易用性
部分分布式文件系统（如HDFS、CephFS、Lustre、FastdFS）还支持了一种“多点集中式” 的管理方式。
一个CephFS/HDFS集群中能够拥有多个MDS/NameNode，避免大规模并发访问时 的单点瓶颈，同时也提高了整个系统的容错能力。
多副本
多副本
基于网络的 由存储节点上的RAID1或
RAID（磁盘阵 RAID5/6提供容错。假如存 多副本
列）
储节点失效，则数据不可用
第16页
常用的分布式文件系统工具——易用性
整体架构
整体架构即分布式文件系统以何种架构方式管理整个系统。 集中式和分散式是分布式系统中两个常用的架构方式。
第17页
第18页
常用的分布式文件系统工具——易用性
集中式架构
在所列举的分布式文件系统中，Alluxio、CephFS、HDFS、Lustre和FastdFS都采用了集中式 管理的方式，具体表现为主从式的架构。 例如，CephFS使用元数据服务器（MetaData Server，MDS）管理所有元数据及整 个系统的状态，具体的文件数据分散存储在各个节点的对象存储设备（Object Storage Device，OSD）中。
分布式框架往往都是直接从分布式文件系统中读写数据，效率比较低，性能消耗比较大。
第12页
常用的分布式文件系统工具——易用性
Alluxio介于计算框架（如Apache Spark、Apache MapReduce、Apache HBase、Apache Hive、Apache Flink）和现有的存储系统（如Amazon S3、OpenStack Swift、GlusterFS、 HDFS、MaprFS、Ceph、NFS、OSS）之间，以文件的形式在内存中对外提供读写访问服 务，为大数据软件栈带来了显著的性能提升。
连接Alluxio即可访问存储在底层任意存储系统中的数据。 此外，Alluxio的以内存为中心的架构使得数据的访问速度比现有常规方案的访问速度快几
个数量级。
第11页
常用的分布式文件系统工具——易用性
大数据领域
最底层的是分布式文件系统，如Amazon S3、Apache HDFS等。 较高层的应用则是一些分布式计算框架，如Spark、MapReduce、HBase、Flink等，这些
第4章 数据存储
第0页
目录
1. 分布式存储系统 2. 分布式数据库 3. 分布式文件系统
第1页
分布式文件系统
分布式文件系统一般对用户和上层应用提供一个统一的文件操作接口，上层应用能够 通过类似操作单机文件系统的方式，在分布式文件系统中进行文件和目录的増加、删 除、修改、查询等操作。
不同分布式文件系统在设计之初总是面向一个特定的问题，或是更方便用户的使用、 或是为计算框架做特定的优化、或是为了解决之前分布式文件系统中的缺陷等。因此， 不同的分布式文件系统会具有不同的设计方案、系统架构和性能特性。
第14页
常用的分布式文件系统工具——易用性
GlusterFS文件系统组成部分
存储服务器（Brick Server）； 客户端； NFS/Samba存储网关。
GlusterFS架构中没有元数据服务器组件，这是其最大的设计特点，对于提升整个系统 的性能、可靠性和稳定性都有着决定性的意义。
第15页
常用的分布式文件系统工具——易用性
第24页
常用的分布式文件系统工具——易用性
Alluxio的容错方式 Alluxio同时使用了世系关系（Linearge）和备份（Checkpoint）的方式保证数据可靠性，首
先通过备份避免因节点故障而导致的数据丢失，然后通过记录文件之间的世系关系，在文 件丢失时进行重计算，恢复丢失的数据。 此外，对于整个系统，Alluxio会自动重启失效的数据存储节点。
几种典型分布式文件系统比较
名称
Alluxio
CephFS
HDFS
GlusterFS
Lustre
FastdFS
整体架构 存储介质
集中式
集中式/多点 集中式/多点
集中式
集中式
分散式
以内存为中 心，多层次
基于硬盘
基于硬盘
基于硬盘
集中式/多点集中式 基于硬盘
集中式/多点 集中式
基于硬盘
容错方式世系关系， 多备份来自第22页常用的分布式文件系统工具——易用性
容错方式
分布式文件系统如何保证数据的可靠性。 故障容忍和错误恢复机制一直是系统研究领域的重点，分布式文件系统也不例外。多副本
和备份机制是分布式文件系统中常见的容错方式，其实现原理简单，不容易产生二次故障 （即在错误恢复的过程中再次出错），能够达到很好的容错效果。
第3页
常用的分布式文件系统工具——可靠性
分布式文件系统提供可靠的文件存储和管理服务，用户无须担心数据的丢失。 一个分布式文件系统的运行规模越大，其发生故障的概率就越高，可能同时面
临多个节点崩溃的情况。 因此，不同的分布式文件系统都具有各自的容错机制，首先需要尽可能地降低
发生故障的概率，其次需要做到自动检测故障的发生，并且能够及时恢复因故 障而丢失的文件数据。
如果需要把Ceph挂载成文件系统，那么客户端可以使用本地Linux内核的功能或者使用 Ceph社区提供的ceph-fuse（用户空间文件系统）驱动。CephFS可以用来替代HDFS。
第10页
常用的分布式文件系统工具——易用性
Alluxio
Alluxio（之前名为Tachyon）是一个以内存为中心的虚拟的分布式存储系统。 Alluxio统一了数据访问的方式，为上层计算框架和底层存储系统构建了桥梁，应用只需要