最新文章专题视频专题问答1问答10问答100问答1000问答2000关键字专题1关键字专题50关键字专题500关键字专题1500TAG最新视频文章推荐1 推荐3 推荐5 推荐7 推荐9 推荐11 推荐13 推荐15 推荐17 推荐19 推荐21 推荐23 推荐25 推荐27 推荐29 推荐31 推荐33 推荐35 推荐37视频文章20视频文章30视频文章40视频文章50视频文章60 视频文章70视频文章80视频文章90视频文章100视频文章120视频文章140 视频2关键字专题关键字专题tag2tag3文章专题文章专题2文章索引1文章索引2文章索引3文章索引4文章索引5123456789101112131415文章专题3
当前位置: 首页 - 科技 - 知识百科 - 正文

分布式文件存储系统有哪些

来源:动视网 责编:小OO 时间:2020-09-19 05:37:38
文档

分布式文件存储系统有哪些

目前几个主流的分布式文件系统除GPFS外,还有PVFS、Lustre、PanFS、GoogleFS等。PVFS(Parallel Virtual File System)项目是Clemson大学为了运行Linux集群,Lustre文件系统是一个基于对象存储的分布式文件系统。
推荐度:
导读目前几个主流的分布式文件系统除GPFS外,还有PVFS、Lustre、PanFS、GoogleFS等。PVFS(Parallel Virtual File System)项目是Clemson大学为了运行Linux集群,Lustre文件系统是一个基于对象存储的分布式文件系统。

目前几个主流的分布式文件系统除GPFS外,还有PVFS、Lustre、PanFS、GoogleFS等。具体介绍如下:

  

  1、PVFS(Parallel Virtual File System)项目是Clemson大学为了运行Linux集群而创建的一个开源项目,目前PVFS还存在以下不足:

  

  (1)单一管理节点:只有一个管理节点来管理元数据,当集群系统达到一定的规模之后,管理节点将可能出现过度繁忙的情况,这时管理节点将成为系统瓶颈;

  

  (2)对数据的存储缺乏容错机制:当某一I/O节点无法工作时,数据将出现不可用的情况;

  

  (3)静态配置:对PVFS的配置只能在启动前进行,一旦系统运行则不可再更改原先的配置。

  

  2、Lustre文件系统是一个基于对象存储的分布式文件系统,此项目于1999年在Carnegie Mellon University启动,Lustre也是一个开源项目。它只有两个元数据管理节点,同PVFS类似,当系统达到一定的规模之后,管理节点会成为Lustre系统中的瓶颈。

  

  3、PanFS(Panasas File System)是Panasas公司用于管理自己的集群存储系统的分布式文件系统。

  

  4、GoogleFS(Google File System)是Google公司为了满足公司内部的数据处理需要而设计的一套分布式文件系统。

  

  5、相对其它的文件系统,GPFS的主要优点有以下三点:

  

  (1)使用分布式锁管理和大数据块策略支持更大规模的集群系统,文件系统的令牌管理器为块、inode、属性和目录项建立细粒度的锁,第一个获得锁的客户将负责维护相应共享对象的一致性管理,这减少了元数据服务器的负担;

  

  (2)拥有多个元数据服务器,元数据也是分布式,使得元数据的管理不再是系统瓶颈;

  

  (3)令牌管理以字节作为锁的最小单位,也就是说除非两个请求访问的是同一文件的同一字节数据,对于数据的访问请求永远不会冲突。

文档

分布式文件存储系统有哪些

目前几个主流的分布式文件系统除GPFS外,还有PVFS、Lustre、PanFS、GoogleFS等。PVFS(Parallel Virtual File System)项目是Clemson大学为了运行Linux集群,Lustre文件系统是一个基于对象存储的分布式文件系统。
推荐度:
标签: 文件 有哪些 文档
  • 热门焦点

最新推荐

猜你喜欢

热门推荐

专题网上存储文件专题数据存储服务专题文件存储管理系统专题云文件存储专题分布式存储设备专题数据库存储过程专题数据库文件专题数据库配置文件专题文件系统的类型是raw专题分布式存储是什么专题分布式数据库专题分布式存储专题并行文件系统的特点专题文件存储解决方案专题程序存储专题数据存储方式专题数据文件专题存储程序专题分布式存储原理专题分布式文件系统和并行文件系统的特点专题
Top