分布式存儲平臺有哪些-分布式存儲平臺龍頭介紹

分布式存儲平臺有哪些_分布式存儲平臺龍頭介紹1.分布式存儲平臺有哪些分布式存儲是指多個路由器協(xié)作共同完成存儲，這樣有助于提高緩存效率，保持更多的信息。分布式存儲平臺就是分布式存儲服務(wù)的運行平臺。目前比較有名的分布式存儲平臺主要有HDFS、

Ceph、GFS、GlusterFS及Swift等。同時，隨著云計算、大數(shù)據(jù)等技術(shù)的不斷發(fā)展，更多新的分布式存儲技術(shù)及平臺仍在涌現(xiàn)。2.分布式存儲平臺龍頭(1)CephCeph：經(jīng)過多年的發(fā)展，受到眾多存儲和云計算廠商的重視，成為了應用最

廣泛的開源分布式存儲平臺。Ceph利用存儲節(jié)點計算能力，計算得出該數(shù)據(jù)存儲的位置，將數(shù)據(jù)分布均衡。同時，Ceph采用了CRUSH、HASH

等算法，杜絕了傳統(tǒng)的單點故障問題，實現(xiàn)水平擴展的性能。Ceph的特點如下：1)Ceph支持對象存儲、塊存儲和文件存儲服務(wù);2)采用CRUSH等算法，數(shù)據(jù)分布均衡，并行度高;

3)支持多個副本，并保持多副本間的強一致性;4)去中心化，MDS之間地位相同，無固定的中心節(jié)點。(2)GFSGFS(GoogleFileSystem)：適用于大量的順序讀取和順序追加，注重大文件

的持續(xù)穩(wěn)定帶寬。2013年，Google公布了Colossus項目，作為下一代的Google

文件系統(tǒng)，與前一代的GFS相比，Colossus增加了主控服務(wù)器集群，重新平衡了舊的冷數(shù)據(jù)，并在磁盤上進行新數(shù)據(jù)的分發(fā)。GFS的特點如下：1)適合大文件場景的應用以及適數(shù)據(jù)訪問延時不敏感的搜索類業(yè)務(wù);2)

中心化架構(gòu)，只有1個master處于工作狀態(tài)，Colossus有改進后，將單一主控服務(wù)器改造為多主控服務(wù)器構(gòu)成的集群，將所有管理數(shù)據(jù)進行

數(shù)據(jù)分片后分配到不同的主控服務(wù)器上，增加可用性;3)緩存和預取，通過在client端緩存元數(shù)據(jù)，盡量減少與master的交互，

通過文件的預讀提升并發(fā)性能;(3)HDFSHDFS(HadoopDistributedFileSystem)：是適用于硬件上的分布式文件系統(tǒng)。作為是Hadoop

的核心子項目，HDFS具備海量數(shù)據(jù)存儲、高容錯性以及大文件存儲的優(yōu)勢。HDFS的特點如下：1)適用于大文件、大數(shù)據(jù)處理，處理數(shù)據(jù)達到GB、TB、甚至PB級別的數(shù)據(jù);2)HardLoop1.X版本支持

NameNode及SecondaryNameNode，Secondary

NameNode會周期性的將fsimage和edits合并，然后將最新的fsimage推送給NameNode;3)HardLoop2.0版本支持

StandbyNameNode，采用主從備份架構(gòu)，對ActiveNameNode進行熱備份;4)多副本保護提高容錯性;5)

不支持并發(fā)，同一時刻只允許一個寫入者或追加者。(4)GlusterFSGlusterFS(GlusterFileSystem)：是一種Scale-out的文件存儲系統(tǒng)，

具具備強大的橫向擴展能力，支撐數(shù)PB存儲容量以及處理數(shù)千應用客戶端的優(yōu)勢。GlusterFS的特點如下：1)采用無中心對稱式架構(gòu)，不存在元數(shù)據(jù)服務(wù)器瓶頸，元數(shù)據(jù)存在于文件的屬性和擴展屬性中;2)

采用彈性哈希算法，具有很好的可擴展性;3)采用模塊化堆棧架構(gòu)，可實現(xiàn)靈活配置。(5)SWIFT：SWIFT最初是由Rackspace公司開發(fā)的分布式對象存儲服務(wù)，采用完全對稱、面向資源的分布式系統(tǒng)架構(gòu)設(shè)計，所有組件都具備擴展性，降低因單點失效而影響整個系統(tǒng)的可用性的效率，主要用于解決非結(jié)構(gòu)化數(shù)據(jù)存儲問題。SWIFT的特點如下：1)原生的對象存儲，不支持實時的文件讀寫、編輯功能;2)