3種分布式文件系統(tǒng)

1、第一部分CEPH1.1特點(diǎn)特點(diǎn)Ceph最大的特點(diǎn)是分布式的元數(shù)據(jù)服務(wù)器通過CRUSH，一種擬算法來分配文件的locaiton，其核心是RADOS（resilientautomaticdistributedobjectstage)，一個(gè)對(duì)象集群存儲(chǔ)，本身提供對(duì)象的高可用，錯(cuò)誤檢測(cè)和修復(fù)功能。1.2組成組成CEPH文件系統(tǒng)有三個(gè)主要模塊：a)Client：每個(gè)Client實(shí)例向主機(jī)或進(jìn)程提供一組類似于POSIX的接口。b)OSD簇：用于存儲(chǔ)

2、所有的數(shù)據(jù)和元數(shù)據(jù)。c)元數(shù)據(jù)服務(wù)簇：協(xié)調(diào)安全性、一致性與耦合性時(shí)，管理命名空間（文件名和目錄名）1.3架構(gòu)原理架構(gòu)原理Client：用戶IO：輸入輸出MDS：MetadataClusterServer元數(shù)據(jù)簇服務(wù)器OSD：ObjectStageDevice對(duì)象存儲(chǔ)設(shè)備傳統(tǒng)的，或者通常的并行文件系統(tǒng)，數(shù)據(jù)的定位的信息是保存在文件的metadata中的，也就是inode結(jié)構(gòu)中，通過到metadataserver上去獲取數(shù)據(jù)分布的信息。而在

3、Ceph中，是通過CRUSH這個(gè)算法來提供數(shù)據(jù)定位的。第二，元數(shù)據(jù)服務(wù)器可以提供集群metadataserver服務(wù)。只要當(dāng)我們了解了其結(jié)構(gòu)后，感覺并沒有太大的特點(diǎn)。元數(shù)據(jù)服務(wù)器一般就用來存儲(chǔ)文件和目錄的信息，提供統(tǒng)一的命名服務(wù)。在Ceph中，元數(shù)據(jù)的inode，dentry，以及日志都是在對(duì)象存儲(chǔ)集群RADOS中存儲(chǔ)，這就使得metadata的持久化都是在遠(yuǎn)程的RADOS中完成，metadataserver不保存狀態(tài)，只是緩存最近的i

4、node和dentry項(xiàng)，當(dāng)metadataserver失效后，其所所有信息都可以從RADOS中獲取，可以比較容易恢復(fù)。CEPH最核心的，就是RADOS就是RADOS（resilientautomaticdistributedobjectstage).其resilient指的是可以輕松擴(kuò)展，automatic指的是其對(duì)象存儲(chǔ)集群可以處理failover，failurerecovery。RADOS對(duì)象集群其對(duì)外提供了一個(gè)高可用的，可擴(kuò)展的

5、，對(duì)象集群，從客戶端的角度看，就是一個(gè)統(tǒng)一命名空間的對(duì)象存儲(chǔ)。1.4使用方式使用方式(一)Ceph的Monit用來監(jiān)控集群中所有節(jié)點(diǎn)的狀態(tài)信息，完成類似配置服務(wù)的功能。在Ceph里，配置主要就是clustermap，其保存集群所有節(jié)點(diǎn)信息，并和所有的節(jié)點(diǎn)保持心跳，來監(jiān)控所有的節(jié)點(diǎn)狀態(tài)。其通過Paxos算法實(shí)現(xiàn)實(shí)現(xiàn)自身的高可用，也就是說，這個(gè)CephMonit是不會(huì)有單點(diǎn)問題的。目前流行的zookeeper的功能，以及實(shí)現(xiàn)都類似。(二)對(duì)

6、象存儲(chǔ)Ceph文件系統(tǒng)中的數(shù)據(jù)和元數(shù)據(jù)都保存在對(duì)象中。對(duì)于對(duì)象存儲(chǔ)，通常的定義是：一個(gè)Object，由三部分組成（id，metadata，data），id是對(duì)象的標(biāo)識(shí)，這個(gè)不必多說。所謂的metadata，就是keyvalue的鍵值存儲(chǔ)，至于用來保存什么信息，由文件系統(tǒng)的語義定義。data就是實(shí)際存儲(chǔ)的數(shù)據(jù)。Ceph的對(duì)象，包括四個(gè)部分（id，metadata，attribute，data），在Ceph里，一個(gè)Object，實(shí)際就對(duì)應(yīng)本