面向海量數(shù)據(jù)的分布式文件系統(tǒng)設(shè)計(jì)和實(shí)現(xiàn).pdf

1、隨著信息時(shí)代的快速發(fā)展，整個(gè)世界的數(shù)據(jù)的容量也是爆炸式增長(zhǎng)。一方面，海量數(shù)據(jù)使得我們擁有巨大的信息來(lái)源。另一方面，存儲(chǔ)和分析海量數(shù)據(jù)是個(gè)很困難的問(wèn)題。針對(duì)這個(gè)問(wèn)題，Google公司提出它們的解決方案:這就是Google文件系統(tǒng)和Map/Reduce編程模型。Google文件系統(tǒng)用于存儲(chǔ)海量數(shù)據(jù)，Map/Reduce編程模型用于分析海量數(shù)據(jù)。本文主要關(guān)注海量數(shù)據(jù)的存儲(chǔ)和管理。
　　 通過(guò)對(duì)比和分析各種分布式文件系統(tǒng)，本文設(shè)計(jì)和實(shí)現(xiàn)

2、了面向海量數(shù)據(jù)存儲(chǔ)和管理的分布式文件系統(tǒng)。系統(tǒng)名為KiddenFS。
　　 本文第一部分主要對(duì)KiddenFS進(jìn)行分析和設(shè)計(jì)，首先對(duì)KiddenFS的功能性需求和非功能性需求進(jìn)行了分析，然后針對(duì)分布式文件系統(tǒng)邏輯結(jié)構(gòu)、數(shù)據(jù)存儲(chǔ)方式、負(fù)載均衡方式等等給出了詳細(xì)的分析，并提出了在KiddenFS中的解決方案。最后在此基礎(chǔ)之上設(shè)計(jì)了KiddenFS的架構(gòu)，并描述了系統(tǒng)關(guān)鍵操作的數(shù)據(jù)流程。KiddenFS文件系統(tǒng)由元數(shù)據(jù)服務(wù)器、數(shù)據(jù)服務(wù)