基于LSF API的分布式集群管理系統(tǒng)的開發(fā).pdf

1、隨著信息革命的發(fā)展,單機(jī)的計(jì)算能力已經(jīng)遠(yuǎn)遠(yuǎn)不能滿足人們進(jìn)行復(fù)雜計(jì)算的需求。于是,早在20世紀(jì)80年代,人們就提出將多臺(tái)單機(jī)聯(lián)合起來(lái),形成一個(gè)計(jì)算能力更加強(qiáng)大的集群,這就是分布式計(jì)算。目前國(guó)外在分布式領(lǐng)域尚處于領(lǐng)先地位,但是近幾年由于政府的大力扶持,國(guó)內(nèi)許多企業(yè)也已經(jīng)建立起了自己的分布式計(jì)算平臺(tái)。本論文是利用國(guó)外知名的負(fù)載均衡軟件LSF,開發(fā)出一套分布式集群管理系統(tǒng),不僅可以用于對(duì)用戶集群中的計(jì)算機(jī)進(jìn)行管理,而且能夠根據(jù)計(jì)算機(jī)的性能及調(diào)度

2、策略合理地分配任務(wù)。
　　首先,論文分別描述了分布計(jì)算、網(wǎng)格計(jì)算、并行計(jì)算及云計(jì)算的特點(diǎn),并從范圍、應(yīng)用和本質(zhì)三個(gè)方面分別比較了分布式計(jì)算和網(wǎng)格計(jì)算、分布式計(jì)算和并行計(jì)算、分布式計(jì)算和云計(jì)算之間的區(qū)別。這些知識(shí)為分布式集群管理系統(tǒng)的設(shè)計(jì)奠定了基礎(chǔ)。
　　其次,論文從LSF的安裝及配置、守護(hù)進(jìn)程系統(tǒng)、任務(wù)周期系統(tǒng)方面深入地研究了LSF軟件的基本架構(gòu),然后,從LSFAPI的基本系統(tǒng)架構(gòu)、LSFAPI的批處理系統(tǒng)架構(gòu)、LSF的基本

3、API服務(wù)、LSF的批處理API服務(wù)方面系統(tǒng)地介紹了LSF的批處理系統(tǒng)架構(gòu)。通過(guò)對(duì)LSF及LSFAPI架構(gòu)的系統(tǒng)認(rèn)識(shí),為基于LSFAPI的集群管理系統(tǒng)的開發(fā)奠定了基礎(chǔ)。
　　然后,論文著重介紹了分布式集群管理系統(tǒng)的設(shè)計(jì)及實(shí)現(xiàn)。首先,從概要設(shè)計(jì)入手,描述了系統(tǒng)的各大功能組織之間的關(guān)系,并且比較了開發(fā)工具和語(yǔ)言之間的區(qū)別;然后,重點(diǎn)介紹了登錄系統(tǒng)和主程序框架的設(shè)計(jì),并從LSFADMIN和BATCHADMIN兩大系統(tǒng)結(jié)構(gòu)入手,以其中具有