面向渲染應用的分布式數據管理與訪問優(yōu)化.pdf

1、隨著影視行業(yè)的蓬勃發(fā)展,從傳統(tǒng)的2D平面電影時代發(fā)展到風靡全球的3D數字化電影時代,而達到這種效果的關鍵技術之一就是渲染技術。隨著單機越來越無法滿足渲染應用的處理需求,分布式集群下的渲染應用也逐漸普遍起來,強大的集群計算能力帶給渲染應用性能上的巨大提升,但同時由于渲染應用頻繁的數據IO訪問,使得磁盤IO成為了提升分布式渲染應用性能的瓶頸。
　　基于內存存儲的分布式數據緩存系統(tǒng)通過構建一個分布式的共享內存區(qū)域的方式,來存放所有分布式

2、渲染應用過程中產生的數據。在高效的分布式內存資源管理模塊中,利用內存池狀態(tài)信息管理機制來實現對共享內存的實時監(jiān)控;利用內存數據信息管理機制來記錄所有存儲在共享內存中文件數據的元數據信息,以方便快速查找到它們的位置;利用內存空間申請回收管理機制為上層渲染用戶提供內存資源申請與釋放的服務,讓渲染用戶可以自由的使用內存資源。同時在傳統(tǒng)分布式數據訪問方式的基礎上,針對渲染系統(tǒng)的特點提出了兩種數據訪問優(yōu)化策略。雙層多粒度鎖機制,在避免了多個渲染用

3、戶的數據訪問沖突的前提下,有效的減少了等待延遲的開銷。在用戶讀數據之前的預處理過程中,數據預取優(yōu)化策略有效的避免了對同一個存儲節(jié)點重復數據傳輸情況的發(fā)生,減少了網絡開銷,提高了數據訪問的效率。
　　實驗表明,面向渲染應用下的分布式數據緩存系統(tǒng)能夠很好的滿足了渲染應用數據存儲和訪問需求。完備的分布式內存數據管理為渲染應用提供了可靠的數據保障;針對渲染系統(tǒng)特點的數據訪問優(yōu)化策略,在滿足渲染應用需求的基礎上,給渲染應用數據讀取帶來了性能