私有云存儲系統(tǒng)的設(shè)計與實現(xiàn).pdf

1、隨著信息技術(shù)的不斷發(fā)展和普及,數(shù)據(jù)量迅猛增長,數(shù)據(jù)之間的聯(lián)系也越來越緊密,這使得高能性能計算[23,24]和大數(shù)據(jù)處理[25-27]日益成為人們關(guān)注的焦點。
　　如今,云存儲技術(shù)因其高效的管理方式,高可靠性,高安全性等特點成為企業(yè)存儲數(shù)據(jù)的首選解決方案。而在云存儲系統(tǒng)設(shè)計之中,其高效性、可擴(kuò)展性和安全性成為設(shè)計的難點和重點。
　　在云計算業(yè)界,云存儲系統(tǒng)的元數(shù)據(jù)管理單元和數(shù)據(jù)存儲單元的設(shè)計和實現(xiàn)一直是整個難點問題。由于文章篇

2、幅和時間的限制,本文重點研究數(shù)據(jù)存儲單元的設(shè)計和實現(xiàn)。本文根據(jù)當(dāng)前的存儲系統(tǒng)和分布式文件系統(tǒng)的特點和應(yīng)用,并結(jié)合企業(yè)存儲服務(wù)的實際需求,提出并實現(xiàn)了一種具有高可擴(kuò)展性和高可用性的云存儲系統(tǒng)C-Store。
　　本文先介紹已有的幾種分布式存儲系統(tǒng)和與云存儲相關(guān)技術(shù)理論基礎(chǔ),接著介紹本云存儲系統(tǒng)的總體設(shè)計思路和方法,重點介紹數(shù)據(jù)存儲系統(tǒng)的設(shè)計和實現(xiàn),最后通過對系統(tǒng)的測試來驗證之前的設(shè)計思路。
　　云存儲系統(tǒng)C-Store的總體架

3、構(gòu)采用分布式構(gòu)架,元數(shù)據(jù)部分和數(shù)據(jù)部分的數(shù)據(jù)采用分別存儲方式,并分別用不同的、各自的資源管理單元(桶)來存儲,這樣有利于元數(shù)據(jù)和數(shù)據(jù)分別管理和進(jìn)行性能優(yōu)化,避免單個節(jié)點失效帶來的風(fēng)險;同時采用負(fù)載均衡技術(shù)使之各個節(jié)點負(fù)載均衡,使用數(shù)據(jù)恢復(fù)策略等來提高系統(tǒng)的可靠性和可擴(kuò)展。
　　本文實現(xiàn)了數(shù)據(jù)存儲單元中的設(shè)計思路和設(shè)計要點。整個數(shù)據(jù)存儲子系統(tǒng)實現(xiàn)是在 Linux環(huán)境下使用 C++來實現(xiàn)的;實現(xiàn)之后系統(tǒng),用戶可以通過客服端來上傳、下載