云存儲中數(shù)據(jù)吞吐量優(yōu)化及完整性驗(yàn)證的研究.pdf

1、隨著大數(shù)據(jù)時(shí)代的到來，基于Software-as-a-service平臺的云數(shù)據(jù)存儲技術(shù)得到飛速發(fā)展，云服務(wù)商為用戶的數(shù)據(jù)提供彈性計(jì)算以及存儲空間的服務(wù)越來越受到歡迎。當(dāng)前大數(shù)據(jù)的發(fā)展趨勢主要圍繞實(shí)用性、性能以及可恢復(fù)性為目的。首先，一些光纖網(wǎng)絡(luò)采用XSEDE，ESnet，以及Internet2等方式為用戶提供高速鏈接。然而，由于各種限制因素的存在，比如次優(yōu)協(xié)議優(yōu)化，低效的端到端路由，發(fā)送/接收端磁盤性能瓶頸以及服務(wù)器處理器性能局限等因

2、素，制約了用戶無法獲取理論上的高速網(wǎng)絡(luò)。其次，用戶通過數(shù)據(jù)外包，可以減輕數(shù)據(jù)在本地存儲以及維護(hù)的負(fù)擔(dān)。但由于數(shù)據(jù)脫離了用戶的掌控范圍，使用戶數(shù)據(jù)的安全性也受到了極大的挑戰(zhàn)。因此，本文從數(shù)據(jù)傳輸吞吐量優(yōu)化以及共享數(shù)據(jù)完整性驗(yàn)證兩方面出發(fā)進(jìn)行研究：
　　針對傳統(tǒng)大數(shù)據(jù)密集型可擴(kuò)展的計(jì)算系統(tǒng)在數(shù)據(jù)源利用和數(shù)據(jù)傳輸方面效率不高的問題，提出一種基于全級C階矩并行流數(shù)模型預(yù)測廣域大數(shù)據(jù)吞吐量優(yōu)化方案。首先，為提高并行流數(shù)的預(yù)測精度，以提高瓶頸

3、鏈路的利用效率為目的，設(shè)計(jì)等效并行流數(shù)選取方式；然后，借鑒部分C階矩模型和完全二階矩模型，構(gòu)建全級C階矩模型，并且設(shè)計(jì)低采樣吞吐量優(yōu)化算法框架，降低計(jì)算復(fù)雜度；最后，通過在不同大小數(shù)據(jù)集上的實(shí)驗(yàn)表明，全級C階矩并行流數(shù)的預(yù)測模型更適合于大數(shù)據(jù)傳輸，并且效率更高。
　　隨著云數(shù)據(jù)存儲以及共享服務(wù)的發(fā)展，人們通過團(tuán)隊(duì)合作的工作模式越來越普遍，團(tuán)隊(duì)成員不僅可以訪問和更新數(shù)據(jù)，而且可以相互共享數(shù)據(jù)的最新信息。然而存儲在云上數(shù)據(jù)是在開放式的