基于Hadoop的安全云存儲(chǔ)系統(tǒng)研究與實(shí)現(xiàn).pdf

1、隨著信息時(shí)代的數(shù)據(jù)量以PB級(jí)飛速增長，傳統(tǒng)存儲(chǔ)模式在大數(shù)據(jù)存儲(chǔ)方面的局限性逐漸暴露出來，單一存儲(chǔ)很容易使用戶數(shù)據(jù)丟失，造成巨大損失，越來越多的企業(yè)和研究機(jī)構(gòu)認(rèn)識(shí)到必須有一種新的存儲(chǔ)機(jī)制去改變存儲(chǔ)行業(yè)現(xiàn)狀。云存儲(chǔ)技術(shù)的引入為存儲(chǔ)模式的改變帶來了契機(jī)，國內(nèi)外機(jī)構(gòu)和企業(yè)在云存儲(chǔ)熱潮下紛紛推出自己的云存儲(chǔ)產(chǎn)品和解決方案，但由于對(duì)產(chǎn)品的安全性不夠重視，各類安全事故頻繁發(fā)生，給用戶造成了巨大損失。在此背景下，云存儲(chǔ)系統(tǒng)的安全性問題逐漸成為業(yè)界關(guān)注的

2、熱點(diǎn)。
　　本文在假設(shè)云計(jì)算提供商可信的前提下，從應(yīng)用安全的角度出發(fā)，通過大量關(guān)鍵技術(shù)的研究，構(gòu)建了一種基于Hadoop的安全云存儲(chǔ)系統(tǒng)。本文首先調(diào)研了國內(nèi)外機(jī)構(gòu)對(duì)云存儲(chǔ)系統(tǒng)和云存儲(chǔ)安全性的研究現(xiàn)狀，在此基礎(chǔ)上對(duì)構(gòu)建云存儲(chǔ)系統(tǒng)涉及到的關(guān)鍵技術(shù)進(jìn)行了深入研究，主要包括 HDFS數(shù)據(jù)讀寫原理、虛擬磁盤原理、文件系統(tǒng)過濾驅(qū)動(dòng)原理、HTTPS安全傳輸原理、多線程傳輸原理。隨后結(jié)合實(shí)際情況，對(duì)安全云存儲(chǔ)系統(tǒng)從功能和性能兩個(gè)方面進(jìn)行了需求分析

3、，并提出了系統(tǒng)的總體架構(gòu)，然后根據(jù)總體架構(gòu)從安全客戶端、安全可靠傳輸和服務(wù)器端三個(gè)大的模塊出發(fā)進(jìn)行了詳細(xì)設(shè)計(jì)，主要包括虛擬磁盤和文件系統(tǒng)過濾驅(qū)動(dòng)的兩級(jí)加密機(jī)制設(shè)計(jì)、多線程斷點(diǎn)續(xù)傳設(shè)計(jì)、服務(wù)端的存儲(chǔ)架構(gòu)及數(shù)據(jù)處理模塊設(shè)計(jì)。接下來從代碼實(shí)現(xiàn)的角度對(duì)系統(tǒng)各個(gè)模塊的實(shí)現(xiàn)過程進(jìn)行了詳細(xì)闡述，并對(duì)某些重要功能進(jìn)行了效果展示。最后對(duì)系統(tǒng)從功能上和性能上進(jìn)行了測(cè)試，經(jīng)測(cè)試構(gòu)建的系統(tǒng)達(dá)到了預(yù)定的功能需求，滿足響應(yīng)性、可靠性、可用性三個(gè)方面的性能指標(biāo)。