HBase數(shù)據(jù)庫評測關鍵技術的研究.pdf

1、隨著大數(shù)據(jù)時代的到來，互聯(lián)網(wǎng)信息系統(tǒng)應用的數(shù)據(jù)規(guī)模不斷擴大，傳統(tǒng)關系型數(shù)據(jù)庫已經(jīng)難以滿足對海量數(shù)據(jù)的存儲與處理的需求。為了解決海量數(shù)據(jù)的存儲與處理問題，各大互聯(lián)網(wǎng)公司以及科研機構紛紛提出應對不同場景的NoSQL解決方案，其中 HBase應用最為廣泛。但是，隨著 HBase數(shù)據(jù)庫的普及與推廣，如何對HBase數(shù)據(jù)庫進行評測已成為學術界研究的熱點。通過測試，模擬生產(chǎn)環(huán)境中的真實負載以及故障，以達到對HBase數(shù)據(jù)庫進行性能分析和調優(yōu)的目的，

2、對HBase數(shù)據(jù)庫的發(fā)展具有重要意義。本文主要從性能測試和容錯性測試兩個方向，提出對HBase數(shù)據(jù)庫進行評測的方案，并設計實現(xiàn)了HBase數(shù)據(jù)庫評測平臺。
　　本文構建了分布式性能測試工具，并針對HBase數(shù)據(jù)庫的特征，提出了性能評測指標體系。該工具采用經(jīng)典主從分布式結構，避免了負載發(fā)生端成為系統(tǒng)瓶頸的問題，可以將負載發(fā)生端部署在多臺廉價PC機上。在實現(xiàn)過程中，本文突破了數(shù)據(jù)發(fā)布與訂閱、分布式互斥鎖、分布式路障等多項技術難點。

3、r>　　本文采用故障注入的方式，對HBase數(shù)據(jù)庫的容錯性進行全方位的評估。本文從HBase數(shù)據(jù)庫整體的架構入手，結合其獨特的運行機制，在進程、組件、功能和網(wǎng)絡四個層次對其進行故障注入測試，分別模擬現(xiàn)實生產(chǎn)環(huán)境中可能出現(xiàn)的多種軟硬件故障，構建了一套HBase數(shù)據(jù)庫故障注入工具。
　　最后，本文搭建了由4臺服務器組成的小型HBase數(shù)據(jù)庫系統(tǒng)。結合分布式性能測試工具和故障注入工具對HBase數(shù)據(jù)庫進行評測，分析了相應實驗結果，并給出