云存儲環(huán)境下分布式文件系統(tǒng)的副本策略研究.pdf

1、隨著互聯網的高速發(fā)展，網絡上產生的數據量呈爆炸式的增長，對這些數據的存儲成為了計算機領域研究的熱點。傳統(tǒng)的存儲方式，比如存儲區(qū)域網絡和網絡附加存儲因為其存儲容量和性能存在瓶頸，價格昂貴，不易擴展等原因，應用范圍受到限制。云存儲采用分布式文件系統(tǒng)為核心，硬件設備價格低廉，可擴展性好。副本技術提高了系統(tǒng)的可靠性、可用性和性能的同時，也帶來了負載均衡，網絡帶寬開銷，一致性等問題。
　　本文分析了當前典型的分布式文件系統(tǒng)，結合云存儲環(huán)境下

2、的業(yè)務特征，研究了相應的副本策略，重點考慮系統(tǒng)訪問的效率和性能，負載均衡，數據的一致性等問題，并根據這些需求設計和實現了分布式文件系統(tǒng)中的副本管理模塊。本文的主要工作包括以下內容：
　?。?）提出了基于一致性哈希的副本放置策略。傳統(tǒng)的分布式文件系統(tǒng)副本放置位置主要通過元數據中心服務器存儲，當系統(tǒng)并發(fā)訪問量很大時，元數據服務器將成為系統(tǒng)的瓶頸。基于一致性哈希的副本放置策略很好的解決了文件檢索，存儲設備擴展和失效的問題。引入虛擬節(jié)點映

3、射，極大地減少了系統(tǒng)設備的改變帶來的數據遷移。同時對設備按照存儲能力增加權重屬性，更好的提高了系統(tǒng)的負載均衡。
　　（2）提出了基于文件熱度的副本調整策略。該策略以文件的請求次數為基礎，結合服務器的負載，動態(tài)地調整副本數量，提升了系統(tǒng)的性能和效率。同時，輔以副本壓縮策略，對長時間沒有訪問的文件副本壓縮，在保證數據可靠性和可用性的同時，節(jié)省了系統(tǒng)的存儲空間。
　?。?）提出了基于用戶請求的副本一致性策略。該策略在對副本一致性維