基于分布式文件系統(tǒng)的農(nóng)業(yè)數(shù)據(jù)云存儲(chǔ)研究.pdf

1、目前，我國(guó)傳統(tǒng)農(nóng)業(yè)正在向現(xiàn)代化農(nóng)業(yè)、數(shù)字化農(nóng)業(yè)和信息化農(nóng)業(yè)轉(zhuǎn)變?！?006-2020國(guó)家信息化發(fā)展戰(zhàn)略》指出:“重點(diǎn)建設(shè)農(nóng)村重要信息系統(tǒng)，增強(qiáng)信息資源共享服務(wù)能力?！彪S著我國(guó)農(nóng)業(yè)信息化建設(shè)的不斷深入，全國(guó)各個(gè)地區(qū)紛紛建立起自己網(wǎng)站和農(nóng)業(yè)信息服務(wù)站。各類(lèi)農(nóng)業(yè)數(shù)據(jù)資源呈現(xiàn)爆炸式增長(zhǎng)，并且具有多元化、異構(gòu)化的特點(diǎn)。目前，我們可以通過(guò)購(gòu)置高端的昂貴的存儲(chǔ)器和服務(wù)器來(lái)管理這些數(shù)據(jù);然而，將來(lái)會(huì)出現(xiàn)沒(méi)有一臺(tái)單獨(dú)的設(shè)備能夠存儲(chǔ)這么多數(shù)據(jù)的局面。另外，

2、由于農(nóng)業(yè)數(shù)據(jù)涉及領(lǐng)域較多，區(qū)域性強(qiáng)、季節(jié)性強(qiáng)，我國(guó)農(nóng)業(yè)信息資源分布在不同區(qū)域的PC機(jī)、服務(wù)器和數(shù)據(jù)存儲(chǔ)設(shè)備上，各個(gè)地區(qū)之間缺少聯(lián)系，使得各種農(nóng)業(yè)信息資源獨(dú)立存在，形成一個(gè)個(gè)的“信息孤島”，共享性較差。如何解決農(nóng)業(yè)信息化過(guò)程中農(nóng)業(yè)數(shù)據(jù)存儲(chǔ)的瓶頸問(wèn)題，是當(dāng)前農(nóng)業(yè)信息化過(guò)程中要研究的主要內(nèi)容。
　　 論文闡述了研究農(nóng)業(yè)數(shù)據(jù)云存儲(chǔ)的目的和意義，并對(duì)國(guó)內(nèi)外云存儲(chǔ)在農(nóng)業(yè)方面的應(yīng)用做了總結(jié)。然后比較了幾種文件系統(tǒng)的特點(diǎn)，最終確定借鑒HDFS文

3、件系統(tǒng)設(shè)計(jì)了分布式文件系統(tǒng)。分布式文件系統(tǒng)主要采用了文件備份、負(fù)載均衡和并發(fā)控制這三種技術(shù)。通過(guò)研究如何對(duì)文件復(fù)制形成多個(gè)副本，并存儲(chǔ)在不同的設(shè)備上，實(shí)現(xiàn)了數(shù)據(jù)的冗余，使得系統(tǒng)更加安全可靠，避免了因?yàn)槟撑_(tái)機(jī)器的故障造成文件無(wú)法訪問(wèn)的現(xiàn)象，并為負(fù)載均衡提供實(shí)現(xiàn)基礎(chǔ);通過(guò)研究對(duì)用戶上傳下載文件有效均衡的管理，使文件在各個(gè)節(jié)點(diǎn)上的存儲(chǔ)較為均衡，實(shí)現(xiàn)用戶對(duì)文件的訪問(wèn)有效地分流到不同的節(jié)點(diǎn)上，從而提高了系統(tǒng)性能;通過(guò)研究文件傳輸?shù)牟l(fā)性和遠(yuǎn)程調(diào)用