基于Hadoop的網(wǎng)絡(luò)取證分析系統(tǒng)設(shè)計(jì)與實(shí)現(xiàn).pdf

1、近年來(lái)，隨著計(jì)算機(jī)和網(wǎng)絡(luò)技術(shù)在社會(huì)生活各方面應(yīng)用的深入，計(jì)算機(jī)網(wǎng)絡(luò)己經(jīng)成為人們生活中不可或缺的重要組成部分。在充分享受網(wǎng)絡(luò)帶來(lái)的方便快捷的同時(shí)，互聯(lián)網(wǎng)上的木馬、黑客、網(wǎng)絡(luò)犯罪等也給網(wǎng)絡(luò)安全帶來(lái)很大威脅，并且隨著網(wǎng)絡(luò)規(guī)模的不斷擴(kuò)大，網(wǎng)絡(luò)安全事件的數(shù)量及其造成的損失也在急劇增長(zhǎng)，網(wǎng)絡(luò)安全問(wèn)題日益突出，成為整個(gè)社會(huì)關(guān)注的焦點(diǎn)。根據(jù)2014年的CNCERT互聯(lián)網(wǎng)安全威脅報(bào)告顯示，網(wǎng)絡(luò)安全事件報(bào)告數(shù)量比去年有所增長(zhǎng)，并且存在一定數(shù)量的針對(duì)互聯(lián)網(wǎng)基

2、礎(chǔ)設(shè)施和公共網(wǎng)絡(luò)的拒絕服務(wù)攻擊事件和網(wǎng)絡(luò)犯罪事件。因此，打擊網(wǎng)絡(luò)犯罪勢(shì)在必行。
　　在證據(jù)信息化的大趨勢(shì)下，以計(jì)算機(jī)及其網(wǎng)絡(luò)為依托的電子證據(jù)在證明案件事實(shí)的過(guò)程中起著越來(lái)越重要的作用。鑒于此，網(wǎng)絡(luò)取證工作變的越來(lái)越重要，已日益成為國(guó)內(nèi)外學(xué)者和機(jī)構(gòu)研究的熱點(diǎn)。但目前進(jìn)行網(wǎng)絡(luò)取證仍然存在一些挑戰(zhàn)：如海量的網(wǎng)絡(luò)數(shù)據(jù)包；網(wǎng)絡(luò)證據(jù)的挖掘方法；網(wǎng)絡(luò)證據(jù)的可理解性等。針對(duì)上述問(wèn)題，本文利用Hadoop大數(shù)據(jù)平臺(tái)技術(shù)和聚類(lèi)分析技術(shù)，開(kāi)發(fā)了一種基于

3、Hadoop的網(wǎng)絡(luò)取證分析系統(tǒng)。利用該系統(tǒng)對(duì)各種網(wǎng)絡(luò)攻擊和不良行為進(jìn)行分析，取得了良好的效果。本文完成了以下工作：
　?。?）在閱讀大量國(guó)內(nèi)外相關(guān)參考文獻(xiàn)的基礎(chǔ)上，本文分析了目前網(wǎng)絡(luò)取證分析系統(tǒng)的應(yīng)用發(fā)展現(xiàn)狀，研究了網(wǎng)絡(luò)取證分析的相關(guān)技術(shù)，明確了系統(tǒng)設(shè)計(jì)的目標(biāo)，給出了系統(tǒng)需求分析，確定了系統(tǒng)開(kāi)發(fā)需要的技術(shù)，包括網(wǎng)絡(luò)數(shù)據(jù)包捕獲技術(shù)、HBase數(shù)據(jù)存儲(chǔ)技術(shù)和MapReduce并行技術(shù)等等。
　?。?）在需求分析的基礎(chǔ)上，設(shè)計(jì)了一

4、個(gè)基于Hadoop的網(wǎng)絡(luò)取證分析系統(tǒng)。首先對(duì)系統(tǒng)進(jìn)行了概要設(shè)計(jì)，確定了系統(tǒng)的三大模塊：數(shù)據(jù)采集模塊、數(shù)據(jù)存儲(chǔ)模塊和數(shù)據(jù)分析模塊，并設(shè)計(jì)出各個(gè)模塊的流程，然后從系統(tǒng)設(shè)計(jì)的角度對(duì)系統(tǒng)進(jìn)行了詳細(xì)設(shè)計(jì)，確定了系統(tǒng)的技術(shù)架構(gòu)和各個(gè)模塊的功能。
　?。?）在需求分析和系統(tǒng)設(shè)計(jì)的基礎(chǔ)上，采用C/S架構(gòu)，通過(guò)編程實(shí)現(xiàn)了基于Hadoop的網(wǎng)絡(luò)取證分析系統(tǒng)中的各項(xiàng)功能。最后，本系統(tǒng)部署在實(shí)驗(yàn)室的局域網(wǎng)環(huán)境下，對(duì)本系統(tǒng)進(jìn)行功能檢測(cè)和性能分析，通過(guò)模擬常