基于Hodoop的農(nóng)業(yè)博客研究與實現(xiàn)

西北農(nóng)林科技大學 王蒙

主要研究內(nèi)容及結論如下： (1)農(nóng)業(yè)博客基礎模型構建。首先根據(jù)廣大農(nóng)業(yè)用戶對農(nóng)業(yè)博客的應用需求，設計了農(nóng)業(yè)博客系統(tǒng)的整體系統(tǒng)架構。然后針對其整體架構改進了現(xiàn)有的博客開發(fā)模式，構建了農(nóng)業(yè)博客的分布式存儲模型及數(shù)據(jù)并行處理模型，并對傳統(tǒng)的推-拉模式進行了改進。 (2)農(nóng)業(yè)博客系統(tǒng)設計與實現(xiàn)。首先根據(jù)系統(tǒng)的功能需求、服務體系以及基本的模型規(guī)劃了農(nóng)業(yè)博客系統(tǒng)的總體功能架構，設計了總體數(shù)據(jù)流，并對系統(tǒng)的主要功能模塊進行詳細的設計，同時對主要的數(shù)據(jù)處理過程(存儲與訪問)進行了設計說明。然后對數(shù)據(jù)庫模式進行了詳細的設計與說明。最后利用MapReduce實現(xiàn)了數(shù)據(jù)的并行處理，同時對Coprocessor數(shù)據(jù)處理與數(shù)據(jù)訪問服務的實現(xiàn)進行了具體的說明。 (3)原型測試與分析。首先根據(jù)Hadoop的框架部署了分布式測試集群并整合了MyEclipse開發(fā)環(huán)境，然后對農(nóng)業(yè)博客系統(tǒng)的用戶界面進行了系統(tǒng)功能的測試，最后在模擬大數(shù)據(jù)集的條件下完成了對系統(tǒng)的性能測試分析。原型測試結果表明系統(tǒng)具有可行性和高效性。

基于Hodoop的農(nóng)業(yè)博客研究與實現(xiàn)