基于Hadoop架構的海量工程數(shù)據(jù)存儲與計算平臺構建
作者：蘭溯源; 楊燕興(指導) 延安大學建筑工程學院; 陜西延安716000; 不詳
摘要：針對當前海量的工程數(shù)據(jù)信息,如何對這些數(shù)據(jù)進行存儲,是當前思考的重點。論文提出利用Hadoop在存儲和計算方面的優(yōu)勢,構建一個可用于對多個工程數(shù)據(jù)信息進行海量存儲和管理的平臺。利用Hadoop對存儲平臺進行搭建,并重點對系統(tǒng)功能、內(nèi)部模塊運行邏輯,以及客戶端與服務器端數(shù)據(jù)同步等問題進行詳細的設計,同時創(chuàng)新地提出對MapReduce并行參數(shù)進行優(yōu)化,引入PSO蟻群算法,從而大大提高了存儲平臺作業(yè)的效率,為海量數(shù)據(jù)的處理提供了新的借鑒,可促進工程數(shù)據(jù)的共享與后續(xù)的深入分析。
注：因版權方要求，不能公開全文，如需全文，請咨詢雜志社。
現(xiàn)代科學儀器雜志
現(xiàn)代科學儀器雜志， 雙月刊，本刊重視學術導向，堅持科學性、學術性、先進性、創(chuàng)新性，刊載內(nèi)容涉及的欄目：綜述與評論、儀器研制與開發(fā)、分析測試技術和方法、實驗室建設等。于1984年經(jīng)新聞總署批準的正規(guī)刊物。
- 部級期刊
- 1個月內(nèi)審核
