基于HDFS+Spark的時空大數據存儲與處理--以智慧無錫時空大數據為例
賈旖旎; 周新民; 曹芳 無錫市自然資源和規劃局; 江蘇無錫214131; 武大吉奧信息技術有限公司; 湖北武漢430223
關鍵詞：時空大數據 集群計算 存儲處理 數據挖掘
摘要：海量時空數據的高效存儲、讀寫、處理與分析是當前地理信息科學領域的研究熱點。本文對目前主流大數據技術產品進行了選取和融合,開展了基于HDFS+Spark的時空大數據存儲、處理分析等方面的研究和探討,以智慧無錫時空信息云平臺為應用對象,搭建了一套時空大數據存儲處理的集群平臺,并通過具體應用實驗,得到了時空數據存儲、處理、挖掘的響應時間及可視化展示結果,證實了HDFS+Spark集群計算平臺在解決時空大數據存儲、處理、挖掘方面的有效性。
軟件雜志要求:
{1}來稿若有基金項目或其他資金資助項目，請詳細列出基金或其他資金項目類型、名稱及編號，每篇來稿的基金項目或其他資金資助項目原則上不超過3個。
{2}編輯部收到稿件后立即編號，并給回執，日后聯系時請注明編號。在接到本刊回執3個月未接到稿件處理通知書，系該稿仍在審閱中。
{3}參考文獻盡可能使用近5年公開發表的文獻，數量在10—30條，采用順序編碼制著錄，依照其在文中出現的先后順序用阿拉伯數字標出，并將序號置于方括號中，排列于文后。
{4}每篇文稿均應標引3～8個中文及英文關鍵詞。
{5}來稿需注明作者的真實姓名、單位、地址、郵編、職務、專業等信息，寫明電子郵箱及電話以便聯系。凡學生來稿請務必注明學校、專業和年級。
注：因版權方要求，不能公開全文，如需全文，請咨詢雜志社
相關期刊
