基於雲計算環境的TB/PB級海量數據查詢處理技術的研究

《基於雲計算環境的TB/PB級海量數據查詢處理技術的研究》是依託哈爾濱工業大學，由楊東華擔任項目負責人的青年科學基金項目。

基本介紹

• 中文名：基於雲計算環境的TB/PB級海量數據查詢處理技術的研究
• 依託單位：哈爾濱工業大學
• 項目類別：青年科學基金項目
• 項目負責人：楊東華

項目摘要

近年來，各行業的信息量呈爆炸性增長趨勢，一些科學套用中的數據量已經從幾十個TeraBytes發展到PetaBytes並且在不斷擴大。現有資料庫管理系統無法提供TB/PB級海量數據有效的存儲與查詢支持。如何有效地存儲、管理這些TB/PB級海量的數據集合，高效地支持各種複雜的查詢是資料庫領域面臨的一個新的挑戰性問題。為此，本課題從資料庫系統的角度，研究基於雲計算環境的TB/PB級海量數據查詢處理的關鍵理論和技術，包括海量數據的存儲與索引方法、海量數據的基本數據操作與複雜查詢算法，以及查詢最佳化與處理方法等，並研製相應的基於雲計算環境的TB/PB級海量數據查詢處理系統原型，驗證課題所提出方法的正確性和有效性。

結題摘要

該課題在國內外率先開展了基於雲計算環境的TB/PB 級海量數據查詢處理的相關研究工作，提出了一些TB/PB 級海量數據查詢處理的關鍵理論和技術，主要包括海量數據的存儲與索引方法、海量數據的基本數據操作與複雜查詢算法，以及查詢最佳化與處理方法等，並研製了一個基於雲計算環境的TB/PB 級海量數據查詢處理系統原型用於驗證算法的有效性和準確性。到目前為止，項目組已在國內外知名期刊和會議上發表學術論文16 篇(包括SCI索引的國際期刊5 篇，國際會議1 篇，國內一級期刊5 篇，國內會議5 篇)，其中SCI 檢索5 篇，EI 檢索11篇。