《基於冗餘編碼的雲存儲技術研究》是依託中國人民解放軍國防科技大學,由黃震擔任項目負責人的青年科學基金項目。
基本介紹
- 中文名:基於冗餘編碼的雲存儲技術研究
- 項目類別:青年科學基金項目
- 項目負責人:黃震
- 依託單位:中國人民解放軍國防科技大學
中文摘要,結題摘要,
中文摘要
基於副本和基於冗餘編碼的存儲是保證雲存儲系統中數據可靠性的兩項基本技術。隨著數據存儲量的爆炸式增長,基於副本的雲存儲技術已經難以滿足雲計算服務的需求;而基於冗餘編碼的存儲技術不僅具有數據可靠,而且具有存儲量相對較小的優勢,被認為是下一代雲存儲系統的關鍵技術。然而,將現有的基於冗餘編碼的存儲技術套用於雲計算系統中,存在數據寫入慢、數據分配難、數據維護慢和解碼計算複雜度高等諸多難題。為此,面向上述挑戰性問題,我們將基於編碼的雲存儲技術研究,包括雲系統中數據的寫入、分配、維護、讀取等開展研究,旨在突破其中的一系列關鍵性技術,提出新的理論模型和技術方法,達到冗餘數據的高效寫入、數據分配的最小化冗餘、失效數據的快速修復、原始數據的快速解碼重構的目的。為測試和驗證上述研究成果的有效性,本項目將在實際的雲計算實驗系統中進行實驗驗證,為實現低成本、高可用、高效能的雲存儲系統提供新的技術途徑。
結題摘要
本項目主要面向基於冗餘編碼的存儲關鍵技術開展研究。研究內容圍繞雲系統中數據的分配、維護、讀取、寫入等問題開展,旨在突破其中的一系列關鍵性技術,提出新的理論模型和技術方法,達到數據分配的最小化冗餘、失效數據的快速修復、原始數據的快速解碼重構以及編碼數據的高效寫入等目的。 當前,項目已取得了一系列關鍵技術突破,例如,在數據寫入方面,寫入延遲相比星型寫入,寫入延遲可下降約為59.05%,寫入吞吐量可增加30%;在數據分配方面,系統可在保證可靠性的同時,達到最小化的數據冗餘度;在數據修複方面,多樹模式的修復可下降約80%;在數據讀取方面,數據讀取頻寬開銷可下降約86%。 上述結果表明,本項目已在數據寫入、數據分配、數據修復、數據讀取等方面,取得了一系列突破,可為實現低成本、高可用、高效能的雲存儲系統提供新的技術途徑。 而當前伴隨大數據時代的到來,數據存儲成為越來越熱的話題,數據冗餘的開銷也越來越大,因此,上述具有實際的套用前景和推廣價值。