大數據管理系統評測基準的理論與方法

《大數據管理系統評測基準的理論與方法》是依託華東師範大學，由錢衛寧擔任項目負責人的重點項目。

基本介紹

• 中文名：大數據管理系統評測基準的理論與方法
• 項目類別：重點項目
• 項目負責人：錢衛寧
• 依託單位：華東師範大學

項目摘要

資料庫評測基準在資料庫發展歷史中的作用不可替代。評測基準指一套用於評測、比較不同系統性能的規範，其度量能全面客觀反映各系統的性能差距，從而推動技術進步，形成競爭局面，引導行業健康發展。大數據環境中傳統基準不敷套用。立足中國式套用，開展評測基準研究，對推動大數據管理系統發展是一項“執牛耳”的工作。課題將圍繞評測基準三要素，即數據，負載，度量，從理論與方法、評測工具、套用驗證三個層面開展研究。重點研究與保證基準高仿真性、可適配性、可測量性相關的科學問題；形成大數據基準的基礎理論和方法學；提出數據/負載自動生成、度量指標選取以及評測的方法；結合領域套用制定相應基準，驗證所提理論，指導研發評測程式套件。課題承擔與合作單位長期合作，在國內率先開展了大數據管理系統評測基準的全面研究，有豐富的積累。研究成果將有助於降低大數據基準評測實施成本，為新型套用提供系統選型依據，促進大數據行業套用和產業健康發展。

結題摘要

資料庫評測基準在資料庫發展歷史中的作用不可替代。評測基準指一套用於評測、比較不同系統性能的規範，其度量能全面客觀反映各系統的性能差距，從而推動技術進步，形成競爭局面，引導行業健康發展。大數據環境中傳統基準不敷套用。立足中國式套用，開展評測基準研究，對推動大數據管理系統發展是一項“執牛耳”的工作。課題圍繞評測基準三要素，即數據，負載，度量，從理論與方法、評測工具、套用驗證三個層面開展研究 。重點研究與保證基準高仿真性、可適配性、可測量性相關的科學問題；形成大數據基準的基礎理論和方法學；提出數據/負載自動生成、度量指標選取以及評測的方法；結合領域套用制定相應基準，驗證所提理論，指導研發評測程式套件。課題承擔與合作單位長期合作，在國內率先開展了大數據管理系統評測基準的全面研究。研究成果包括一套完整的評測數據生成、數據-負載協同生成、多度量評測方法的理論和技術，BigDataBench、PeakBench、TSBenchmark等多個基準評測套件和工具集。成果已經在學術界和金融、電信、工業等領域得到推廣使用。項目團隊發起成立的BenchCouncil已迅速成為基準評測方面最活躍的學術和工業社區組織之一。項目成果將有助於降低大數據基準評測實施成本，為新型套用提供系統選型依據，促進大數據行業套用和產業健康發展。