高清3D裸眼視頻內容生成與編碼

《高清3D裸眼視頻內容生成與編碼》是蔣剛毅為項目負責人，寧波大學為依託單位的聯合基金項目。

基本介紹

• 中文名：高清3D裸眼視頻內容生成與編碼
• 項目類別：聯合基金項目
• 項目負責人：蔣剛毅
• 依託單位：寧波大學

項目摘要

高清3D裸眼視頻系統能提供立體感、臨場感等全新視覺體驗，高質量3D內容生成、高效編碼是其走向套用的關鍵。與單視點視頻系統相比，高清3D裸眼視頻系統存在3D節目觀看時可能的視疲勞、3D內容匱乏與製作過程複雜、3D數據海量、整體系統用戶3D視覺體驗質量等問題。現有方法在3D內容採集與重建很少考慮裸眼3D顯示的舒適性、3D視頻編碼失真的視覺感知，也很少考慮從3D系統體驗質量來設計各個環節。.本項目從研究影響3D視覺舒適性、編碼失真的感知特性、用戶體驗質量的因素出發，在設計主觀感知實驗、統計分析各因素影響的基礎上，建立數學模型，並對3D舒適度、3D感知失真、3D視覺體驗質量進行定量分析與客觀描述；提出基於視覺舒適度模型約束的3D內容採集與重建、基於感知失真測度模型的高效3D視頻編碼、基於用戶體驗質量預測模型的3D系統設計等理論與方法，以獲得最佳用戶體驗質量的3D內容、高效率的3D視頻壓縮。

結題摘要

高清3D裸眼視頻系統利用人眼雙目視覺感知特性形成立體感、臨場感，讓觀眾更真實直觀地感受世界，是新一代視頻技術的發展方向。 本項目致力於求解用戶視覺體驗質量與3D內容生成、3D視頻編碼等科學問題。從研究影響3D內容失真與3D視覺舒適性的視覺感知特性要素出發，通過設計主觀視覺感知實驗、統計分析各因素影響，對3D視覺失真測度、視覺舒適度等3D視覺體驗質量進行定量分析與描述，提出了基於人眼視覺感知特性的用戶體驗質量評價理論與方法，並套用於基於3D視覺舒適度評價約束的3D內容採集與重建、基於感知失真評價模型的高效3D視頻編碼、基於用戶體驗質量評價的3D視頻系統集成等，為實現高質量3D內容生成、高效率3D視頻編碼、高性能3D視頻系統設計等提供了可借鑑的理論與方法，形成了相關專利技術；構建了基於彩色+深度的實時雙目3D視頻原型系統、高逼真3D實時成像與顯示系統等面向不同套用的3D視頻原型系統。為實現高質量的3D內容生成及其高效編碼壓縮提供了相關理論與方法。 本項目發表學術論文125篇，其中國際SCI期刊論文72篇，IEEE Transactions、Optical Express等頂尖期刊長文19篇；在本領域權威國際會議上發表論文41篇，出版學術著作1部。獲授權發明專利35件（含授權美國發明專利4件）。部分成果獲省部級科技獎3項(一、二、三等獎各1項)、參與獲國家科技進步二等獎1項。 項目組主要成員獲國家自然科學基金優秀青年科學基金項目、浙江省自然科學基金傑出青年基金項目、“廣東特支計畫”科技創新青年拔尖人才項目等；共培養博士和碩士畢業生37名，建立了一支3D視頻研究領域的優秀科研隊伍。