《面向無線通信的3D視頻感知編碼及碼率控制研究》是郁梅為項目負責人，寧波大學為依託單位的面上項目。
基本介紹
- 中文名：面向無線通信的3D視頻感知編碼及碼率控制研究
- 項目類別：面上項目
- 項目負責人：郁梅
- 依託單位：寧波大學
項目摘要,結題摘要,
項目摘要
無線信道頻寬有限，且可用頻寬、傳輸速率時變，要求面向無線通信的3D視頻壓縮與傳輸技術具備很強的自適應碼率控制能力。雙目融合與抑制是人類視覺系統處理雙目視覺信息的重要環節，是產生立體感的根源。該過程會增強或抑制立體圖像左右視點中的某些局部失真，對其合理利用可以有效提高3D視頻編碼碼率分配的合理性，達到在有限頻寬下儘可能提高解碼重建立體圖像主觀質量的目的。本項目將就3D視頻編碼環節引入的失真特點進行分析，探索雙目融合與抑制過程對不同圖像特徵感知的影響，建立適用於編碼失真評測的雙目融合與抑制數學模型；得到立體圖像不同特徵的失真測度模型，並以此為編碼失真測度修正3D視頻編碼率失真代價函式，建立率失真模型，刻畫立體圖像各局部失真與碼率、編碼參數之間的關係；探索如何合理地在3D視頻編碼碼率控制的各個層面進行合理的碼率分配和控制，以得到總體主觀質量最佳的立體圖像且時域和視點間質量均衡穩定的3D視頻信號。
結題摘要
無線信道頻寬有限，且可用頻寬、傳輸速率時變，要求面向無線通信的3D 視頻壓縮與傳輸技術具備很強的自適應碼率控制能力。雙目融合與抑制是人類視覺系統處理雙目視覺信息的重要環節，是產生立體感的根源。該過程會增強或抑制立體圖像左右視點中的某些局部失真，對其合理的利用可以有效地提高3D 視頻編碼碼率分配的合理性，達到在有限頻寬下儘可能提高解碼重建立體圖像主觀質量的目的。 本項目研究內容及成果如下：（1）分析了3D視頻編碼環節所引入的失真的特點，探索了雙目融合與抑制過程對不同圖像特徵感知的影響，研究了3D視頻圖像的雙目感知特性，建立了基於紋理複雜度的恰可察覺失真量化參數閾值模型、基於深度信息的恰可覺察失真模型、基於視網膜特性的立體感知恰可覺察模型等；（2）研究了3D視頻圖像失真評測模型，提出了基於模擬雙目感受野的立體圖像質量評價模型、基於雙目融合和抑制的立體圖像質量評價模型、基於時域質降幀特徵提取的半參考立體視頻質量評價模型等；（3）研究了3D視頻感知編碼及碼率控制算法，提出了基於紋理複雜度的自適應可變數化非對稱立體視頻編碼方案、基於多視點視頻加深度的3D視頻編碼聯合碼率分配及碼率控制新方法；提出3D重建圖像合成失真模型以表征彩色和深度編碼失真對繪製的影響，並採用率失真模型表征碼率與3D重建圖像合成失真的關係，得到彩色與深度視頻的最佳碼率比重，在視點層、彩色/深度層和幀層進行碼率控制，從而同時實現高性能圖像繪製和碼率控制；（4）研究了基於人類視覺感知的深度視頻處理方法，提出了基於區域特徵的深度視頻處理算法、基於人類視覺感知的深度視頻處理算法、時域和空域的適度視頻增強方法；（5）研究了3D視頻的低複雜度編碼算法，提出了基於感知的高效視頻編碼(HEVC)快速幀間編碼新方法、基於雙目恰可覺察失真的多視點彩色視頻快速編碼方法、基於區域分割的3D-HEVC深度視頻快速幀內編碼算法。
