聯合信源信道的全浸式多描述視頻編碼

《聯合信源信道的全浸式多描述視頻編碼》是依託西安交通大學，由蘭旭光擔任項目負責人的面上項目。

基本介紹

• 中文名：聯合信源信道的全浸式多描述視頻編碼
• 項目類別：面上項目
• 項目負責人：蘭旭光
• 依託單位：西安交通大學

中文摘要

傳統二維視頻編碼已經在圖像清晰度和質量等方面均已有顯著提高，但無法提供用戶全浸式觀感。為人們提供全浸感和互動式功能，以獲取更加逼真的、身臨其境的觀感，成為下一代視頻編碼新的挑戰。本課題將研究多視點可伸縮和多描述編碼的基礎理論和核心算法，在複雜動態網路環境下進行聯合信源信道的多視點多描述編碼，實現全浸式視頻編碼和自適應傳輸。主要突破點包括高效視差估計、自適應碼率控制和高質量虛擬視點繪製等算法和關鍵技術；基於網路特性最佳化的多視點多描述生成方法；聯合信源信道自適應的多視點編碼與傳輸；複雜網路拓撲下的多視點多描述方法；以及其在P2P，Multicast和Broadcast等網路拓撲下的實際套用。預期研究成果包括高水平學術論文，具有自主智慧財產權的發明專利和專有技術，進而為我國在視頻媒體綜合服務相關標準的制定中提供核心算法。

結題摘要

隨著信息技術的迅速發展，二維視頻越來越不能滿足人們的需求。人們希望下一代視頻系統能夠為人們提供觀看視頻的全浸感和互動式功能，以獲取更加逼真的、身臨其境的觀感。在此背景下，多視點視頻編碼成為國內外研究機構和工業界的關注熱點。根據課題的研究內容，我們主要研究了複雜網路環境下聯合信源信道的多視點多描述編碼理論、技術和套用，提高了了複雜拓撲動態網路環境下全浸式視頻編碼與自適應傳輸性能。為進一步提高視頻編碼的效率和質量，我們首先研究了視頻分析算法，包括顯著性提取、視頻內容分割和姿態檢測等關鍵技術，以提取視頻關鍵內容。在此基礎上分別研究了多視點多描述編碼、傳輸和重構等問題，特別是對關鍵內容的編碼與傳輸，以提高多視點多描述視頻編碼質量。對於多視點多描述編碼和可伸縮編碼，根據不同數據類型和編碼環境，提出了多描述視頻編碼、壓縮感知及分形編碼等算法。在解碼端實現三維視點合成與重構算法，包括括高效視差估計、自適應碼率控制和高質量虛擬視點繪製等算法和關鍵技術。最後根據信源信道的特點，研究了傳輸過程中的容錯技術，提出多視點多描述視頻流碼率分配，以及針對動態丟包率和誤碼率的動態網路自適應多描述編碼等方法。最終實現在動態網路中對全浸式視頻高效編碼以及自適應傳輸。主要研究成果已發表在IEEE Trans.Multimeida和Trans. Broadcasting等11篇國際期刊和11篇國際會議論文上。申請國家發明專利2項。與美國西北大學（NU）進行學術交流，與美國加州大學聖地亞哥分校（UCSD）聯合培養博士生1名，共培養博士生3名，培養碩士研究生11名。