《基於多視角結構稀疏表達的自由視角視頻合成方法研究》是依託北京理工大學，由張磊擔任項目負責人的面上項目。
基本介紹
- 中文名：基於多視角結構稀疏表達的自由視角視頻合成方法研究
- 依託單位：北京理工大學
- 項目負責人：張磊
- 項目類別：面上項目
項目摘要,結題摘要,
項目摘要
自由視角視頻合成是將有限視角採集的視頻數據通過關聯和重構生成場景在視場範圍內任意新視角下的視頻，在視頻監控、3D 電視、視頻會議等領域有著重要的套用。傳統自由視角視頻合成方法缺乏視頻結構在多視角關聯下的有效表達，很難進一步提高場景建模和新視角場景繪製與融合的效率和質量。本項目擬結合計算機圖形學、圖像與視頻處理中的相關理論和算法，利用多視角視頻數據的稀疏性作為線索，克服由於多視角關聯產生的信息冗餘對場景建模和場景繪製與融合的限制，探索基於稀疏性的多視角視頻數據的關聯組織及高效表示，研究多視角結構的稀疏表達方法，並利用多視角結構研究視頻場景建模和新視角場景繪製與融合等關鍵技術，以進一步提高自由視角視頻合成的效率和質量，為多視角視頻相關的套用服務提供技術支撐。預期在在國內外重要學術期刊和會議上發表高水平論文10 篇以上，其中國際重要期刊論文6 篇以上，申請專利7 項以上。
結題摘要
自由視角視頻合成是將有限視角採集的視頻數據通過關聯和重構生成場景在視場範圍內任意新視角下的視頻，在視頻監控、3D 電視、視頻會議等領域有著重要的套用。本項目利用多視角視頻數據的稀疏性作為線索，克服由於多視角關聯產生的信息冗餘對場景建模和場景繪製與融合的限制，探索基於稀疏性的多視角視頻數據的關聯組織及高效表示，研究多視角結構的稀疏表達方法，並利用多視角結構研究視頻場景建模和新視角場景繪製與融合等關鍵技術。具體來講，基於相鄰視角幾何結構（點、線）的相似性，建立了滿足幾何特徵稀疏性的多視角結構，並通過幾何匹配進行有效計算；針對視差相對較小的光場圖像，提出了利用分塊相似性誘導的稀疏性進行多視角重建的方法，用於任意視角視頻高質量合成；針對視差相對較大的監控視頻，提出了利用幾何結構誘導的稀疏性進行視角合成的方法，用於大視場視頻的視角合成。相關工作發表及錄用論文10篇，其中SCI國際期刊6篇；申請國家發明專利7項。這些成果對視頻監控、3D電視內容製作等具有潛在的套用價值。
