《基於語義分割與理解的室外場景三維重建研究》是依託南京大學，由周余擔任項目負責人的青年科學基金項目。
基本介紹
- 中文名：基於語義分割與理解的室外場景三維重建研究
- 項目類別：青年科學基金項目
- 項目負責人：周余
- 依託單位：南京大學
項目摘要,結題摘要,
項目摘要
近年來，由於室外場景三維重建在許多領域的廣泛套用價值，成為了計算機圖形學、計算機視覺和遙感等多個領域的研究熱點。三維場景自動分割準確率較低，需要大量人工互動，大尺度室外場景難以自動重建；場景重建將場景分割看作一個獨立前置的過程，場景分割結果只是無語義的三維點雲，在重建過程中缺乏語義信息的幫助，輸出的模型通常只有一系列的格線，由於缺乏語義信息，難以編輯。三維場景語義信息在三維場景重建及三維場景的套用上扮演著重要的角色，所以，本項目結合自底向上的基於高階能量最佳化的語義分割方法與自頂向下的基於三維場景上下文的語義分割方法，實現對高密度、高噪聲、不完整的三維點雲的語義分割；同時在室外場景三維重建過程中利用語義信息進行重建並反向強化語義分割結果，自動生成新的三維場景訓練數據集。本項目的研究內容，將很大程度上促進室外場景重建技術的發展及其在城市規劃、導航、監控、災難模擬和計算機遊戲等領域的套用。
結題摘要
近年來，由於室外場景三維重建在許多領域的廣泛套用價值，成為了計算機圖形學、計算機視覺和遙感等多個領域的研究熱點。三維場景自動分割準確率較低，需要大量人工互動，大尺度室外場景難以自動重建；場景重建將場景分割看作一個獨立前置的過程，在重建過程中缺乏語義信息的幫助，輸出的模型通常只有一系列的格線，缺乏語義信息，難以編輯。三維場景語義信息在三維場景重建及三維場景的套用上扮演著重要的角色，所以，本項目提出了一種基於高階類別相關先驗知識的語義分割方法，從而實現對高密度、高噪聲、不完整的三維點雲的語義分割；並在室外場景三維重建過程中利用語義信息進行重建。同時，針對項目中遇到的問題和需求擴展研究了物體細類識別和非剛性物體三維重建。本項目的研究內容，將很大程度上促進室外場景重建技術的發展及其在虛擬現實、城市規劃、導航、安全安防和計算機遊戲等領域的套用。
