《視頻中事件的內容分析與語義描述》是依託北京理工大學，由裴明濤擔任項目負責人的面上項目。
基本介紹
- 中文名：視頻中事件的內容分析與語義描述
- 依託單位：北京理工大學
- 項目負責人：裴明濤
- 項目類別：面上項目
項目摘要,結題摘要,
項目摘要
視頻中事件的內容分析與語義描述是視頻理解的核心內容，在智慧型視頻監控、智慧型視頻檢索等領域有著廣泛的套用前景。目前大部分的工作主要集中在持續時間較短、變化較少的事件識別，對持續時間較長、變化複雜的事件識別研究較少。本項目主要研究視頻中複雜事件的內容分析與語義描述，建立在底層視覺模式、中層原子事件、高層事件語義等多個層次進行分析的計算方法，以獲取發生了什麼事件、事件分為幾個階段、每個階段分別出現了什麼行為的語義描述。研究內容包括：視頻特徵生成式表示與建模的理論和方法，分析視頻中的基本視覺特徵：結構基元和紋理基元；完備的原子事件集合的生成方法，並基於原子事件集合對視頻中的原子事件類別進行標註；將原子事件的時序分割與整體事件的語義描述聯合建模，得到統一的計算模型，進而建立高層語義的推理算法。
結題摘要
視頻中事件的內容分析與語義描述是視頻理解的核心內容，在智慧型視頻監控、 智慧型視頻檢索等領域有著廣泛的套用前景。目前大部分的工作主要集中在持續時間較短、變 化較少的事件識別，對持續時間較長、變化複雜的事件識別研究較少。本項目主要研究視頻 中複雜事件的內容分析與語義描述，建立在底層視覺模式、中層原子事件、高層事件語義等多個層次進行分析的計算方法，以獲取“發生了什麼事件、事件分為幾個階段、每個階段分別出現了什麼行為”的語義描述。主要完成了層級視頻描述的複雜行為理解方法，基於關鍵片段提取的視頻事件檢測方法，採用分解動作-場景網路的動作識別方法，採用三維運動圖網路的動作識別方法，基於異質判別分析的跨視角動作識別方法以及基於多分量可變形部件模型的行人跟蹤方法。在進行理論和算法研究的同時，進行了套用研究和工程實現，取得了良好的效果。
