圖像語義，就是圖像內容的含義。圖像語義可以通過語言來表達，包括自然語言和符號語言（數學語言）。但圖像語義的表達並不限於自然語言，其外延對應於人類視覺系統對於圖像的所有理解方式。例如，對於一幅小狗的圖像，其圖像語義可以包括自然語言單詞“小狗”，也可以是一個表示該幅圖像中的小狗圖像的符號，該符號指的是與該幅圖像中的小狗具有相同品種、性別等屬性的“小狗”，即此時自然語言的表達和符號語言的表達並不相同。而人的視覺系統不僅將這幅圖像理解為語言單詞“小狗”及其屬性“品種”、“性別”等語言文字，也將其理解為一種抽象的“印象”，該“印象”使得人可以將這幅圖像與其他小狗的圖像區分開，在遇到該小狗的其他圖像時可以將其回憶起來。但限於對人的視覺系統的認知程度，圖像語義分析仍然主要通過語言來表達圖像語義，特別是使用語言單詞（稱為“關鍵字”）來表達圖像語義。圖像視覺基本特徵的提取與選擇、目標識別和圖像內容理解等均與高層語義特徵相關。基於圖像語義的圖像理解成為近年來的研究熱點之一。
基本介紹
- 中文名：圖像語義信息
- 外文名：Semantic Information
- 所屬學科：計算機視覺
定義,原理,套用,
定義
圖像語義，就是圖像內容的含義。圖像語義可以通過語言來表達，包括自然語言和符號語言（數學語言）。但圖像語義的表達並不限於自然語言，其外延對應於人類視覺系統對於圖像的所有理解方式。例如，對於一幅小狗的圖像，其圖像語義可以包括自然語言單詞“小狗”，也可以是一個表示該幅圖像中的小狗圖像的符號，該符號指的是與該幅圖像中的小狗具有相同品種、性別等屬性的“小狗”，即此時自然語言的表達和符號語言的表達並不相同。而人的視覺系統不僅將這幅圖像理解為語言單詞“小狗”及其屬性“品種”、“性別”等語言文字，也將其理解為一種抽象的“印象”，該“印象”使得人可以將這幅圖像與其他小狗的圖像區分開，在遇到該小狗的其他圖像時可以將其回憶起來。但限於對人的視覺系統的認知，圖像語義分析仍然主要通過語言來表達圖像語義，特別是使用語言單詞（稱為“關鍵字”）來表達圖像語義。圖像視覺基本特徵的提取與選擇、目標識別和圖像內容理解等均與高層語義特徵相關。基於圖像語義的圖像理解成為近年來的研究熱點之一。
原理
基於人工神經網路的圖像語義分析，常使用神經網路來建立圖像和圖像語義的關係模型。例如，將低層視覺特徵作為神經網路的輸入，將語義期望值作為網路的輸出，訓練神經網路對自然圖像進行分類。
套用
- 圖像分割
- 目標識別
- 場景分類
- 圖像檢索
