前饋神經網路的奇異學習動態研究

《前饋神經網路的奇異學習動態研究》是依託東南大學，由魏海坤擔任項目負責人的面上項目。

基本介紹

• 中文名：前饋神經網路的奇異學習動態研究
• 項目類別：面上項目
• 項目負責人：魏海坤
• 依託單位：東南大學
• 負責人職稱：教授
• 批准號：60875035
• 研究期限：2009-01-01 至 2011-12-31
• 申請代碼：F0601
• 支持經費：28（萬元）

中文摘要

由於結構對稱性等原因，多層感知器、RBF網等前饋神經網路的參數空間中存在大量的奇異區域。受這些奇異區域的影響，前饋神經網路的學習過程中普遍存在著局部最小點多、學習速度慢、學習易陷入平坦區（plateau）等異常現象。研究奇異區域附近的學習動態，對理解神經網路的動力學行為、改善神經網路設計等具有重要意義。本課題擬通過分析奇異區域的穩定性及其附近的學習軌跡，研究神經網路的奇異學習動態，並揭示plateau現象為代表的各類奇異學習行為的內在機理。研究結果將為改進神經網路學習和設計提供理論支持。