信息理論基礎是講述基本理論和技術問題，其中包含通通信系統模型，統計度量等
基本介紹
- 書名：資訊理論理論基礎
- 作者：賈世樓
- 出版社：哈爾濱工業大學出版社
- 開本：32
出版信息,內容簡介,目錄,
出版信息
書名：資訊理論理論基礎
作者： 賈世樓編著 責編：
I S B N：978-7-5603-1601-7 定價：16.8
出版日期：2001-01-01 開本：32
所屬叢書： 頁數：318
圖書分類： 中圖分類：
內容簡介
本書主要介紹資訊理論的基本理論和技術問題。全書共分六章，其主要內容包括：引論、基本資訊理論、理想通信系統、抗干擾二元編碼、信號的統計檢測與參量估計、信息率失真函式與多用戶信道等。
目錄
第1章緒論
1.1信息
1.2通信系統模型
1.3資訊理論的形成和發展
習題1
第2章信息的統計度量
2.1自信息量和條件自信息量
2.1.1自信息量
2.1.2條件自信息量
2.2互信息量和條件互信息量
2.2.1互信息量
2.2.2互信息量的性質
2.2.3條件互信息量
2.3離散集的平均自信息量
2.3.1平均自信息量（熵）
2.3.2熵函式的數學特性
2.3.3條件熵
2.3.4聯合熵
2.3.5各種熵的性質
2.3.6加權熵
2.4離散集的平均互信息量
2.4.1平均條件互信息量
2.4.2平均互信息量
2.4.3平均互信息量的性質
2.5連續隨機變數的互信息和相對熵
2.5.1連續隨機變數的互信息
2.5.2連續隨機變數的熵
習題2
第3章離散信源
3.1信源的數學模型及其分類
3.1.1信源的數學模型
3.1.2信源的分類
3.2離散無記憶信源
3.3離散無記憶信源的擴展信源
3.3.1最簡單的離散信源
3.3.2N次擴展信源
3.3.3N次擴展信源的熵
3.4離散平穩信源
3.4.1平穩信源
3.4.2平穩信源的熵
3.4.3極限熵
3.5馬爾可夫信源
3.5.1有限狀態馬爾可夫鏈
3.5.2馬爾可夫信源
3.6信源的相關性和剩餘度
習題3
第4章離散信道及其容量
4.1信道的數學模型及其分類
4.2離散無記憶信道
4.2.1離散信道的數學模型
4.2.2單符號離散信道
4.2.3信道疑義度
4.2.4平均互信息
4.2.5各種熵、信道疑義度及平均互信息量之間的相互關係
4.3離散無記憶擴展信道
4.3.1N次擴展信道
4.3.2定理
4.4信道的組合
4.5信道容量
4.5.1信道容量的定義
4.5.2離散無噪信道
4.5.3離散對稱信道
4.5.4一般離散信道
4.5.5離散無記憶N次擴展信道
4.5.6獨立並聯信道
4.5.7信源和信道匹配
習題4
第5章無失真信源編碼
5.1編碼器
5.2分組碼
5.3定長碼
5.4變長碼
5.4.1碼的分類和主要編碼方法
5.4.2克拉夫特不等式和麥克米倫不等式
5.4.3唯一可解碼判別準則
5.4.4變長編碼定理
5.4.5變長碼的編碼方法
習題5
第6章有噪信道編碼143
6.1噪聲信道的編碼問題
6.1.1錯誤機率和解碼規則
6.1.2解碼規則
6.2錯誤機率與編碼方法
6.2.1簡單重複編碼
6.2.2訊息符號個數
6.2.3（5.2）線性碼
6.2.4漢明距離
6.3有噪信道編碼定理
6.4錯誤機率的上界
習題6
第7章限失真信源編碼
7.1失真測度
7.1.1失真函式
7.1.2平均失真
7.2信息率失真函式
7.2.1D允許信道（試驗信道）
7.2.2信息率失真函式的定義
7.2.3信息率失真函式R（D）的性質
7.3限失真信源編碼定理和逆定理
7.3.1限失真信源編碼定理
7.3.2限失真信源編碼逆定理
7.4信息率失真函式的計算
7.4.1R（D）參量表示法求解
7.4.2套用參量表示式計算R（D）的例題
7.4.3R（D）的疊代計算方法
習題7
第8章連續信源和波形信道
8.1連續信源的特徵
8.1.1連續信源
8.1.2連續信源的熵
8.1.3連續信源的最大熵
8.1.4聯合熵、條件熵和平均互動信息量
8.1.5連續信源的熵速率和熵功率
8.2連續信道的信道容量
8.2.1時間離散信道的容量
8.2.2時間連續信道的容量
8.3連續信道的信道編碼定理
8.4連續信源的信息率失真函式
習題8
第9章糾錯編碼
9.1糾錯碼的基本概念
9.2糾錯碼分類
9.3線性分組碼
9.3.1校驗矩陣與生成矩陣
9.3.2線性分組碼的糾、檢錯能力
9.3.3校驗矩陣與最小距離的關係一
9.3.4線性分組碼的伴隨式
9.3.5線性分組碼的解碼
9.3.6漢明碼
9.4幾種重要的糾錯碼
9.4.1循環碼
9.4.2卷積碼
習題9
第10章網路資訊理論基礎
10.1概述
10.2網路信道分類
10.2.1雙向信道
10.2.2反饋信道
10.2.3多源接人信道
10.2.4廣播信道
10.2.5中繼信道
10.2.6串擾信道
10.2.7多用戶通信網信道
10.3網路資訊理論中的編碼問題
10.3.1基本概念
10.3.2相關信源獨立編碼
10.3.3相關信源協同編碼
10.4幾種典型的網路信道
10.4.1多源接入信道
10.4.2高斯多源接人信道
10.4.3中繼信道
10.4.4廣播信道
10.4.5反饋信道
習題10
第11章資訊理論方法在信號處理中的套用
11.1最大熵譜估計
11.1.1最大熵譜估計及伯格遞推算法
11.1.2最大熵譜估計
11.2最小誤差熵估計與卡爾曼濾波
11.2.1最小均方誤差準則與最小誤差熵準則
11.2.2最小誤差熵準則推導卡爾曼濾波方程
習題11
參考文獻
1.1信息
1.2通信系統模型
1.3資訊理論的形成和發展
習題1
第2章信息的統計度量
2.1自信息量和條件自信息量
2.1.1自信息量
2.1.2條件自信息量
2.2互信息量和條件互信息量
2.2.1互信息量
2.2.2互信息量的性質
2.2.3條件互信息量
2.3離散集的平均自信息量
2.3.1平均自信息量（熵）
2.3.2熵函式的數學特性
2.3.3條件熵
2.3.4聯合熵
2.3.5各種熵的性質
2.3.6加權熵
2.4離散集的平均互信息量
2.4.1平均條件互信息量
2.4.2平均互信息量
2.4.3平均互信息量的性質
2.5連續隨機變數的互信息和相對熵
2.5.1連續隨機變數的互信息
2.5.2連續隨機變數的熵
習題2
第3章離散信源
3.1信源的數學模型及其分類
3.1.1信源的數學模型
3.1.2信源的分類
3.2離散無記憶信源
3.3離散無記憶信源的擴展信源
3.3.1最簡單的離散信源
3.3.2N次擴展信源
3.3.3N次擴展信源的熵
3.4離散平穩信源
3.4.1平穩信源
3.4.2平穩信源的熵
3.4.3極限熵
3.5馬爾可夫信源
3.5.1有限狀態馬爾可夫鏈
3.5.2馬爾可夫信源
3.6信源的相關性和剩餘度
習題3
第4章離散信道及其容量
4.1信道的數學模型及其分類
4.2離散無記憶信道
4.2.1離散信道的數學模型
4.2.2單符號離散信道
4.2.3信道疑義度
4.2.4平均互信息
4.2.5各種熵、信道疑義度及平均互信息量之間的相互關係
4.3離散無記憶擴展信道
4.3.1N次擴展信道
4.3.2定理
4.4信道的組合
4.5信道容量
4.5.1信道容量的定義
4.5.2離散無噪信道
4.5.3離散對稱信道
4.5.4一般離散信道
4.5.5離散無記憶N次擴展信道
4.5.6獨立並聯信道
4.5.7信源和信道匹配
習題4
第5章無失真信源編碼
5.1編碼器
5.2分組碼
5.3定長碼
5.4變長碼
5.4.1碼的分類和主要編碼方法
5.4.2克拉夫特不等式和麥克米倫不等式
5.4.3唯一可解碼判別準則
5.4.4變長編碼定理
5.4.5變長碼的編碼方法
習題5
第6章有噪信道編碼143
6.1噪聲信道的編碼問題
6.1.1錯誤機率和解碼規則
6.1.2解碼規則
6.2錯誤機率與編碼方法
6.2.1簡單重複編碼
6.2.2訊息符號個數
6.2.3（5.2）線性碼
6.2.4漢明距離
6.3有噪信道編碼定理
6.4錯誤機率的上界
習題6
第7章限失真信源編碼
7.1失真測度
7.1.1失真函式
7.1.2平均失真
7.2信息率失真函式
7.2.1D允許信道（試驗信道）
7.2.2信息率失真函式的定義
7.2.3信息率失真函式R（D）的性質
7.3限失真信源編碼定理和逆定理
7.3.1限失真信源編碼定理
7.3.2限失真信源編碼逆定理
7.4信息率失真函式的計算
7.4.1R（D）參量表示法求解
7.4.2套用參量表示式計算R（D）的例題
7.4.3R（D）的疊代計算方法
習題7
第8章連續信源和波形信道
8.1連續信源的特徵
8.1.1連續信源
8.1.2連續信源的熵
8.1.3連續信源的最大熵
8.1.4聯合熵、條件熵和平均互動信息量
8.1.5連續信源的熵速率和熵功率
8.2連續信道的信道容量
8.2.1時間離散信道的容量
8.2.2時間連續信道的容量
8.3連續信道的信道編碼定理
8.4連續信源的信息率失真函式
習題8
第9章糾錯編碼
9.1糾錯碼的基本概念
9.2糾錯碼分類
9.3線性分組碼
9.3.1校驗矩陣與生成矩陣
9.3.2線性分組碼的糾、檢錯能力
9.3.3校驗矩陣與最小距離的關係一
9.3.4線性分組碼的伴隨式
9.3.5線性分組碼的解碼
9.3.6漢明碼
9.4幾種重要的糾錯碼
9.4.1循環碼
9.4.2卷積碼
習題9
第10章網路資訊理論基礎
10.1概述
10.2網路信道分類
10.2.1雙向信道
10.2.2反饋信道
10.2.3多源接人信道
10.2.4廣播信道
10.2.5中繼信道
10.2.6串擾信道
10.2.7多用戶通信網信道
10.3網路資訊理論中的編碼問題
10.3.1基本概念
10.3.2相關信源獨立編碼
10.3.3相關信源協同編碼
10.4幾種典型的網路信道
10.4.1多源接入信道
10.4.2高斯多源接人信道
10.4.3中繼信道
10.4.4廣播信道
10.4.5反饋信道
習題10
第11章資訊理論方法在信號處理中的套用
11.1最大熵譜估計
11.1.1最大熵譜估計及伯格遞推算法
11.1.2最大熵譜估計
11.2最小誤差熵估計與卡爾曼濾波
11.2.1最小均方誤差準則與最小誤差熵準則
11.2.2最小誤差熵準則推導卡爾曼濾波方程
習題11
參考文獻
