包邮 信息论基础及应用

第1章 绪论1.1 信息的基本概念1.1.1 信息的不同定义1.1.2 信息的特征1.1.3 信息的性质1.1.4 信息的分类1.1.5 信息科学1.2 信息论的起源、发展及研究内容1.2.1 信息论的起源1.2.2 信息技术的发展1.2.3 信息论研究的主要内容1.2.4 信息论的应用1.3 编码理论概述1.3.1 编码理论的基本概念1.3.2 编码理论的发展1.3.3 编码理论研究的内容和目的习题 第2章 信息论的数学基础2.1 概率论基本知识2.1.1 随机事件与概率2.1.2 随机变量及其分布2.1.3 多维随机变量及其分布2.1.4 数学期望与方差2.2 随机过程基本知识2.2.1 随机过程及其统计描述2.2.2 随机过程的数字特征2.3 马尔可夫链2.3.1 马尔可夫过程及其概率分布2.3.2 多步转移概率的确定2.3.3 遍历性2.4 抽象代数基本知识2.4.1 群的基本概念2.4.2 环的基本概念2.4.3 域的基本概念及域上多项式 第3章 信源与信源熵3.1 单符号离散信源3.1.1 单符号离散信源的数学模型3.1.2 概率知识基础3.1.3 单符号离散信源的信息量3.1.4 互信息量和条件互信息量3.1.5 单符号离散信源的信源熵3.1.6 信源熵的基本性质和定理3.1.7 平均互信息量3.1.8 各种熵之间的关系3.2 多符号离散平稳信源3.2.1 离散无记忆扩展信源3.2.2 离散平稳信源的数学定义3.2.3 离散平稳信源的信源熵和极限熵3.3 马尔可夫信源3.3.1 马尔可夫(Markov)链3.3.2 马尔可夫信源3.3.3 马尔可夫信源熵3.4 连续信源3.4.1 连续信源的熵3.4.2 几种特殊连续信源的熵3.4.3 连续熵的性质及*大连续熵定理习题 第4章 无失真信源编码4.1 信源编码概述4.1.1 信源编码的定义4.1.2 克拉夫特(Kraft)不等式4.2 定长编码4.2.1 定长编码定理4.2.2 定长编码方法4.3 变长编码4.3.1 变长编码定理4.3.2 变长编码方法4.4 几种实用的无失真信源编码4.4.1 香农编码4.4.2 费诺编码4.4.3 哈夫曼编码4.4.4 游程编码4.4.5 冗余位编码4.4.6 算数编码4.4.7 字典编码习题 第5章 限失真信源编码5.1 失真测度与信息率失真函数5.1.1 平均失真度5.1.2 信息率失真函数的定义5.1.3 信息率失真函数的性质5.2 信息率失真函数的计算5.2.1 离散信源的率失真函数的计算5.2.2 连续信源的率失真函数5.3 限失真信源编码定理5.4 限失真信源编码简介5.4.1 语音信号的预测编码5.4.2 图像与视频信号的预测编码习题 第6章 信道及信道容量6.1 信道模型和分类6.1.1 一般信道的数学模型6.1.2 信道的分类6.1.3 信道容量的定义6.2 特殊的单符号离散信道的信道容量6.2.1 离散无噪信道的信道容量6.2.2 强对称离散信道的信道容量6.2.3 对称信道的信道容量6.2.4 准对称离散信道的信道容量6.2.5 一般离散信道的信道容量6.3 多符号离散信道6.3.1 多符号离散信道的数学模型6.3.2 离散无记忆信道的信道容量6.4 多用户信道及连续信道6.4.1 多用户信道6.4.2 连续信道习题 第7章 信道编码7.1 信道编码的基本概念7.1.1 信道编码的意义7.1.2 信道编码的分类7.1.3 信道编码的基本原理7.2 信道编码定理7.2.1 译码规则及错误概率7.2.2 信道编码定理7.2.3 检错与纠错原理7.2.4 检错与纠错方式和能力7.3 线性分组码7.3.1 概述7.3.2 线性分组码的生成矩阵和一致校验矩阵7.3.3 线性码的纠错能力7.3.4 线性分组码的译码7.3.5 汉明码7.4 循环码7.4.1 循环码的定义及多项式表示7.4.2 循环码的生成矩阵和一致校验矩阵7.4.3 循环码的编码7.4.4 循环码的译码 第8章 信息论方法的应用8.1 信息论在统计中的应用8.1.1 EM算法8.1.2 互熵与Fisher矩阵8.2 组合投资决策(Portfolio)中的应用8.2.1 组合投资决策问题8.2.2 量优组合投资决策的计算8.3 *大熵原理在经济学中的应用8.3.1 *大熵建模基本原理8.3.2 *大熵统计模型的优缺点8.3.3 封闭经济体中货币量的分布8.3.4 封闭经济体中财富的分布8.4 在自然语言中应用8.4.1 英语信源的熵和剩余度8.4.2 汉语信源的熵和剩余度 附录：模拟试题模拟试题一模拟试题一答案模拟试题二模拟试题二答案模拟试题三模拟试题三答案模拟试题四模拟试题四答案 参考文献