信息论基础-人文社科-文化科教-太极之巅书单号

书刊介绍

信息论基础内容简介

杨孝先等的《信息论基础》基于编者在中国科学技术大学多年的教学经验编写而成，其内容包括概述，信息的度量与熵，随机过程的信息量与熵率、渐近等分性质，信源编码，通信信道与信道容量，信息几何学等6章。每章都配备了足够多的例题与习题，书末还附有习题的提示和答案。《信息论基础》具有少而精、将主要问题讲深讲透而非面面俱到、由浅入深、便于自学等特点，可供高等院校应用数学专业，统计专业以及与计算机有关的信息学院、管理学院等一些专业作为学习“信息论”的教材或参考书。

信息论基础本书特色

杨孝先等的《信息论基础》自2002年的1999级开始已经有9届学生使用，他们提供了很多宝贵的建议，并评论称此讲义对定理给予的证明，包括种种算法，有很多技巧，其中一些是非常巧妙而有趣的，因此很享受这个学习的过程，本次成书即以此讲义为蓝本编写而成，并进行了较大幅度的修订和充实。本书除了介绍shannon信息论的基本概念、基本分析方法与主要结论之外，还注意到了与后续的另一门选修课——“数学控制论”的联系。本书配备了较多的例题与习题，书末还附有习题的提示与答案，供读者参考。本书以少而精、把主要问题讲深讲透而不是面面俱到为原则，行文力求通俗易懂，便于读者自学。

信息论基础目录

前言第1章概论1.1信息论的基本内容——信息理论所关注的信息特征1.2信息论简史1.3关于控制论、信息论与系统论1.4信息论的应用1.5有关的常用不等式习题1第2章信息的度量与熵2.1自信息2.2熵、条件熵、联合熵及其性质2.3互信息与相对熵2.4凸函数与熵的凸性2.5微分熵2.5.1连续信源的微分熵2.5.2联合微分熵、条件微分熵2.5.3连续信源的相对熵与互信息2.5.4具有*大微分熵的连续信源——*大熵原理2.5.5信息功率习题2第3章随机过程的信息量与熵率、渐近等分性质3.1随机过程的基本概念3.2熵率3.3冗余度与相对冗余度3.4数据处理不等式3.5平稳gauss随机过程的熵率3.6渐近等分性质3.7渐近等分性质在数据压缩中的应用——信源编码定理3.7.1无记忆信源的等长编码定理3.7.2一般离散信源的等长编码定理习题3第4章信源编码4.1等长编码4.2变长编码4.2.1kraft不等式