信息论与编码第1章节绪论.pptVIP

信息论与编码;教材及参考书;前修课程;考核方法：; 第一章 绪论;举例说明： 电话通信中的PCM编码是一种具体的信息技术。语音信号以8KHz的速率抽样后，进行对数量化，然后进行8位二进制编码，变换成数字信号。这个过程叫做PCM(脉冲编码调制)。其理论基础就是信息论。;;数据也是记录信息的一种形式，如： 工资报表。但 数据并不是信息的唯一形式，信息还可以表现为文字、图像等。;4、从随机不确定性的角度 来定义信息 信息是指各个事物运动的状态及状态变化的形式。 信息是事物运动状态或存在方式的不确定性的描述。 （香农---信息论的奠基人） （举例：天气预报）; 20世纪20年代奈奎斯特（Nyquist，H.瑞典—美国）和哈特莱（Hartley，L．V．R．美国）最早提出了信息的定义 ; 50年代信息论在学术界引起了巨大的反响 ; 信息是指各个事物运动的状态及状态变化的方式。人们从来自对周围世界的观察得到的数据中获得信息。信息是抽象的意识或知识。 消息是指包含有信息的语言、文字和图像等，例如我们每天从广播节目、报纸和电视节目中获得各种新闻及其它消息。消息是具体的，它承载信息，但它不是物理性的。在通信中，消息是表示信息的符号或符号序列。 信号是消息的物理体现，是信息的载体。为了在信道上传输消息，就必须把消息加载（调制）到具有某种物理特征的信号上去。信号是物理性的，如电信号、光信号等。 ;信息论主要应用方向之一是通信领域。;信源 信源是向通信系统提供消息（u）的人和机器 信源输出的是以符号形式出现的具体消息，它载荷信息。 ;2、编码器（信源编码器、加密编码器、信道编码器） 编码器的作用：把消息变成适合信道传输的信号。 ;加密编码 将明文变成密文，隐藏消息中的信息内容。一般是用加密密钥对信号处理，只有用相应的解密密钥才能进行解密，可防止窃听。;5、其它部分 信宿 消息传送的对象；受信者。对应于发送端的信源 信宿需要研究的问题是能收到或提取多少信息 译码器 与发送端的编码器对应（反变换) 解 密-------加 密* ??道译码-------信道编码 信源译码-------信源编码;第3章主要介绍信道及信道容量。包括信道的基本概念、分 类、信道的表示参数（数学模型）。介绍离散单符号信道 （包括无干扰信道、对称DMC信道、准对称DMC信道和一般 DMC信道） 、离散序列信道、连续信道（包括连续单符号 加性信道、多维无记忆加性连续信道、限时限频限功率加 性高斯白噪声信道），它们的信道容量的计算。