文档介绍：第一章
(小)信息量
任何信源产生的输出都是随机的,采用统计方法定性。
对接收者来说,只有消息中不确定的内容才构成信息。
信息量:可能性小,概率小,信息量大
信息量的计算
信息量与消息的种类、特定内容及重要程度无关,它仅与消息中包含的不确定度有关。消息中所含信息量与消息发生的概率密切相关。消息发生概率愈小,愈使人感到意外和惊奇,则此消息所含的信息量愈大。
在信息论中,消息所含的信息量I与消息x出现的概率P(x)的关系式为
I代表两种含义:当事件x发生以前,表示事件x发生的不确定性;当事件x发生以后,表示事件x所含有(或所提供)的信息量。
信息量的单位由对数底的取值决定。若对数以2为底时单位是“比特”(bit — binary unit的缩写);若以e为底时单位是“奈特”(nat—nature unit的缩写);若以10为底时单位是“哈特”(Hart — Hartley的缩写)。通常采用“比特”作为信息量的实用单位。
以上我们讨论了离散消息的度量。类似,关于连续消息的信息量可用概率密度来描述。可以证明,连续消息的平均信息量(相对熵)为
(小)网络协议的概念
网络协议的定义:为计算机网络中进行数据交换而建立的规则、标准或约定的集合
第二章
3、(小)抽样频率必须在2fm以上,抽样频率2fm称为奈奎斯特频率
例如:一路电话的频带为300~3400Hz,fm=3400Hz,则抽样频率fs≥2×3400=6800Hz
(小)二进制码组有3种:自然二进制、格雷码、折叠二进制码
各种优缺点:
①自然二进制码和二进制数一一对应,简单易行,它是权重码,每一位都有确定的大小,可以直接进行大小比较和算术运算。自然二进制码可以直接由数/模转换器转换成模拟信号,但在某些情况,例如从十进制的3转换成4时二进制的每一位都要变,使数字电路很大的尖峰电流脉冲。
②格雷码则没有自然二进制码这一缺点,它在相邻电平间转换时,只有一位发生变化,格雷码不是权重码,每一位码没有确定的大小,不能直接进行比较大小和算数运算,也不能直接转换成模拟信号,要经过一次码变换,变成自然二进制码。
③折叠二进制码沿中心量化电平上下对称,适于表示正负对称的双极性信号。它的最高位用来区分信号幅值的正负。折叠码的抗误码能力强。
5、(小)13折线A律电平范围及其段落码列表
PCMA率被称为13折线的原因是:A率中的常数A不同,则压缩曲线的形状不同,这将特别影响小电压时的信号信噪比的大小,在实用中选择A=,因为13折线的特性近似于A率的特性,因为A律是一条平滑的曲线,分为13段,用电子路很难准确的实现,所以一般用13折线来逼近A律。
例如:PCMA率的编码,已知电压范围-5,+5之间,,求对其PCMA率编码为多少?(参考课本P39 图及P40 例2-1)
>0,所以a1=1,*2048=≈860△∈(512,1024),所以段落码a2a3a4=110
因为860△>(512+1024)/2=768△所以a5=1,
因为860△< (768+1024)/2=896△所以a6=0,
因为860△>(768+896)/2=832△所以a7=1,
因为860△<(832+896)/2=864