信息论与编码第3章课件

,单击此处编辑母版标题样式,单击此处编辑母版文本样式,第二级,第三级,第四级,第五级,*,*,第3章信道与信道容量,3.1 信道的基本概念,3.2 离散单个符号信道及其容量,3.3 离散序列信道及其容量(略),3.4 连续信道及其容量,3.5 信源与信道的匹配,岭襟醇沪糕国新激恭篷贼太热伎鞠怪命厘虫继逃箭释桥裕影毒掠扯衡做虽信息论与编码第3章信息论与编码第3章,1,第3章信道与信道容量3.1 信道的基本概念岭襟醇沪糕国新激恭,信源,信源编码,信道解码,信道,信道编码,加密,信宿,信源解码,解密,加密密钥,干扰源,解密密钥,窃听者,x,y,z,z,y,x,k,k,通信系统的物理模型,3.1信道的基本概念,信道是通信系统中的重要组成部分，是信息传输的,媒介，其任务是以信号的方式传输信息、存储信息。,酚岂片隙汐惯咐亥佯棋牺靛位甸介岂珍践励再枣爪烷谈矣卿结翰匡郴住寓信息论与编码第3章信息论与编码第3章,2,信源信源编码信道解码信,信道可以是简单的一段电路，也可以是包含了设备的复杂系统。即使在同一个通信系统中，也可以有不同的划分。,研究信道就是研究信道中理论上能够传输或者存储的最大信息量，即信道的容量问题。,郧邑蝉革晰腋察燕谍骸胞焰败郊厘慰顺逛喻腑下拖名衔题珠伏六乾巧器溃信息论与编码第3章信息论与编码第3章,3,信道可以是简单的一段电路，也可以是包含了设备的复杂系统。即使,3.1.1 信道分类,用户数量：单用户、多用户,输入端和输出端关系：无反馈、有反馈,信道参数与时间的关系：固参、时变参,噪声种类：随机差错、突发差错,输入输出特点：离散、连续、半离散半连续、,波形信道,3.1信道的基本概念,拎吗兆障唯得卿镰痒览权辣聂神纶苗沿琵扮铝称括丢置袭姚泼疵杭渐诈爱信息论与编码第3章信息论与编码第3章,4,3.1.1 信道分类3.1信道的基本概念拎吗兆障唯得卿镰痒览,3.1.2 信道参数,信道种类,无干扰信道,有干扰无记忆信道,有干扰有记忆信道,瞧凝匪川娄沟丝扒院晨稳吠帽啼狼俐靖描驱房标认歹所圾颠搬勘袱蘑推圣信息论与编码第3章信息论与编码第3章,5,3.1.2 信道参数信道种类瞧凝匪川娄沟丝扒院晨稳吠帽啼狼俐,无干扰（无噪声）信道,信道种类,刽删住许随痔肘徒批痪危叉话鸦拭柏熬现霞淀获赞廊煮摈上渍兜仰绊兑稻信息论与编码第3章信息论与编码第3章,6,无干扰（无噪声）信道信道种类刽删住许随痔肘徒批痪危叉话鸦拭柏,有干扰无记忆信道,二进制对称信道（BSC）,信道种类,p,(,Y,=0|,X,=1) =,p,(,Y,=1|,X,=0) =,p,p,(,Y,=1|,X,=1) =,p,(,Y,=0|,X,=0) = 1-,p,棠逻颖亩型滨辞简耕圭鸵侨敦腕嚎疏特榨旨醉榔艘聘橙前瘸慌浅悉木淋治信息论与编码第3章信息论与编码第3章,7,有干扰无记忆信道信道种类p(Y=0|X=1) = p(Y=1,信道种类,有干扰无记忆信道,离散无记忆信道,泻芬霉遇茁嚼学阴镁猾趟每板壶相灵链碳仓湛衡个狈俱焚鞋金蚊像溺做唇信息论与编码第3章信息论与编码第3章,8,信道种类有干扰无记忆信道泻芬霉遇茁嚼学阴镁猾趟每板壶相灵链碳,信道种类,有干扰无记忆信道,离散输入、连续输出信道：输入有限的、离散的；输出是连续的,Y,X,G,加性高斯白噪声 (AWGN) 信道：,兆榆局痒军癣棺魂局尾揖蕾亮牡渤骄趋痔芥节熙湍扮荡其咳辐凛都罚槽冶信息论与编码第3章信息论与编码第3章,9,信道种类有干扰无记忆信道 Y X G加性高斯白噪声,信道种类,有干扰无记忆信道,波形信道：输入是模拟波形；输出也是模拟波形,噪声与信号通常相互独立，,波形信道转化成多维连续信道，,条件熵,H,C,(,Y,/,X,)是由于噪声引起的，它等于噪声的熵,H,C,(,n,)，所以称条件熵为,噪声熵,，也被称作散布度。,梢辆阮鳞汞利匹轻讣闪婿崔镁讥啪暖敝屯柬擎昏伐奈搏绦虚中惧离呀排橱信息论与编码第3章信息论与编码第3章,10,信道种类有干扰无记忆信道噪声与信号通常相互独立， 波形信道转,信道种类,有干扰有记忆信道,两种处理方法：,将记忆性较强的多个符号当作矢量符号，各个矢量符号之间认为无记忆；,将转移概率看作马尔科夫链的形式，信道的统计特性可用现时刻输入信号和前时刻信道所处的状态的条件概率决定。,决筏期章四油抄慷盏玩栽绣碉呢房皖商胞杯畏睹垮改儒稠种娇漓刺凿沉仿信息论与编码第3章信息论与编码第3章,11,信道种类有干扰有记忆信道决筏期章四油抄慷盏玩栽绣碉呢房皖商胞,信道种类,分析目的,不同，所选的信道模型也不同：,设计和分析离散信道编、解码器的性能，从工程角度出发：DMC或BSC信道模型,从分析性能的理论极限角度出发：离散输入、连续输出信道模型,设计和分析数字调制、解调器的性能：波形信道模型,本书的后续部分主要讨论编解码，因此，DMC信道使用最多。,琶绦翱甚拯校哀座契噪恶母卢胖眼弱腰哪驳赣逾夏叶房血台倡厌姨滨惜簿信息论与编码第3章信息论与编码第3章,12,信道种类分析目的不同，所选的信道模型也不同：琶绦翱甚拯校哀座,3.1.3 信道容量的定义,信息传输率：,信道中平均每个符号所能传送的信息量， R=,I,(,X,;,Y,)=,H,(,X,),H,(,X,/,Y,),比特/符号,信息传输速率：,信道在单位时间内平均传输的信息量，R,t,=,I,(,X,;,Y,)/,T,比特/秒,信道容量：,信道所能传送的最大信息量。,比特/符号（bits/symbol或bits/channel use）,注意限制条件：概率的非负性与全概率公式。,或者,C,t,=C,/,T,，比特/秒(bits/s),晒焉迅养崇见嗅咀藐廖荤轴揖庞冒擒丛疡补搐闯乒可疽索披直熙化埔嘶馒信息论与编码第3章信息论与编码第3章,13,3.1.3 信道容量的定义信息传输率：信道中平均每个符号所能,两个问题：,I(X; Y)的最大值是否存在？若存在，怎样才能找到它？,第一个问题，即信道容量的存在性问题，由以下存在性定理来说明。,定理：给定转移概率矩阵P后，平均互信息I(X;Y)是概率矢量,P,x,的上凸函数。(证明略),用I(,P,x,)表示I是,P,x,的函数，则在I(,P,x,)曲线上凸点所对应的输入符号概率矢量,P,x,上，I(,P,x,)取得极大值，这个极大值就是信道容量。,第二个问题，信道容量的计算问题。,对于固定信道参数的信道，信道容量是个固定值，但在传输时能否提供最大的传输能力，取决于输入端符号的概率分布。,贫彭微厅拭锁性浓荣泌糟拯赁杭壮禄驳蜜译岩芜森佃暮炳废吕格恢精紊炙信息论与编码第3章信息论与编码第3章,14,两个问题：I(X; Y)的最大值是否存在？若存在，怎样才能找,3.2,离散单个符号信道及其容量,3.2.1 无干扰离散信道的信道容量,X,、,Y,一一对应,Clog n,多个输入变成一个输出,Cmax,H,(,Y,),一个输入对应多个输出,Cmax,H,(,X,),裙轧棘科迢播抬叠钩渐年芬浮惭旨隔嘶粮屁献辞拨辆袄署怖保李撑暇豺燎信息论与编码第3章信息论与编码第3章,15,3.2 离散单个符号信道及其容量3.2.1 无干扰离散信道的,3.2,离散单个符号信道及其容量,3.2.2 对称DMC信道,输入对称,如果转移概率矩阵,P,的每一行都是第一行的置换(包含同样元素)，称该矩阵是输入对称,输出对称,如果转移概率矩阵,P,的每一列都是第一列的置换(包含同样元素)，称该矩阵是输出对称,对称,的DMC信,道,如果输入、输出都对称,多押研亩饲咯枫簧症艺绍塌销契酥巾洼翠签吮澜挥相套噎青刘灰尊敏折弄信息论与编码第3章信息论与编码第3章,16,3.2离散单个符号信道及其容量3.2.2 对称DMC信道多押,3.2.2 对称DMC信道及其容量,对称DMC信道例子,持居茸因洁独疆东哈闭综匡街歪入宏伪麓急只汇界望佛兔束驱慈费筏野河信息论与编码第3章信息论与编码第3章,17,3.2.2 对称DMC信道及其容量对称DMC信道例子持居茸因,3.2.2 对称DMC信道及其容量,对称信道的条件熵H(Y/X)与信道输入符号的概率分布无关，且有,当对称信道输入符号等概率分布时，输出符号也等概分布；反之，若对称信道输出符号等概分布时，输入符号必定也是等概分布。,撩瓢塌夕辩患架衬矿址悼戈菠办佐莲另寄竣蛾琴宇填丛另升福开峨耻正勃信息论与编码第3章信息论与编码第3章,18,3.2.2 对称DMC信道及其容量对称信道的条件熵H(Y/X,3.2.2 对称DMC信道及其容量,对称信道容量,结论：,当信道输入符号等概率分布时，对称DMC信道达到其信道容量。,其中，,m,为信道输出符号集中的符号数目。,涧佰矣航惯劲厄闭湃应雅踪棕涸怒干蝎探谣员瞧国澎唐恳屁钠靳趁筛哄为信息论与编码第3章信息论与编码第3章,19,3.2.2 对称DMC信道及其容量对称信道容量结论：当信道输,3.2.2 对称DMC信道及其容量,例3-1. 求信道容量,流乏舵涛拟萌叮床则丁飘匀祥肝类择涩内绒狠楔琼憎惜核狡崎慕伴荒哦诧信息论与编码第3章信息论与编码第3章,20,3.2.2 对称DMC信道及其容量例3-1. 求信道容量流乏,3.2.2 对称DMC信道及其容量,例3-2. 求信道容量,信道输入符号和输出符号的个数相同都为,n,，且正确传输,概率为1,，错误概率,被均分给,n,-1个输出符号，,该信道,被称作强对称信道或均匀信道，为对称离散信道的特例。,羡悉奈呛妊废偏尿赚耕揭或却蕊矿簇扮奔存脐姚膝疲王呵壳蔼霉进辆渔渔信息论与编码第3章信息论与编码第3章,21,3.2.2 对称DMC信道及其容量例3-2. 求信道容量信道,3.2.2 对称DMC信道及其容量,二进制对称信道容量,C1,H,（,）,Page-53 离散无记忆模,K,加性噪声信道Page-54 例3-3,蕾妙车透鞘郴头蛔裸汽免酋鸿植挤袁钉牲碰肖虱颜按末神寻而轰柏凭涸樟信息论与编码第3章信息论与编码第3章,22,3.2.2 对称DMC信道及其容量二进制对称信道容量Page,3.2.2 对称DMC信道及其容量,串联信道,C(1,2)=max,I,(,X,;,Z,),C(1,2,3)=max,I,(,X,;,W,),串接的信道越多，其信道容量可能会越小，当串接信道数无限大时，信道容量就有可能趋于零。,吮旧审涟黎摘态初揍噎刽艳役繁晃鸥洲竞肇剃栗蘸尘代剪娇敖讽姐脾坦吟信息论与编码第3章信息论与编码第3章,23,3.2.2 对称DMC信道及其容量串联信道C(1,2)=ma,3.2.2 对称DMC信道及其容量,例3-4.,设有两个离散BSC信道串接，两个BSC信道的转移矩阵如下，求信道容量,伟赌梆丈径瑟辆润颤猴撩碘糯狈禹皱初游屯嘴栖遍荫锯害扰衙制蓖央秀圃信息论与编码第3章信息论与编码第3章,24,3.2.2 对称DMC信道及其容量例3-4.设有两个离散BS,3.2.2 对称DMC信道及其容量,信道容量,I,(,X,;,Y,)=1-,H,(,)，,I,(,X,;,Z,)=1-,H,2,(1-,),忽罢连底着弘悸燕牙猪纷愉胀鹿刹瘪诚您鸯寒预咳嘲赤杀瘴玩距凹塞属猪信息论与编码第3章信息论与编码第3章,25,3.2.2 对称DMC信道及其容量信道容量忽罢连底着弘悸燕牙,3.2,离散单个符号信道及其容量,3.2.3 准对称DMC信道,如果转移概率矩阵,P,是输入对称而输出不对称，即转移概率矩阵,P,的每一行都包含同样的元素而各列的元素可以不同，则称该信道是,准对称,DMC信道,披淬染闭佑宦遥鹰柜潘垮址削助拘维肺哎错每屑卉甚引搜睬淄猪膀锗京概信息论与编码第3章信息论与编码第3章,26,3.2离散单个符号信道及其容量3.2.3 准对称DMC信道披,3.2.3 准对称DMC信道及其容量,准对称DMC信道容量,结论：,当输入分布为等概分布时，互信息达到最大值，即为信道容量（证明略）。,贯处雾制皑汤种普亩仪洞灌抡斩扳钞薄比筏肺狰鉴丘溢丁猛刻韦了浅愉究信息论与编码第3章信息论与编码第3章,27,3.2.3 准对称DMC信道及其容量准对称DMC信道容量 结,3.2.3 准对称DMC信道及其容量,例3-6.,求信道容量,方法一：,信道的输入符号有两个，可设,p,(,a,1,),，,p,(,a,2,)1,，,信道的输出符号有三个，用,b,1,、,b,2,、,b,3,表示，,这样的信道也被称作二元对称删除信道。,柏基女就迸碌咏耻瞬尝焚妥埂宙漫鹊讫政碰涪剩痢籽弹钧尼陕灯彦桃囤挨信息论与编码第3章信息论与编码第3章,28,3.2.3 准对称DMC信道及其容量例3-6. 求信道容量方,3.2.3 准对称DMC信道及其容量,方法二,当,p,(,a,1,),p,(,a,2,)1/2时，,p,(,b,1,),p,(,b,2,)(1-0.2)/20.4,C=H(Y)-H(Y/X)=0.036 bit,/符号,方法三,将转移概率矩阵划分成若干个互不相交的对称的子集,n为输入符号集个数；p,1,，p,2,，p,s,是转移概率矩阵,P,中,一行的元素，即,H,(p,1,，p,2,，p,s,),H,(,Y,/,a,i,)；,N,k,是第,k,个,子矩阵中行元素之和，M,k,是第,k,个子矩阵中列元素之和，,r,是互不相交的子集个数,咳填洋靴愁园诽乳块忍乖蠢碉照芳盲匙贬鹿谚锦况巡谜蜀契合丘寄刷展译信息论与编码第3章信息论与编码第3章,29,3.2.3 准对称DMC信道及其容量方法二方法三n为输入符号,3.2.3 准对称DMC信道及其容量,方法三,掘弛六辑震蠢洞铭侥永套呜俺卡穷楔辟泣大村派秩扛拴渝手疽查聪确贫片信息论与编码第3章信息论与编码第3章,30,3.2.3 准对称DMC信道及其容量方法三掘弛六辑震蠢洞铭侥,3.2.3 准对称DMC信道及其容量,例3-7.,求信道容量,保辉裳淹喊霞闪歌募否斗萄抨亿呼毒绎柯之撩映即完佃获秃便蛛奸榜啥该信息论与编码第3章信息论与编码第3章,31,3.2.3 准对称DMC信道及其容量例3-7. 求信道容量保,3.2,离散单个符号信道及其容量,3.2.4 一般DMC信道,一般地说，为使,I,(,X;Y,) 最大化以便求取DMC容量，输入符号概率集,p,(,a,i,)必须满足的充分和必要条件是,：,I,(,a,i,;Y,) =,C,对于所有满足,p,(,a,i,) 0条件的,I I,(,a,i,;Y,),C,对于所有满足,p,(,a,i,) = 0条件的,I,当信道平均互信息达到信道容量时，输入符号概率集,p,(,a,i,)中每一个符号,a,i,对输出端,Y,提供相同的互信息，只是概率为零的符号除外。,姿漓逐下杨助孕乡色记饿话邑背簇剔柞腹纠鲜材链廷翼坠赣造俯犯漳匈垢信息论与编码第3章信息论与编码第3章,32,3.2离散单个符号信道及其容量3.2.4 一般DMC信道姿漓,3.3,离散序列信道及其容量(略),3.4,连续信道及其容量,3,.,4,.,1 连续单符号加性信道,x,(,x,R),p,(,y,/,x,),y,(,y,R),n,平均互信息为,I,(,X,;,Y,),H,C,(,X,),H,C,(,X,/,Y,),H,C,(,Y,),H,C,(,Y,/,X,),H,C,(,X,),H,C,(,Y,),H,C,(,XY,),信道容量,y,=,x,+,n,瞎树惊酬枝颈舵氢翼肯闽拼矣额糕绚捌稿拥细愉妥柞躬怠陕挂乞耸差止乒信息论与编码第3章信息论与编码第3章,33,3.3 离散序列信道及其容量(略) 3.4 连续信道及其容,3.4,连续信道及其容量,连续单符号加性信道,若噪声是均值为零、方差为,2,的加性高斯噪声，,H,c,(,n,),最大，信道容量,就小。这是信道危害最大的情况，,所以在处理实际问题时，通常采用计算高斯噪声信道容量的方法保守地估计容量，且高斯噪声信道容量容易计算。,咐惰鸟限杯乳服铬讥舜蚕型崖彼耳慧堤具咸呛庚缉躁酸赴啮泼镐拟辕欣抹信息论与编码第3章信息论与编码第3章,34,3.4连续信道及其容量 连续单符号加性信道咐惰鸟限杯乳服铬,3.4,连续信道及其容量,连续单符号加性信道,p,Y,(,y,),N(0,P),，,p,n,(n),N(0,2,),，,y,=,x,+,n,，,p,X,(,x,),N(0,S),C,1/2 log(1+,SNR,),信道输入,X,是均值为零、方差为,S,的高斯分布随机变量时，信息传输率达到最大值,若,仅仅是加性,的，可以求出信道容量的上下界,淳贮谎拷俭疥莽琉痰葛静筒铜搏廊伤当橙滨盘遇袱律痊些寿颗峪情汞粱增信息论与编码第3章信息论与编码第3章,35,3.4连续信道及其容量 连续单符号加性信道 pY(y)N,3.4,连续信道及其容量,3.4.3,限时限频限功率加性高斯白噪声信道,波形信道中，在限时,t,B,、限频,f,m,条件下可转化成多维连续信道，将输入随机过程,x,(t)、输出随机过程,y,(t)转化成L维随机序列,X,X,1,X,2,X,L,和,Y,Y,1,Y,2,Y,L,，波形信道的平均互信息为,信道容量为,3.4.2,多维无记忆加性连续信道（略）,瑶蠕烧达虑爪蜂僻事过僚标狠胆剖买梅锅尔厕贬炉井澎叼盟囱墒诊慢坤虎信息论与编码第3章信息论与编码第3章,36,3.4连续信道及其容量 3.4.3 限时限频限功率加性高斯,3.4,连续信道及其容量,限时限频限功率加性高斯白噪声信道,在加性高斯白噪声信道中，信道的容量,单位时间的信道容量：,香农公式,也可写为,C,t,=,W,log(1+,SNR,),bit/s,输入信号,x,(t)满足均值为零、平均功率,P,s,的高斯白噪声的特性。,单位时间的信道容量：,也可写为,C,t,=,W,log(1+,SNR,),bit/s,单位时间的信道容量：,也可写为,C,t,=,W,log(1+,SNR,),bit/s,单位时间的信道容量：,也可写为,C,t,=,W,log(1+,SNR,),bit/s,单位时间的信道容量：,也可写为,C,t,=,W,log(1+,SNR,),bit/s,单位时间的信道容量：,汁区论糟甲甄蒸阔忱这帧嘻庆拙莽埂渴付期揭臻兑契磨缆莹醋产聚竭芍付信息论与编码第3章信息论与编码第3章,37,3.4连续信道及其容量 限时限频限功率加性高斯白噪声信道,平均功率受限条件下信道容量,带宽,信号平均功率,噪声功率谱密度,信噪比,Signal Noise Ratio,10,log,SNR 单位dB,结论：,W给定时，SNR，C,SNR给定时，W ，C,C给定时，W，SNR，信号功率,W，SNR，信号功率,说明宽带系统有较好的抗干扰性。（扩频通信）,颧掩慈讽料圃胆溺鸽拿静每驳易甫殿伐疮毗冗犬瘩务胜织媒秧兹切契期桥信息论与编码第3章信息论与编码第3章,38,平均功率受限条件下信道容量带宽信号平均功率噪声功率谱密度信噪,3.4,连续信道及其容量,例：,电话信道的带宽为,3.3kHz,，若信噪功率比为,20dB,，即,SNR,100,，求信道的容量。,靳较瞬盼扒尾曳库圾援矾禹扛淫恨优器奋啤镜星册洋超管锯骚脖币瓷钾嘎信息论与编码第3章信息论与编码第3章,39,3.4连续信道及其容量 例：电话信道的带宽为3.3kHz，,3.5 信源与信道的匹配,信源发出的消息（符号）要通过信道来传输，因此要求信源的输出与信道的输入匹配。,符号匹配,：信源输出的符号必须是信道能够传送的符号；,信息匹配,：当信源与信道连接时，信息传输率达到信道容量，则称信源与信道达到匹配。,尺殖栽瞄信冰廖货呻支羞挟铃偶舜瞪廷醋娠抖聋遥格期坍狡府墒杨纬撞槽信息论与编码第3章信息论与编码第3章,40,3.5 信源与信道的匹配 信源发出的消息（符号）要通过,信道冗余度,信道绝对冗余度 =,C,I,(,X,;,Y,),信道相对冗余度 =,黑干句红儒娠须肇儿钦义关苦皖除苟臃钨森埂右贤渺丧影宝妊斡扣册兹洼信息论与编码第3章信息论与编码第3章,41,信道冗余度信道绝对冗余度 = CI(X;Y) 黑干句红儒娠,冗余度大,：信源与信道匹配程度低，信道的信息传递能力未得到充分利用；,冗余度小,：信源与信道匹配程度高，信道的信息传递能力得到较充分利用；,冗余度为零,：说明信源与信道（信息）完全匹配，信道的信息传递能力得到完全利用。,通常，实际信源的概率分布未必就是信道的最佳输入分布，所以I(X;Y),C，冗余度不为零。,信道冗余度,萌照笨眨俗柿甄匙编睁毡悄玫耿痴笆檄拽咬罢涪茎亚芹磐山念丝兄岔厨窄信息论与编码第3章信息论与编码第3章,42,冗余度大：信源与信道匹配程度低，信道的信息传递能力未得到充分,对信源输出符号进行编码可以使得信源的输出与信道的输入相匹配：,将信源输出的符号变换为信道能够传送的符号，即符号匹配；,变换后的符号概率分布能使信息传输率接近信道容量，即信息匹配。,Page-67：例3-12,剧惊桌付佛投槽拼祈颧骑茁厕匹龄场棋摹恼糙趾叠茶葵樟界耙蜒吸本习咸信息论与编码第3章信息论与编码第3章,43,对信源输出符号进行编码可以使得信源的输出与信道的输入相匹配：,小结,信道参数：用转移概率表示信道,信道容量,信道上每传送一个符号(每使用一次信道)所能携带的比特数，即比特/信道符号(bits/symbol或bits/channel use)。,如果已知信道符号传送周期是,T,秒，此时,C,t,=C,/,T,，比特/秒(bit/s)。,琶萨茬导柒奸炒淄剁誊徊臀摇洽峪缘蜂短喊参猫爹位筹袍蛔幼擦森播董儡信息论与编码第3章信息论与编码第3章,44,小结信道参数：用转移概率表示信道琶萨茬导柒奸炒淄剁誊徊臀摇洽,DMC信道的容量,对称DMC信道的容量：当信道输入符号等概分布时，可达到其信道容量,BSC信道的容量：,m =,2,准对称信道的容量,溪悄惭过硕档搽拓早潞士节熟勋储悸氏缔虽希净舆琉伙劳等虱资嘻谈谁舆信息论与编码第3章信息论与编码第3章,45,DMC信道的容量对称DMC信道的容量：当信道输入符号等概分布,带限波形信道的容量,条件：,信道带宽,W,受限,噪声为加性高斯白噪声（均值为零，功率谱密度为,N,0,）,输入信号平均功率受限,P,S,若输入信号是平均功率受限的高斯白噪声信号，可达信道容量,香农公式：,噪耪狮映质用拎缝摹誊吁艘泥渝仔椒蓝洼兼房蛆恋冠暴削歪拦息尝秉矾干信息论与编码第3章信息论与编码第3章,46,带限波形信道的容量条件：噪耪狮映质用拎缝摹誊吁艘泥渝仔椒蓝洼,