一、(11’)填空题
(1) 1948年,美国数学家 香农 发表了题为“通信的数学理论”的长篇论文,从而创
立了信息论。 (2) 必然事件的自信息是 0 。 (3) 离散平稳无记忆信源X的N次扩展信源的熵等于离散信源X的熵的 N倍 。 (4) 对于离散无记忆信源,当信源熵有最大值时,满足条件为__信源符号等概分布_。 (5) 若一离散无记忆信源的信源熵H(X)等于2.5,对信源进行等长的无失真二进制编码,
则编码长度至少为 3 。
(6) 对于香农编码、费诺编码和霍夫曼编码,编码方法惟一的是 香农编码 。 (7) 已知某线性分组码的最小汉明距离为3,那么这组码最多能检测出_2_______个码元错误,
最多能纠正___1__个码元错误。
(8) 设有一离散无记忆平稳信道,其信道容量为C,只要待传送的信息传输率R__小于___C(大
于、小于或者等于),则存在一种编码,当输入序列长度n足够大,使译码错误概率任意小。
(9) 平均错误概率不仅与信道本身的统计特性有关,还与___译码规则____________和___编码方
法___有关
三、(5 )居住在某地区的女孩中有25%是大学生,在女大学生中有75%是身高1.6米以上的,
而女孩中身高1.6米以上的占总数的一半。
假如我们得知“身高1.6米以上的某女孩是大学生”的消息,问获得多少信息量? 解:设A表示“大学生”这一事件,B表示“身高1.60以上”这一事件,则 P(A)=0.25 p(B)=0.5 p(B|A)=0.75 (2分)
故 p(A|B)=p(AB)/p(B)=p(A)p(B|A)/p(B)=0.75*0.25/0.5=0.375 (2分) I(A|B)=-log0.375=1.42bit (1分)
四、(5 )证明:平均互信息量同信息熵之间满足
I(X;Y)=H(X)+H(Y)-H(XY) 证明:
信息论与编码试卷及答案(多篇)_理学_高等教育_教育专区。信息论与编码试卷及答案,内蒙古工业大学一、概念简答题(每题 5 分,共 40 分) 1.什么是平均自信息...
2011信息论与编码试卷答案_理学_高等教育_教育专区。2011信息论与编码试卷答案《信息论与编码技术》试卷学生姓名 学号 班级 成绩 一、填空题(每空 1 分,共 30...
信息论与编码试卷与答案_理学_高等教育_教育专区。信息论与编码试卷与答案一、概念简答题(每题 5 分,共 40 分) 1.什么是平均自信息量与平均互信息,比较一...
信息论与编码试题集与答... 36页 1下载券 信息论与编码试卷答案 6页 免费信息论与编码试卷及答案1...
? 2 ? 信息理论与编码试卷A答案 中南大学考试试卷 200 -- 2010 学年 上学期期末考试试题 时间 100 分钟 信息论基础专业年级: 课程 32 学时 学分 考试形式: ...
信息论与编码试卷及答案_理学_高等教育_教育专区。信息论与编码试卷及答案一、 (11’)填空题 (1) 源的信源熵 H(X) 等于 2.5, 对信源进 行等长的无失真...
信息论与编码试卷及答案1_工学_高等教育_教育专区。信息论与编码期末考试题一、 (11’)填空题 (1) 1948 年,美国数学家 香农 立了信息论。 (2) 必然事件...
(11’)填空题 一、 () (1) 1948 年,美国数学家 香农 立了信息论。 (2...)) (8) 信源变长编码的核心问题是寻找紧致码(或最佳码) ,霍夫曼编码方法...
信息论与编码试卷及答案 7页 免费 信息论与编码(第二版)习题... 39页 免费搜你所想,读你所爱 拒绝盗版,营造绿色文库 如要投诉违规内容,请到百度文库投诉...
信息论与编码试题集与答案(2014)改_工学_高等教育_教育专区。14、不可能事件的自信息量是 1、平均自信息为 表示信源的平均不确定度, 也表示平均每个信源消 息...
热门文档