信息论与编码[第六章有噪声道编码定理与纠错码]山东大学期末考试知识点复习

整理文档很辛苦,赏杯茶钱您下走!

免费阅读已结束,点击下载阅读编辑剩下 ...

阅读已结束,您可以下载文档离线阅读编辑

资源描述

山东大学期末考试知识点复习第六章有噪声道编码定理与纠错码6.1.1译码准则在有噪信道中传输消息是会发生错误的,而接收端引起错误的大小与选择的译码准则有关,也与信道编码所选码字有关。3.最小距离译码准则(1)汉明距离码字αi和输出序列βj之间对应位置上不同码元的个数,记为D(αi,βj),称汉明距离。对于二元信道(二元码)汉明距离为山东大学期末考试知识点复习在二元对称信道中最小距离译码准则等于最大似然译码准则。而在其他信道中,它们不一定相等。6.1.2平均错误概率最小错误概率译码准则使PE最小。最大似然译码准则本身只与信道传递概率有关,不再依赖先验概率P(αi)(或P(ai)),但不一定能使PE最小。最大似然译码准则只有在输入符号等概率分布时PE才达最小,此时他与最小错误概率译码准则是等价的。6.1.3费诺不等式6.1.4信道编码的编、译基本原则山东大学期末考试知识点复习主要讨论二元对称无记忆信道。1.编码原则在n次扩展信道输入符号αi中选取M个码字组成一组码书C,应尽量使选取的M个码字中任意两不同码字的汉明距离尽可能地大。2.译码原则采用最大似然译码准则,即当收到βj后,译成与之汉明距离为最近的那个码字α*。遵照上述编、译码原则,可做到保持一定信道信息传输速率(码率)R,而使PE尽可能地小。6.1.5联合ε典型序列山东大学期末考试知识点复习6.1.6有噪信道编码定理及其逆定理1.定理及其逆定理有噪信道的信道容量为C,若信息传输率RC,只要码长n足够长,必存在一种信道编码和相应的译码规则,使译码平均错误概率PE为任意小。反之,若RC则不存在以R传输信息而PE为任意小的码。山东大学期末考试知识点复习此定理可推广到有记忆信道、连续信道、波形信道中。只是与研究信道容量一样,在连续情况下需对输入信源加入某些限制条件。2.有噪信道编码与抗干扰能力有噪信道编码定理及其逆定理论证了,任何信道的信道容量是一个明确的分界点。当RC并接近C时,总能克服和消除信道中干扰和噪声引起的错误,达到可靠地传输信息。证实了任何信道中信道容量C是可达的、最大的可靠信息传输速率。有噪信道编码定理从理论上指出了任何信道,信息传输速率接近于C的最优抗干扰编码是存在的、可能的。它对实际信息传输工程有着重要的理论指导意义。6.1.7信源信道编码定理1.信源信道编码定理某离散信源的极限熵H∞,离散信道容量为C,若H∞C,则存在信源和信道编码,其PE→0。反之,H∞C,不存在信源和信道编码,使无失真地传输信源信息。注意:连续信道在某限制下(如功率、频带)信道容量是有限的,但连续信源的信息熵H是无穷大(非差熵),所以对于连续信源和信道总不可能做到无失真地传输。2.信源信道编码定理的实际工程意义定理指出,在单用户数字通信实际工程中可做到有效可靠(无失真)地传输信源信息。一般可分两步编码方法来处理。信源压缩编码只与信源有关,考虑在无失真的条件下尽可能用最少的二元数据来描述信源的信息。对信道编码来说,只需研究针对各种不同数字信道、不同干扰形式的纠错编码方法以纠正信道中带来的错误。不用考虑信息流来自何方。只要满足H∞C,数字通信系统就能做到无失真有效地传输信息。这样做,可以大大降低通信系统的复杂度。山东大学期末考试知识点复习6.1.8纠错码的分类按具有控制传输错误能力的工作方式分为反馈重传纠错(检错重发)、前向纠错(自动纠错)、混合纠错和信息反馈方式。按码的数学结构中信息元与校验元之间是否呈线性关系分为线性码和非线性码。按码的结构中对信息序列的处理方式可分为分组码和卷积码(树码)。按码是否具有循环性分为循环码和非循环码。按纠正错误的类型分为纠随机错误码、纠突发错误码、纠随机和突发错误码和纠同步错误码。按照码元的取值可分二元码和多(q)元码。按码的应用目的分为检错码、纠错码和纠删码。按构造码的数学理论分为代数码、几何码、算术码和组合码。本书主要讨论的是二元、线性、前向纠错码。6.1.9线性分组码的基本概念1.码字、信息元、校验元将信息序列,按相继k位码元分成一组,然后按一定的编码规则增加r位,组成长为n=k+r的二元序列,称为码字C=(cn-1cn-2…c1c0),又称码组、码矢。其中k位码元称为信息元,所增加的r位码元称为校验元。所有2k个码字集合称为(n,k)分组码。2k个码字称为许用码组(许用码字)。其余2n-2k个码字称为禁用码组(禁用码字)。2.汉明重量山东大学期末考试知识点复习6.1.10线性分组码1.线性分组码的特性2.一致校验矩阵(一致监督矩阵)山东大学期末考试知识点复习山东大学期末考试知识点复习山东大学期末考试知识点复习山东大学期末考试知识点复习山东大学期末考试知识点复习6.1.13卷积码卷积码不同于分组码,其每个信息组的校验元不仅与本组信息元有关,而且与其余各组信息元都有关,一般记为(n,k,L)卷积码。其中n表示码长,k表示信息位长,L表示与前面L个时间段的信息组有关联称为约束长度。卷积码的编码器是有记忆的。大都采用两类分析方法来刻画与研究卷积码,一类是用生成矩阵和多项式的解析方法,另一类是用状态流程图和网络图等图解方法。而后一种是描述卷积码的有力工具。1.(n,k,L)卷积码的解析表示t时刻输入信息组山东大学期末考试知识点复习2.卷积码的图解表示卷积码的编码器是有记忆的,故采用图解表示是描述卷积码的有力工具。其中状态图和网格图是更紧凑的一种图形表示。记忆阵列编码器中存储前L个信息组的移位寄存器阵列。状态流图山东大学期末考试知识点复习用小圆、箭头连线等来表示状态之间的转移,所得图形称为卷积码的状态流图。网格图在状态流图的基础上,加上动态转移轨迹,得到的图为卷积码的网格图。在网格图上能反映出信息序列所对应的编码路径。

1 / 14
下载文档,编辑使用

©2015-2020 m.777doc.com 三七文档.

备案号:鲁ICP备2024069028号-1 客服联系 QQ:2149211541

×
保存成功