贝叶斯公式应用于推广

IPINGDINGSHANUNIVERSITY毕业论文题目:贝叶斯公式若干应用院系:数学与统计学院专业年级:13级应用统计学姓名:田明太学号:131390121指导教师:杜伟娟2017年04月18日II摘要贝叶斯公式是概率论与数理统计这本书中很重要的一部分，在概率论的运算中也有着不可替代的位置。本文对贝叶斯公式进行了详细深入的探究，并且列举了一些生活中的实例来说明贝叶斯的运用以及他所适用的生活模型，为了以后我们更好深入的理解贝叶斯公式，我们必须先要了解全概率公式以及它在实际生活中的简单运用。简单的贝叶斯公式其实并不能十分满足我们生活中的需求，所以我们要把贝叶斯公式进行深入的了解，并运用实际的例子来证明贝叶斯公式推广后的公式在生产生活中所适合的模型相比以前的贝叶斯公式更加广阔。关键词贝叶斯公式；全概率公式；IIIAbstractThebayesformulaisoneimportantformulasintheoryofprobability,hasaimportantroleinthecalculationofprobabilitytheory.Carefullyanalyzedinthispaper,thebayesformula,andillustrateshisusageandtheapplicablescheme,inordertobetterunderstandthebayesformulaweneedtointroducethewholeprobabilityformula.Inordertosolvepracticalproblems,wewillbethebayesformulaforpromotion,promotionaftertheformulainpracticalapplicationisillustratedbyanexampleoftheapplicablemodelwiderthantheoriginalformula.Keywords：Thebayesformula;Fullprobabilityformula;IV前言贝叶斯公式在概率论与数理统计一书中占有很中要的位置，它集中用于计算不同事件的发生概率,它本质上是乘法公式和加法公式的总体运用。概率论与数理统计是探索随即状况统计规律的一门现代数学学科并于十几世纪初现。自出现这一门学科以来，已经开始深入到各个科学领域当中并占有着举足轻重的位置。从十七世纪到现在很多国家对此公式有了很多方面的研究。长时间以来，由于许多这方面工作人员的积极工作，使得概率论与数理统计在理论方面有了长足的进展，在实际生活中的应用也更加的宽泛，且促成了大小不一的许多分支，并在当代统计学中有着不可替代的位置。贝叶斯公式是在1763年由贝叶斯（Bayes）这位伟大的数学家发现的，它的实质是在事件A已经出现的情况下，寻求使A出现的原因的概率.这个公式在我们的生活中有很多的应用在论文中我将会一一介绍。贝叶斯公式可以帮助于人们了解一个结果即事件A出现的最大的可能性。运用贝叶斯公式我们可以更加简单明了的计算生活中遇到的一些数学问题，它在数学计算中有着非常宽泛的应用。其本质就是在将各种前提引进的情况下，首先把所给出的样本空间分割成若干份，并且可以简单明了的计算出所需结果的概率，然后加以分析并得出结果。在当今的社会中，伴随着发展的高速前行，市场需求的突飞猛进，领导者不能只着眼于以前的生产信息，而是应该把过往的生产信息和现在的一同考虑并加以分析，才能做出个比较全面的决策。而贝叶斯公式的主要用途就是用于处理先验概率与后验概率，是进行决策的重要工具。贝叶斯公式可以用来解决医学、市场预测、信号估计、等一系列不确定的问题。本文首先分析了贝叶斯公式的概念，再用贝叶斯公式来解决实际中的一些问题。概率论与医学的渗透与结合，已经成为现代医学领域的显著特征。利用数学方法并充分利用好贝叶斯公式及其推广的形式，定量的对医学问题进行相关分析，使其结论更加具有可信度，更有利于促进对病人的对症施治。利用好贝叶斯公式可以用来解决医学、经济决策、信息技术等一些列问题中，公式及其推广形式的V正确运用也有助于进一步研究多个随机实验中目标事件及其条件下诱发事件的概率，更有助于把握随机事件之间相互影响关系，为生产实践提供更有价值的决策信息。灵活使用贝叶斯公式会给我们的解题带来很大方便，而这些推广形式将进一步拓展贝叶斯公式的适用范围，成为我们解决更复杂问题的有效工具。VI第一章贝叶斯公式的简单概述1.1贝叶斯理论的发展简述大约在三百年前，人们便开始严肃的考虑若不存在确定性时应该怎么进行推理，JamesBernoulli则是第一个构造该问题的人，他当时就意识到在可应用和机会游戏的演绎逻辑与每日生活中的归纳逻辑之间的不同之处。对他来说，这个未回答的问题的关键在于前者的机理如何能帮助处理后者的推断问题。英国学者托马斯·贝叶斯(ThomasBayes，1702—1761)在生前所作的一篇论文《论有关机遇问题的求解》中为Bernoulli的问题提供了回答，在文章中他便提出了著名的贝叶斯公式和一种归纳推理的方法，但是在当时，他的理论成果并没有受到足够的重视，一直到他去世后他的遗著(Anessaytowardssolvingaprobleminthedoctrineofchances)《论有关机遇问题的求解》才被理查德·普莱斯(RichardPrice)于1763年才被整理发表，其理论价值才被世人认知。后来在他理论的基础上逐渐形成了贝叶斯学派。时至今日，贝叶斯学派已经与经典学派一起成为统计学的两大主体学派。贝叶斯学派的基本观点则是：任一未知参数都可以看作随机变量，可用一个概率分布去描述，而这个分布称则为先验分布。然而这却是经典学派和贝叶斯学派争论的焦点所在。贝叶斯学派认为，可以把任一未知参数看作随机变量，并且可以通过利用主观的判断和直觉，提供先验信息。而经典学派只承认利用样本信息，不承认利用主观的判断和直觉，即不承认利用先验信息。关于未知参数是否能被看作随机变量在经典学派和贝叶斯学派争论了很长时间，现如今经典学派已经不反对这一观点，现在争论的焦点是：如何利用不同先验信息合理的确定先验分布。总体来说，贝叶斯学派的发展经历了以下几个阶段：1736年ThomasBayes提出了著名的贝叶斯定理，1763年其遗著《论有关机遇问题的求解》被他的朋友理查德·普莱斯(RichardPrice)于1763年才被整理发表，贝叶斯理论的价值才被世人所认识，贝叶斯理论开始奠基。随后，Laplace等人作了进一步的工作，目前以他名字命名的定理的现代形式实际上是归功于Laplace。Laplace本人不仅重新发现了贝叶斯定理，而且还阐述的远比贝叶斯更加清晰明了，还用它来解决天体力学，医学统计，甚至法律等方面的问题。他VII全心全意的赞成用于推断问题的贝叶斯公式。不过遗憾的是，Laplace取得的成功和他对概率论的发展做出的巨大贡献却并不被当时有势力的欧洲数学家所认可。之后虽还有一些零星的研究，但由于理论的不太完善和在应用中出现了一些问题，贝叶斯学派的一些理论长期不被人们所接受。进入到上世纪50年代，贝叶斯理论便得到了长足的发展，60、70年代以来，其发展达到了鼎盛时期。许多专家学者投身于贝叶斯理论的研究和应用推广中来，并力图从不同的角度对贝叶斯理论进行进一步的探讨和研究。从此便形成了具有多分支的理论系统。目前被承认的现代贝叶斯统计工具应当归功于Jeffry、Wald、Savage、Raiffa&Schlaifer、Lindly及DeFinetti。他们都曾做过大量有意义的工作，为建立统一的理论体系以及方法论奠定了基础。贝叶斯理论系统中的其中一个重要分支是贝叶斯动态模型理论，它是英国统计学家Harrison教授与Steven教授在帝国化学公司（英国最大的化工产品生产企业）工作的时候，为了预测突发事件而提出发展起来的一种有名的预测方法。1976年，Harrison教授与Steven教授一起在英国皇家学会上宣读了论文《贝叶斯预测》，引起了人们的重视，从此在英美等国，这个方法的理论研究和应用迅速地开展了起来。1989年，West和Harrison合著了一本《贝叶斯预测和动态模型》，这本书全面地论述了这个方法。贝叶斯动态模型及其预测理论具有很广泛的应用性，例如在通信、控制、人工智能、经济管理、气象预报等领域。国内对贝叶斯理论的研究起步比较晚，初始发展较非常缓慢。张孝令教授曾在上世纪80年代向Harrison教授学习了此方法，回国后和刘福升教授在这个领域作了一些开拓性的研究工作，取得了丰硕的成果，对其在国内的发展产生了深远的影响。对于贝叶斯动态模型及其预测理论的研究主要是针对一个动态线性模型(简称贝叶斯DLM)研究单变量DLM、多变量DLM以及矩阵变量DLM的预测理论知识及对贝叶斯决策理论进行探讨。贝叶斯理论系统中的另一个十分重要分支是贝叶斯决策理论。统计决策理论是著名统计学家A．Wald(1902—1950)在上世纪四十年代建立起来的，他在其文章《统计决策函数》中系统、详细的阐述了统计决策理论，统计决策理论与经典统计学之间的差别主要在于是否涉及后果，经典统计学着重于推断，从不考虑用在何处或者效益如何，而统计决策理论引入了损失函数，用来VIII度量效益大小，度量统计推断结果的优劣程度。贝叶斯统计推断是统计决策万法的基础之一，首先通过采样，修改先验的概率分布，以减少事物的不确定性，并在此基础上制定统计最优决策，因此称这类决策为贝叶斯决策。贝叶斯统计理论与最优决策的结合，在商业和社会科学中得到了很大的发展，其次是在物理、化学、生物等学科领域也得到了广泛的应用，如今其概念和方法在社会许多领域得到了广泛应用，如在工程技术、管理科学、经济决策、系统运筹、医疗诊断等。贝叶斯决策理论已经如“控制论”、“信息论”一样成为了现代的信息控制和系统科学中的一个重要分支，并且在实际的有关决策中也发挥了不可替代的作用。统计学家们将统计决策理论和贝叶斯理论相结合形成了比较系统的贝叶斯决策理论。对贝叶斯决策理论研究的方面，Definetti、Raiffa、Lindly都曾作过大量有意义的工作，取得了巨大的成就，堪称现代贝叶斯决策分析之父；而在当今，Smith、Berger则是贝叶斯决策理论的领军人物，其对贝叶斯决策理论的完善与发展做出了巨大贡献。这篇论文是在导师的直接指导下，也参阅了大量的文献后，在前人研究的基础上，对贝叶斯公式作出的进一步探讨和研究。IX第二章贝叶斯公式与全概率公式的推广概述2.1贝叶斯公式的证明设12,...,nBBB为样本空间的一个分割，即12,...,nBBB之间互不相容，且1niiB，若有P(A)0，()0iPB(1,2,...,)in,则1()(/)(/),1,2,...,()(/)iiinjjjPBPABPBAinPBPAB。证明由条件概率的定义（条件概率，是指在事件B发生的条件下，求另外一事件A的概率，我们记为(/)PAB）()(/)()iiPABPBAPA对上式的分子用乘法公式、分母用全概率公式,()()(/)iiiPABPBPAB1()()(/)niijPAPBPAB1()(/)(/),1,2,...,()(/)iiinjjjPBPABPBAinPBPAB结论得证。X2.2贝叶斯公式与全概率公式之间的联系在介绍了贝叶斯公式以后我们还需要介绍一下全概率公式，因为全概率公式与贝叶斯公式是一组互逆的公式，我们先来看下全概率公式的概念。设nBBB,,21为样本空间的一个分割，即nBBB,,21之间是互不相容的，并且iniBU1，若有niBPi.,2,1.0)(，则对任一事件A有niiiBAPBPAP1)|()()(证明：因为)()(11iniiniABBAAAUU且nABABAB,,2,1互不相容，所以由可加性得：niiiniABPABPAPU11)())(()(再将niBAPB