前言
鉴于机器学习产生自计算机科学,图像识别却起源于工程学。然而,这些活动能被看做同一个领域的两个方面,并且他们同时在这过去的十年间经历了本质上的发展。特别是,当图像模型已经作为一个用来描述和应用概率模型的框架出现时,贝叶斯定理(Bayesian methods)就已经从一个专家级别的知识范畴发展成为主流。通过一系列近似算法推论,例如变分贝叶斯和期望传播(variational Bayes and expectation propagation),贝叶斯定理的实际适用范围也已经大幅度的提高。与此同时,基于核心程序的新模型在算法和应用方面都已经有了重要的影响。
这本新书对图像识别和机器学习提供一个综合性介绍,同时也反映了当下的发展状况。它是主要针对优秀的研究生或者第一年的博士生,还有相关研究人员和从业者,同时假定大家对图像识别和机器学习概念知识没有任何学习经历,以此为基础来设计的。当然,多元微积分和基础的线性代数是需要的,并且一定程度精通概率论将会是有帮助的,虽然没有强制性要求,因为本书自身包含了对于基础概率理论的介绍。
因为这本书涉及范围广,所以提供一个完整的推导过程是不可能的,并且不打算特别的介绍理念的精准的历史归属。相反,我们的目标是给予参考,而这些参考能提供最大可能的细节,并且在一些情况下希望对这个非常广泛的课题文献提供一个入口点。为了这个理由,参考文献大部分是现今的教科书和评论文章而不是原始的资源。
本书引用大量额外资料,包括课程幻灯片和完全用在课本上的图标。并且鼓励读者去本书网站获得最新的信息:http://research.microsoft.com/∼cmbishop/PRML
习题
出现在每节结尾的习题是这本书的一个重要组成部分。每道习题都是精心挑选用来加强在文中解释的概念,或者以有意义的方式发展和推广它们,并且每道题根据难度分成了一星到三星,一星代表着简单的习题,只需要几分钟就可以完成;三星代表着显著更难的习题。
对于哪些习题范围给予答案才能广泛的使大家受益,这已经很难知道了。自主学习的人将会发现现成的答案非常有益,同时许多课程教师请求只通过发布者给出的答案才更好,因为这样这些练习就可以运用在课堂上。为了努力达到这个相互矛盾的要求,那些用来帮助详述文中关键点或者补充重要细节的练习题将会有现成的答案,这些答案以一个PDF文件发布在本书的网站上。对于剩下的习题答案教师可以通过和发布者联系获得(联系方式发布在本书网站上)。强烈鼓励读者在没有受到帮助的情况下解决这些习题,只有在必须的情况下才去看答案。
虽然这本书关注于概念和原则,但是在理念上学生在上课时应该有机会用恰当的数集去实验一些关键的算法。一个姐妹篇(Bishop and Nabney,2008)将会解决图像识别和机器学习的实践方面,并且将用Matlab软件实践大部分的在书中讨论的算法。
感谢
首先我将要真诚的感谢Markus Svens´ en,他在图表和本书的排版上提供了巨大的帮助。他的协助是无价的。
我对微软研究院(Microsoft Research)非常感谢,因为其提供我一个高度促进的研究环境和给予我自由来写这本书(本书的观点和见解仅表个人所观点,与微软和其各附属机构无关)。
Springer对于这本书的准备的最后环节提供了极大的支持,并且我将感谢委任编辑John Kimmel的支持和专业性。同时对于Joseph Piliero的封面设计和文章格式,MaryAnn Brickner的许多生产环节的帮助表示感谢。这个封面设计的灵感来自于和Antonio Criminisi讨论。
我也希望感谢牛津大学出版(Oxford University Press)社对于一本前面出版的书Neural Networks for Pattern Recognition(Bishop,1995a)的引用的允许。Mark 1感知器和Frank Rosenblatt图片的复制得到了Arvin Calspan Advanced Technology Center的允许。我也要感谢Asela Gunawardana在图13.1为我画的光谱图,同时感谢Bernhard Sch¨ olkopf允许我运用他的核心代码PCA来画图12.17。
许多人在校对草稿资料和提供意见和建议方面提供了帮助,其中有Shivani Agarwal, C´ edric Archambeau, Arik Azran,Andrew Blake, Hakan Cevikalp, Michael Fourman, Brendan Frey, Zoubin Ghahramani, Thore Graepel, Katherine Heller, Ralf Herbrich, Geoffrey Hinton, Adam Johansen, Matthew Johnson, Michael Jordan, Eva Kalyvianaki, Anitha Kannan, Julia Lasserre, David Liu, Tom Minka, Ian Nabney, Tonatiuh Pena, Yuan Qi, Sam Roweis,Balaji Sanjiya, Toby Sharp, Ana Costa e Silva, David Spiegelhalter, Jay Stokes, Tara Symeonides, Martin Szummer, Marshall Tappen, Ilkay Ulusoy, Chris Williams, JohnWinn, and Andrew Zisserman。
最后,感谢我的妻子Jenna,是她极力的支持我度过了写这本书的这些年。
Chris Bishop
Cambridge
February 2006
ps:小弟第一次翻译,又是非专业英语,各种错误和错解望各位大侠指正和指导,这是这本书的preface。谢谢您花时间观看和支持。谁有比较正版的pdf可以传我一份最好,感激不尽。