【2022新书】CV大佬Szeliski《计算机视觉：算法与应用(第二版)》新书最新版，937页pdf

2022 年 1 月 26 日 专知

计算机视觉重磅书！

Richard Szeliski博士，计算机视觉领域的大师级人物，现为Facebook研究科学家。Szeliski博士在计算机视觉研究方面有25年以上的丰富经验，先后任职干DEC和微软研究院。1996年，他在微软研究院任职期间，提出一种基于运动的全景图像拼接模型，采用L-M算法，通过求图像间的几何变换关系来进行图像匹配。此方法是图像拼接领域的经典算法，Richard Szeliski也因此成为图像拼接领域的奠基人。

http://szeliski.org/RichardSzeliski.htm

计算机视觉：算法与应用(第二版)

地址：http://szeliski.org/Book/

本书萌芽于2001年，当时，华盛顿大学的Steve Seitz邀我和他一起讲一门课，课程名称是“面向计算机图形学的计算机视觉”。那个时候，计算机图形学领域正在越来越多地使用计算机视觉技术，用它来创建基于图像的真实物体的模型，用于产生视觉效果，用于通过计算摄影学技术来合并真实影像。我们决定聚焦于计算机视觉在若干有趣问题中的应用，例如使用个人照片的图像拼接和基于照片的3D建模等，这一想法引起了学生们的共鸣。

　　从那时起，华盛顿大学和斯坦福大学就一直使用类似的课程大纲和项目导向的课程结构来进行常规计算机视觉课程的教学（在斯坦福大学，在2003年这门课程由我和David Fleet共同讲授）。类似的课程大纲也被其他很多大学所采用，并被纳入计算摄影学相关的更专业的课程。（有关如何在课程中使用本书的建议，请参见1.4节的表1.1。）

　　本书还反映了我在企业研究实验室（DEC剑桥研究实验室和微软研究院）这二十年的计算机视觉研究经历。在从事研究的过程中，我主要关注在真实世界中具有实际应用的问题和在实践中行之有效的方法（算法）。因此，本书更强调在真实世界条件下有效的基本方法，而较少关注内在完美但难以实际应用的神秘的数学内容。

　　本书适用于计算机科学和电子工程专业高年级本科的计算机视觉课程。学生最好已经修过图像处理或计算机图形学课程，这样一来，便可以少花一些时间来学习一般性的数学背景知识，多花一些时间来学习计算机视觉技术。本书也适用于研究生的计算机视觉课程（通过专研更富有挑战性的应用和算法领域），作为基本技术和近期研究文献的参考用书。为此，我尽量尝试引用每个子领域中最新的研究进展，即便其技术细节过于复杂而无法在本书中涉及。

　　在课程教学过程中，我们发现，要使学生从容应对真实图像及其带来的挑战，让他们尝试实现一些小的课程设计（通常一个建立在另一个基础之上），是很有帮助的。随后，要求学生分成组选择各自的主题，完成最终的课程设计。（有时，这些课程设计甚至能转换为会议论文！）本书各章最后的习题包含有关小型中期课程设计题目的很多建议，也包含一些更开放的问题，这些问题的解决仍然是活跃的研究课题。只要有可能，我都会鼓励学生用他们自己的个人照片来测试他们的算法，因为这可以更好地激发他们的兴趣，往往会产生富有创造性的衍生问题，使他们更熟悉真实影像的多样性和复杂性。

　　在阐述和解决计算机视觉问题的过程中，我常常发现从三个高层途径获取灵感是有帮助的。

科学层面：建立图像形成过程的详细模型，为了恢复感兴趣量而构建其逆过程的数学方法（必要时，做简化假设使其在数学上更容易处理）。
统计层面：使用概率模型来量化产生输入图像的未知量先验似然率和噪声测量过程，然后推断所期望量的最可能的估计并分析其结果的不确定程度。使用的推断算法往往与用于逆转（科学的）图像形成过程的优化方法密切相关。
工程层面：开发出易于描述和实现且己知在实践中行之有效的方法。测试这些方法，以便于了解其不足和失效模态，及其期望的计算代价（运行时的性能）。

　　以上这三个途径相互依存，并且贯穿本书始终。

第二版特别注释

过去的十年见证了计算机视觉算法在性能和适用性上的一次真正的爆炸，其中大部分是由机器学习算法运用于大量视觉训练数据而产生的。

深度神经网络现在在许多视觉算法中扮演着重要的角色，这本书的新版本在早期就将其作为基础技术介绍，并在后续章节中广泛使用。

第二版中最显著的变化包括:

机器学习、深度学习和深度神经网络在第5章中介绍，因为它们在视觉算法中扮演的角色与在前两章中介绍的图像处理、图形/概率模型和能量最小化等更经典的技术一样重要。
由于端到端深度学习系统不再需要开发构建模块，如特征检测、匹配和分割，因此识别章节已经在书的早些时候移到了第6章。许多选修视觉课程的学生主要对视觉识别感兴趣，因此在课程的早期呈现这些资料，可以使学生更容易以这些主题为期末专题的基础。

目录内容：