随着网络传输技术以及移动设备的发展与进步，以基于深度图像的绘制技术为核心的3DTV、立体视频、自由视点视频、三维场景远程绘制等图形图像系统逐渐得到广泛应用。这类系统的特点是服务器端仅传输稀疏的参考视点深度图像，客户端可以合成任意视点下的图像，其呈现给用户的结果称为虚拟视点图像。与传统图像失真不同，虚拟视点图像的失真具有非结构性、局部性的特点，因此，需要给出合理的、符合人的主观认知的质量度量指标，并以此来优化参考视点获取、深度图像编码与传输、虚拟视点合成等环境，从而提升系统的服务质量与用户体验质量。本书以虚拟视点图像质量度量方法研究为切入点，介绍了作者在虚拟视点图像无参考质量度量、基于虚拟视点图像质量度量的应用等方面的研究成果，并对每一研究内容，尽量给出相关重要、里程碑式的方法，以揭示技术演化的脉络，便于读者在了解当前研究进展的同时把握未来的发展趋势。
本书是以虚拟视点图像质量度量方法研究为切入点，系统介绍虚拟视点质量评价与合成的算法和技术的书籍。
北航虚拟现实技术与系统国家重点实验室团队近五年来的最新研究进展，研究内容本身运用了凸优化、数值求解、深度学习、人类视觉系统等交叉学科前沿技术。
本书可以为相关领域的研究及应用提供重要参考，既可以作为高等院校计算机相关专业教材，也可作为机器视觉、虚拟现实相关领域从业人员的参考用书。
博士，北京航空航天大学虚拟现实技术与系统国家重点实验室毕业，师从赵沁平院士。现任北京工商大学计算机学院副教授，从事虚拟视点质量评价及合成方向的研究。曾参与国家863课题“面向移动终端的轻量级实时逼真三维图形绘制引擎”，在自由视点视频、多视点视频及交互式远程绘制方向积累了丰富的研究成果和工程经验。
目录
第1章 绪论1
1.1 虚拟视点图像的产生及应用1
1.1.1 基于深度图像的绘制技术1
1.1.2 虚拟视点图像的应用4
1.2 虚拟视点图像的失真特点6
1.3 虚拟视点图像质量度量的意义10
1.4 本书组织结构11
参考文献12
第2章 虚拟视点图像质量度量的理论研究现状15
2.1 图像质量度量方法概述15
2.2 图像质量主观度量18
2.2.1 图像质量主观评测方法18
2.2.2 图像质量主观评分数据集20
2.3 图像质量客观度量23
2.3.1 全参考图像质量度量23
2.3.2 部分参考图像质量度量28
2.3.3 无参考图像质量度量30
2.4 虚拟视点图像质量度量37
2.4.1 传统图像质量度量方法的迁移37
2.4.2 基于深度的图像质量度量38
参考文献39
第3章 无参考虚拟视点图像/视频质量度量方法46
3.1 基于视觉权重图的无参考图像质量度量方法46
3.1.1 概述46
3.1.2 视觉权重图的生成方法49
3.1.3 基于视觉权重图的无参考图像质量度量方法的整体流程58
3.1.4 实验结果与分析65
3.2 基于局部显著度的无参考虚拟视点图像质量度量方法71
3.2.1 概述71
3.2.2 虚拟视点图像局部显著度74
3.2.3 基于CNN的无参考虚拟视点图像质量度量79
3.2.4 虚拟视点图像主观数据集的构建82
3.2.5 实验结果与分析86
3.3 基于多模态特征聚合的无参考虚拟视点视频质量度量方法96
3.3.1 概述96
3.3.2 虚拟视点视频失真分析及特征表示97
3.3.3 基于注意力的多模态特征聚合107
3.3.4 虚拟视点视频主观数据集的构建109
3.3.5 实验结果与分析111
参考文献119
第4章 虚拟视点图像质量度量的应用123
4.1 基于虚拟视点图像质量度量的参考视点深度图像传输方法123
4.1.1 概述124
4.1.2 基于JND的虚拟视点图像质量度量126
4.1.3 基于视觉感知的参考视点深度图像传输129
4.1.4 实验结果与分析138
4.2 基于视觉感知的无监督虚拟视点合成方法150
4.2.1 概述150
4.2.2 无监督的虚拟视点合成框架152
4.2.3 基于视觉感知的损失函数160
4.2.4 实验结果与分析163
参考文献175
第5章 总结与展望179
5.1 总结179
5.1.1 虚拟视点图像质量度量总结179
5.1.2 虚拟视点图像质量度量的应用总结180
5.2 展望182
书单推荐
