[发明专利]一种多视点3D视频合成方法

摘要

发明公开了一种多视点3D视频合成方法，包括：获取参考视点视频及参考视点深度图视频，分解为参考视点图像的帧序列及参考视点深度图的帧序列；将各帧的参考视点图像映射到虚拟视点生成各帧的虚拟视点原始图像；修复各帧的参考视点图像及参考视点深度图，将各帧修复后的参考视点图像映射到虚拟视点生成各帧的虚拟视点辅助图像；修复虚拟视点原始图像的空洞生成虚拟视点最终图像；合成各帧虚拟视点最终图像生成虚拟视点视频；合成虚拟视点视频及参考视点视频生成多视点3D视频。采用本发明，可通过提取基准图像、扩展图像边界、修复突变区域的方法来修复各帧图像，能有效的解决虚拟视点原始图像中的边界空洞和内部参考视点深度图突变区域的空洞。

主权项

一种多视点3D视频合成方法，其特征在于，包括：获取参考视点视频及所述参考视点视频所对应的参考视点深度图视频，将所述参考视点视频分解为参考视点图像的帧序列，将所述参考视点深度图视频分解为参考视点深度图的帧序列，所述参考视点图像的帧序列与所述参考视点深度图的帧序列一一对应；将各帧的所述参考视点图像分别映射到虚拟视点生成各帧的虚拟视点原始图像，所述虚拟视点原始图像上形成有空洞；修复各帧的所述参考视点图像及参考视点深度图，将各帧修复后的参考视点图像分别映射到虚拟视点生成各帧的虚拟视点辅助图像，所述虚拟视点辅助图像与虚拟视点原始图像一一对应；根据各帧的所述虚拟视点辅助图像修复所述虚拟视点原始图像的空洞，生成虚拟视点最终图像；合成各帧虚拟视点最终图像生成虚拟视点视频；合成所述虚拟视点视频及参考视点视频生成多视点3D视频，所述虚拟视点视频的个数至少为一个。