三维人脸重建算法

Question

项目:三维人脸重建

输入:二维正面人脸图像输出:三维人脸重建和表情仿真平台: Matlab或Opencv。

经过研究发现，三维形态模型(3 3DMM)算法是我项目的一个良好的起点。但是，我没有巴塞尔人脸模型(3D人脸数据库)来实现该算法。但是，我已经从en.html下载了en.html。我能用GavabDB开发3 3DMM从正面图像进行三维人脸重建吗？在阅读了dataset description文档之后，我发现Gavab不提供3D扫描的纹理数据；纹理数据是否是必需的？

输出质量是否取决于用于建模的3D数据库？

Answer 1

原始morphable模型以及来自同一位主要研究人员的Basel模型都包含纹理和几何。

从没有纹理的三维几何数据中计算形态模型的几何部分是完全可能的。这给出了一个模型，它可以捕捉形状在统计上最显著的变化。

然而，与纹理匹配模型相比，将纯几何模型匹配到二维人脸图像要困难得多。它本质上要求你..。

1. 识别(或注释) 2D人脸图像中某些地标点的位置。
2. 优化的三维姿态和形状参数，使各自的地标在三维形态模型接近您的注解地标与投影后，与未知的相机。

这是一个有趣的问题，但不是一个微不足道的问题。对于第二步，我建议从假定正交投影开始。

关于您的输出质量问题:如果您的数据库中有足够多的3D模型，则单个扫描不必具有特别高的质量。噪音不会出现在你实际使用的模型的主成分中。然而，扫描中的漏洞是个问题。

最后但并非最不重要的是，让我无耻地告诉你几年前我写的一个纸。它并不能解决你的问题，但是它包含了一个关于从照片中提取的三维morphable模型(仅几何)到二维人脸轮廓的拟合部分。