2DASL:目前最好的开源人脸3D重建与密集对齐算法


之前52CV曾经报道过PRNet:人脸3D重建与密集对齐,其结果非常惊艳,在很多人脸应用中都有用武之地。

最近同样专注于3D人脸重建与密集对齐的算法2DASL开源了,其评测精度比PRNet又更胜一筹!

该算法来自论文《Joint 3D Face Reconstruction and Dense Face Alignment from A Single Image with 2D-Assisted Self-Supervised Learning》:

作者分别来自:电子科技大学、新加坡国立大学、国防科技大学、中科大、中科院自动化所。

下图为论文中对齐的结果和3D重建结果示例:

算法原理图:

在3D人脸对齐方面该算法取得了目前的最高精度,超越PRNet。如下图:

在一些极端的例子中,该算法的对齐效果依然很好。

在人脸3D重建方面,与以前算法相比也取得了高质量的重建结果。如下图:

下面三张gif图为作者给出的动态演示,可以看出3D特征点定位、重建结果、密集对齐结果都非常稳定。

下面三幅图为该算法被用于视频换脸的效果,作者在这里没有特别处理皮肤的融合,但贴合度还是很高的。

下面两幅图为使用该算法进行表情迁移的效果:

CV君没看到计算时间的说明,大家可以下载代码实验下看看。

论文地址:

https://arxiv.org/pdf/1903.09359.pdf

代码地址:

https://github.com/XgTu/2DASL

目前该库仅放出了测试代码,作者称等论文被接收之后会放出训练代码。

感谢作者的分享~

加入专业交流群

(0)

相关推荐