[开源] 单张图像 3D 人体重构

[layumi]

3D Magic Mirror: Clothing Reconstruction from a Single Image via a Causal Perspective

<center></center>

[Project] [Code] [Paper]

3D Magic Mirror: Clothing Reconstruction from a Single Image via a Causal Perspective, arXiv preprint arXiv:2204.13096, 2022.
Zhedong Zheng, Jiayin Zhu, Wei Ji, Yi Yang, Tat-Seng Chua

基于的想法是，人看到一张 2D 图像 会能理解 3D 的信息，那么网络通过训练（“看很多不同视角的 2D 人图像”）应该也能行。

https://github.com/layumi/3D-Magic-Mirror

要点到 github 才能看到 gif 。 小弟做的还是比较初步。

这个网络的好处是 简单，能处理人 头发 手提包 和 裙子 的重构问题，

缺点也是 简单，由于是纯自监督，没有用人体模型（ SMPL ）方法，所以细节恢复得不好。受限于分辨率，人脸比较模糊。

感谢🙏～～欢迎点个 star ～～感谢🙏

[zhangsimon]

图挂了

[layumi]

https://imgur.com/ibQU3Dk.gif

https://imgur.com/uJOJPE2.gif

https://imgur.com/s3GOPGG.gif

[7gugu]

好厉害的样子👍

[cxumol]

和这个比呢? https://github.com/facebookresearch/pifuhd

[suyeH]

yangyi 大佬，不过你这代码结构属实离谱，这么多 py 文件放根目录

[layumi]

@cxumol 哦哦 您好 ，pifuhd 在其他数据集上，效果还挺差的。迁移能力比较差一些 。 我当时在这篇论文 的 Fig9 里复现过。

[layumi]

pifuhd 对于低分辩率的 情况比较差。 很容易出现 孤立的 一块一块的 人残缺不全的结果。

[layumi]

@suyeH 哈哈，是。我想先 open 出来，然后再慢慢整理一下。按照 readme 来运行的话，其实也就几个关键 py 。

[layumi]

@cxumol 哦哦 这篇的图 9 哈 https://www.zdzheng.xyz/files/TNNLS_3D_PersonReID.pdf