最新“只用一张图转3D”方法火了！GitHub刚建空仓就有300+人标星

7月24日 消息:最新的一种只用一张图转3D 的方法名为 Magic123，在 GitHub 上刚建立空仓就有300多人标星。与之前的方法相比，Magic123能够生成高质量、高分辨率的3D 网格，并且还能细化几何结构和纹理。

该方法采用两阶段的方案，首先使用现有的模型进行分割和深度图提取，然后在粗阶段使用 Instant-NGP 进行快速推理和重建，最后在精细阶段使用 DMTet 方法细化和解耦3D 模型。团队还提出综合使用2D 和3D 先验信息的方法，在定量比较中取得了最好的效果。

然而，该方法有一些局限性，比如假设参考图像是正视图，对其他角度的图像效果较差。此外，使用了 SDS 损失的 Magic123倾向于生成过度饱和的纹理，尤其在高分辨率下会更加明显。

项目主页:https://guochengqian.github.io/project/magic123/

论文:https://arxiv.org/abs/2303.11328

GitHub:https://github.com/guochengqian/Magic123