几何纹理重建新 SOTA！浙大提出 SIFU：单图即可重建高质量 3D 人体模型

图片地址：https://img.ithome.com/newsuploadfiles/2024/1/60869479-1f84-4a99-8894-1db8acdb6f30.gif

【新智元导读】最近来自浙江大学 ReLER 实验室的研究人员提出 SIFU 模型，一种侧视图条件隐函数模型用于单张图片 3D 人体重建。模型通过引入人体侧视图作为先验条件，并结合扩散模型进行纹理增强，在几何与纹理重建测试中均达到 SOTA，并且在真实世界中具有多种应用场景。在 AR、VR、3D 打印、场景搭建以及电影制作等多个领域中，高质量的穿着衣服的人体 3D 模型非常重要。传统的方法创建这些模型不仅需要大量时间，还需要能够捕捉多视角照片的专业设备，此外还依赖于技术熟练的专业人员。▲ SIFU 重建 3D 人体模型用于场景搭建与此相反，在日常生活中，我们最常见的是通过手机相机拍摄的或在各种网页上找到的人像照片。因此，一种能从单张图像准确重建 3D 人体模型的方法可以显著降低成本，并简化独立创作的过程。▲ 以往方法（左）与本文方法技术路线比较（右）以往的深度学习模型用于 3D 人体重建，往往需要经过三个步骤：