Github涂鸦建模开源程序 ：3D-aware Conditional Image Synthesis

作者自己的介绍：

我们提出了一种三维感知的条件生成模型，用于可控的逼真图像合成。给定一个二维标签映射，例如分割或边缘映射，我们的模型可以从不同的视角合成一张照片。

现有的方法要么无法基于条件输入合成图像，要么在视点一致性上存在明显的问题。此外，许多方法缺乏对三维几何的明确用户控制。为了解决上述挑战，我们将三维表示与条件生成建模相结合，即通过基于用户输入的条件实现可控的高分辨率三维感知渲染。

我们的模型学习为每个三维点分配语义标签，以及颜色和密度，这使得我们能够同时渲染图像和像素对齐的标签映射。通过交互式编辑投影到用户指定视点的标签映射，我们的系统可以用作生成内容的三维编辑工具。最后，我们展示这样的三维表示可以从广泛可用的单眼图像和标签映射对中学习。

pix2pix3D

项目地址：
https://github.com/dunbar12138/pix2pix3D