由加藤大晴等人公开的、可嵌入神经网络的3D网格渲染技术!「Neural 3D Mesh Renderer」
据说可以将3D多边形渲染器嵌入深度学习中,从图像生成3D网格,或者将其他图像的元素作为纹理应用等。真是充满想象空间!

概要
我们开发了可以嵌入神经网络的3D网格渲染器 Neural Renderer。其要点在于,将称为“反向传播”的处理重新定义为适合神经网络的形式。
并且,我们将这个渲染器应用到了 (a) 从单张图像重建3D网格 (b) 从图像到3D的风格迁移以及3D版 Deep Dream。
也请务必看看网站!
新论文和项目页面已经公开了!这是一个让3D多边形渲染器能够被嵌入深度学习中的研究,使用它可以从椅子的图像生成3D多边形,或者把兔子的3D模型加工得像蒙克的《呐喊》一样。 https://t.co/VLeeKLrju5
— Hiroharu Kato (@hiroharu_kato) November 22, 2017
我们正在整理并公开前些天发布的论文源代码。虽然我想可能还有很多 bug,但核心部分姑且已经到了可以查看的程度。 https://t.co/GwwWUvQxAj
— Hiroharu Kato (@hiroharu_kato) November 29, 2017
相关链接
Hiroharu Kato(@hiroharu_kato)さん | Twitter
Neural 3D Mesh Renderer – 加藤大晴的网页