3D图像生成和编辑研究成果大放送!朱俊彦团队放出两篇论文实现代码 | 资源

2018 年 12 月 19 日 量子位
乾明 发自 凹非寺 
量子位 报道 | 公众号 QbitAI

朱俊彦团队,一口气放出两篇论文的实现代码!

这两篇论文,都与3D图像有关,都被NeurIPS 2018大会收录了。朱俊彦在Twitter上说,是他们团队整合3D图像和深度生成模型工作的一部分。

经过多年深耕,朱俊彦团队所在的MIT计算机科学与AI实验室,已经成了3D图像领域的研究高地。

如果你对这一领域感兴趣,走过路过,千万不要错过。

论文1:用GAN生成逼真的3D图像

这篇论文,题目为《Visual Object Networks: Image Generation with Disentangled 3D Representation》。

提出了一种用GAN生成3D图像的方法,不仅生成的图像效果逼真,还能在3个独立维度上拆分3D物体的元素,改变图像中物体的视角、形状、材质等参数,就能获得你想要的图形。

GitHub上放出的资源非常全面,不仅包含了预训练模型,还给出了训练数据集和详细的实现步骤。

配置环境:基于PyTorch 0.4.1,不支持0.4.0。目前只在Ubuntu 16.04和python 3.6环境中进行了测试,还没有在Nvidia RTX GPU系列产品上进行测试。

传送门

代码地址:

https://github.com/junyanz/VON

论文:

https://arxiv.org/pdf/1812.02725.pdf

论文2:功能强大的3D图像编辑工具

这篇论文,题目为《3D-Aware Scene Manipulation via Inverse Graphics》。

介绍了一种编辑3D图像的技术:3D场景去渲染网络(3D scene de-rendering networks,3D-SDN) ,能够在保持形状和纹理一致的情况下,自由旋转和移动目标对象,也能够在不影响其形状的情况下,改变目标对象的外观。

GitHub上给出的代码资源,同样很丰富,预训练权重、数据集样样俱全,每一步骤要使用的代码也都给了出来。

配置环境上,要比前一篇论文更加完善。框架同样是PyTorch,不过后缀只写了0.4。Python 3.6+;Linux系统;NVIDIA GPU (内存>8GB)+CUDA 9.0。

传送门

代码地址:

https://github.com/ysymyth/3D-SDN

论文地址:

https://arxiv.org/pdf/1808.09351.pdf

作者系网易新闻·网易号“各有态度”签约作者



活动报名

加入社群

量子位AI社群开始招募啦,欢迎对AI感兴趣的同学,在量子位公众号(QbitAI)对话界面回复关键字“交流群”,获取入群方式;


此外,量子位专业细分群(自动驾驶、CV、NLP、机器学习等)正在招募,面向正在从事相关领域的工程师及研究人员。


进专业群请在量子位公众号(QbitAI)对话界面回复关键字“专业群”,获取入群方式。(专业群审核较严,敬请谅解)

诚挚招聘

量子位正在招募编辑/记者,工作地点在北京中关村。期待有才气、有热情的同学加入我们!相关细节,请在量子位公众号(QbitAI)对话界面,回复“招聘”两个字。

量子位 QbitAI · 头条号签约作者

վ'ᴗ' ի 追踪AI技术和产品新动态


登录查看更多
0

相关内容

朱俊彦博士是卡内基梅隆大学计算机科学学院机器人研究所的助理教授。在计算机科学系和机器学习系担任附属教员。研究计算机视觉、计算机图形学、机器学习和计算摄影。朱俊彦博士是计算机图形学领域现代机器学习应用的开拓者。其论文可以说是第一篇用深度神经网络系统地解决自然图像合成问题的论文。因此,他的研究对这个领域产生了重大影响。他的一些科研成果,尤其是 CycleGAN,不仅为计算机图形学等领域的研究人员所用,也成为视觉艺术家广泛使用的工具。
CVPR 2020 最佳论文与最佳学生论文!
专知会员服务
35+阅读 · 2020年6月17日
专知会员服务
109+阅读 · 2020年3月12日
近期必读的7篇 CVPR 2019【视觉问答】相关论文和代码
专知会员服务
35+阅读 · 2020年1月10日
必读的10篇 CVPR 2019【生成对抗网络】相关论文和代码
专知会员服务
32+阅读 · 2020年1月10日
【GitHub实战】Pytorch实现的小样本逼真的视频到视频转换
专知会员服务
35+阅读 · 2019年12月15日
CVPR 2019 | 34篇 CVPR 2019 论文实现代码
AI科技评论
21+阅读 · 2019年6月23日
CVPR 2019 | 重磅!34篇 CVPR2019 论文实现代码
AI研习社
11+阅读 · 2019年6月21日
重磅资料! | 新鲜出炉 700 + ICML 2019 论文集合!
AI研习社
24+阅读 · 2019年6月14日
pix2pix 3D版:几笔线条生成超炫猫咪霹雳舞!
新智元
4+阅读 · 2018年9月19日
资源丨用PyTorch实现Mask R-CNN
量子位
6+阅读 · 2018年7月23日
【学界】 李飞飞学生最新论文:利用场景图生成图像
GAN生成式对抗网络
15+阅读 · 2018年4月9日
Deformable Style Transfer
Arxiv
14+阅读 · 2020年3月24日
Mesh R-CNN
Arxiv
4+阅读 · 2019年6月6日
Arxiv
7+阅读 · 2018年11月27日
Arxiv
4+阅读 · 2018年9月25日
Arxiv
9+阅读 · 2018年5月7日
VIP会员
相关资讯
CVPR 2019 | 34篇 CVPR 2019 论文实现代码
AI科技评论
21+阅读 · 2019年6月23日
CVPR 2019 | 重磅!34篇 CVPR2019 论文实现代码
AI研习社
11+阅读 · 2019年6月21日
重磅资料! | 新鲜出炉 700 + ICML 2019 论文集合!
AI研习社
24+阅读 · 2019年6月14日
pix2pix 3D版:几笔线条生成超炫猫咪霹雳舞!
新智元
4+阅读 · 2018年9月19日
资源丨用PyTorch实现Mask R-CNN
量子位
6+阅读 · 2018年7月23日
【学界】 李飞飞学生最新论文:利用场景图生成图像
GAN生成式对抗网络
15+阅读 · 2018年4月9日
相关论文
Deformable Style Transfer
Arxiv
14+阅读 · 2020年3月24日
Mesh R-CNN
Arxiv
4+阅读 · 2019年6月6日
Arxiv
7+阅读 · 2018年11月27日
Arxiv
4+阅读 · 2018年9月25日
Arxiv
9+阅读 · 2018年5月7日
Top
微信扫码咨询专知VIP会员