Nvidia神经网络将简单的草图变成美丽的风景


吸烟者的瀑布和健康人的瀑布

我们都知道如何画猫头鹰。 首先,您需要绘制一个椭圆形,然后再绘制一个圆形,然后您会得到一头漂亮的猫头鹰。 当然,这是个玩笑,而且它已经很老了,但Nvidia工程师试图将幻想变为现实。

名为GauGAN 的新开发项目可以通过非常简单的草图(非常简单的草图-圆,线和所有草图)创建别致的景观。 当然,这种发展是基于现代技术的,即生成对抗神经网络。

GauGAN允许您创建丰富多彩的虚拟世界-不仅用于娱乐,而且还用于工作。 因此,建筑师,景观设计师,游戏开发人员-他们所有人都可以学到一些有用的知识。 人工智能立即“理解”一个人想要什么,并通过大量细节对原始想法进行补充。

“在GauGAN的帮助下,在设计开发方面进行头脑风暴变得更加容易,因为智能画笔可以通过添加高质量图像来补充初始草图,” GauGAN的一位开发人员说。

使用此工具的用户可以更改初始构想,修改景观或其他图像,添加天空,沙滩,海洋等。 您的内心渴望和添加的一切都在几秒钟内完成。

使用数百万个图像的数据库对神经网络进行了训练。 因此,系统可以了解一个人想要什么以及如何实现他想要的东西。 而且,神经网络不会忘记最小的细节。 因此,如果您绘制池塘和池塘旁的一些树木的草图,那么在恢复景观之后,所有附近的物体都会在池塘水的镜子中反射。

可以指定系统的可见表面-可以用草,雪,水或沙子覆盖。 所有这些都可以在一秒钟内转变,这样雪就变成了沙子,艺术家将获得沙漠景观,而不是白雪皑皑的荒地。

“这就像一本图画书,上面写着树的位置,太阳在哪里,天空在哪里。 然后,在完成初始任务后,神经网络使图片变得生动,添加必要的细节和纹理,绘制反射。 一位开发人员说,所有这些都是基于真实图像。


尽管该系统缺乏对现实世界的“了解”,但该系统仍创造了令人印象深刻的景观。 这是因为这里使用了两个神经网络,一个生成器和一个鉴别器。 生成器创建图像并将其显示给鉴别器。 基于数以百万计的先前查看的图像,它可以选择最现实的选项。

这就是为什么发生器“知道”反射应该在哪里。 值得注意的是,该工具非常灵活,并具有大量设置。 因此,借助它的帮助,您可以绘画,适应特定艺术家的风格,或者只是沉迷于快速添加日出或日落。

开发人员声称,该系统不仅可以从某处获取图像,还可以将它们加在一起并得到结果。 不,将生成所有接收到的“图片”。 也就是说,神经网络“创建”为真正的艺术家(甚至更好)。

到目前为止,该程序还不是公共领域,但是很快就可以在工作中对其进行测试。 这可以在目前在加利福尼亚州举行的2019年GPU技术大会上完成。 能够参观展览的幸运者已经可以测试GauGAN。

长期以来,人们一直在教神经网络参与创作过程。 例如,去年,其中一些可以创建3D模型 。 此外,DeepMind的开发人员还对神经网络进行了培训,以从图纸,照片,草图中还原三维空间和对象。 为了重新创建一个简单的图形,神经网络需要一个图像;要创建更复杂的对象,需要“拖曳”五个图像。

至于GauGAN,此工具显然会找到有价值的商业应用程序-许多商业和科学领域都需要这种服务。

Source: https://habr.com/ru/post/zh-CN444468/


All Articles