Nvidia 在 2019 年 GTC 大会上推出了一款令人惊讶的图像生成软件,可在几秒钟内将一副草图变成美丽的山顶日落图像。该软件名为 GauGAN,内核是生成对抗网络,被称为 Nvidia 神经网络平台可实现的证明。
GauGAN 有三个工具:油漆桶、钢笔和铅笔。在屏幕的底部是一系列的对象。选择云对象,用铅笔画一条线,软件就会产生一缕逼真的云。GauGAN 能根据输入生成特有的结果。画一个圆圈,然后用油漆把它填满,软件就会生成蓬松的夏日云彩。绘制树的形状,它将生成树。画一条直线,它会产生一个裸露的树干。在顶部画一个灯泡,软件就会用叶子把它填满,形成一棵完整的树。
该软件是多模态的。如果两个用户使用相同的设置创建相同的草图,项目中内置的随机数将确保软件创建不同的结果。
目前,GauGAN 智能在张量计算平台上运行。Nvidia 在 RDX Titan GPU 平台上演示了这款软件。其应用深度学习研究副总裁布莱恩·卡坦扎罗(Bryan Catanzaro)表示,经过一些修改,GauGAN 几乎可以在任何平台上运行,包括 CPU。从在演示来看,对象之间的边界并不完美,比如两个物体接触的地方有一条细线。Nvidia 开发团队表示将会改进。
Nvidia 使用 Flickr 上的 100 万张图片来训练神经网络,其中大部分来自 Flickr 的知识共享。该公司表示,GauGAN 可以合成成千上万的物体,以及它们与现实世界中其他物体之间的关系。在 GauGAN 上,改变季节,树叶会从树枝上消失。或者如果树的前面有一个池塘,树就会在水中反射。
卡坦扎罗希望这款软件能在 Nvidia 的新人工智能平台上使用,但他表示,要实现这一目标,Nvidia 还需要做一些工作。他看到类似的工具被用于视频游戏中,以创造更身临其境的环境,但他指出,Nvidia 并没有直接为此开发软件。
人们很容易想到这种软件可能会被用于邪恶的目的。卡坦扎罗也认为这是一个重要的话题,他指出这比一个项目和一个公司更重要。他说:“我们非常关注这个问题,因为我们想让世界变得更美好。”他补充说,这是一个信任问题,而不是技术问题,作为一个社会,我们必须这样处理。
显然,围绕这一能力构建的软件将吸引从视频游戏设计师到架构师再到休闲游戏玩家的所有人。该公司目前还没有任何将其商业化发布的计划,但可能很快就会发布一项公开测试,让任何人都可以使用该软件。
【数字叙事 黎雾】
[…] 2019 年春季,Nvidia 研究人员推出了神经 GA 网络 GauGAN,它可以通过简单地将分割的颜色区域放在一起生成逼真的风景。艺术家使用不同的画笔代表特定类别的对象:地面上的一个蓝点变成了湖泊,它的上面变成了天空,几条绿线让森林得以生长,等等。该 AI 模型能做到这一点,是因为通过使用 Flickr 照片平台上数百万张风景图片进行训练后,已经对风景照片中各个图像元素之间的关系有了基本的理解。 […]