
Nvidia发布GauGAN:基于深度学习的草图转图像工具
近年来,在自动驾驶汽车、人工智能和虚拟现实等概念之外,Nvidia推出了一款能将草图转换为图像的新软件工具。这款类似MS Paint的工具发布于Nvidia年度人工智能与深度学习盛会GTC 2019,其背后依托的是人工智能的重要分支——深度学习。
GauGAN命名由来与核心功能
该工具名为“GauGAN”,取自法国画家高更(Gauguin)及其算法缩写GAN的组合,旨在让草图上色变得如同给涂色书填色般简单。
该软件基于生成对抗网络(GAN)算法,兼具创造性与智能性。据Nvidia深度学习研究部门副总裁Bryan Catanzaro介绍,当用户在程序中用雪覆盖地面时,程序会自动调整天空颜色;若在含湖泊的图像中添加山脉,它也会自动在水面生成对应的倒影。
应用场景与技术原理
Catanzaro将该项目定义为激发想象力的新技术。对于希望快速获得设计原型的建筑师和设计师而言,这是一个理想工具;同时,该应用对机器人及自动驾驶汽车研究人员也具有重要价值。
在技术层面,Catanzaro将模型输入定义为分割图,操作体验类似于涂色书填色,用户无需提供已定位物体的详细信息。借助人工神经网络,系统基于庞大数据集,即可对现实物体进行纹理填充、着色及阴影处理。
模型训练数据来源
最后值得一提的是,Nvidia为训练该深度学习模型,使用了Flickr上获得授权的100万张图像。

