Nvidia разработала нейросеть GauGAN, создающую рисунки из простых набросков

18.03.2019

Nvidia представила свой «Paint» на основе нейросети GauGAN. Пока вы рисуете в 2019, этот графический редактор уже в 3к19. Он не требует особых навыков рисования, достаточно лишь схематически изобразить будущий рисунок, а остальное за вас доделает программа.


На проходящей в Калифорнии конференции GTC 2019, компания показала нейросеть GauGAN, которая мгновенна способна преобразовывать «простые линии» в великолепные рисунки. Сеть названа в честь художника Поля Гогена.

GauGAN

Как сообщает TechCrunch, GauGAN представляет из себя графический редактор, использующий функцию машинного обучения. Для обучения нейрости компания использовала один миллион фотографий с популярного сервиса Flickr:

В отличие от Photoshop, нейросеть не требует навыков рисования. Генератор способен самостоятельно дорисовывать и синтезировать наброски обычных набросков:

Тренируясь на миллионах изображений, модель глубокого обучения заполняет ландшафт впечатляющими результатами: нарисуйте пруд — и близлежащие элементы, такие как деревья и камни, будут отражаться в воде. Поменяйте метку «трава» на «снег», и ландшафт изменится на зимний, а деревья лишатся листьев.

Кроме того, графический редактор способен имитировать различные стили художников, включая эффекты погоды, смены дня и ночи. Проще говоря, можно превратить рисунок в картину стиля Ван Гога.

На данном этапе GauGAN может работать лишь с природными ландшафтами, но разработчики уже планируют обучить сеть обрабатывать изображений с людьми и городами.

В компании пока не называют сроки выхода GauGAN, однако новинка может сильно помочь дизайнерам и производителям видеоигр.