В настоящее время в Калифорнии проходит конференция GTC 2019, которая была организована компанией Nvidia. Именно на ней был продемонстрирован искусственный интеллект, способный за несколько секунд обработать схематический набросок и сделать из него фотореалистичное изображение.

Nvidia продемонстрировала нейросеть, способную преобразовывать обычные скетчи в реалистичные фотографии

Данная нейросеть была названа GauGAN (в честь Поля Гогена, который предпочитал работать в таком направлении, как постимпрессионизм). Представленная нейросеть имеет в составе две сети, которые называют генератором и дискриминатором. Первая занимается созданием изображения, а вторая подсказывает, каким образом его улучшить.

Интерфейс приложения имеет всего три инструмента: кисть, карандаш и заливку. Кроме этого, в доступе имеется множество разнообразных текстур: небеса, камни, трава и т. д. Во время работы с приложением следует просто выбрать необходимую текстуру, задать требуемую форму и залить объект. В итоге нейросеть сама разместит на этом месте реалистичный объект.

Для того, чтобы натренировать искусственный интеллект, ученые воспользовались примерно миллионом фотографий. По словам вице-президента по прикладным исследованиям в области ИИ Брайана Катандзаро, разработчики полностью соблюдали авторское право во время данного процесса. Как отметили специалисты, созданная ими нейросеть может даже изменять время суток или пору года. В то же время GauGAN осознает, если объект размещен перед водной гладью, и отражает его на такой поверхности. Кстати, алгоритм является мультимодальным: даже при наличии двух абсолютно одинаковых эскизов в итоге получатся совершенно разные изображения.

В настоящее время нейросеть может работать исключительно с объектами природы, однако разработчики не исключают возможности обучить данный алгоритм отображению зданий, дорог, людей и каких-либо иных объектов реального мира. Как отмечает Катандзаро, их разработка может быть полезна ландшафтным дизайнерам, архитекторам и людям, которые связаны с разработкой виртуальных миров.

Поделиться в социальных сетях