Новая версия графического редактора Nvidia Canvas, создающего изображения по примитивному наброску, поддерживает высокое разрешение картинок и предлагает больше материалов.
Расширение возможностей
Одно из ключевых нововведений в приложении – добавление нейросети GauGAN2, которая позволяет генерировать реалистичные пейзажи по текстовому описанию или схематическому рисунку, на котором специальной кистью отмечены необходимые объекты: горы, вода, деревья и т.д. ИИ – одна из последних разработок Nvidia, которая была представлена в ноябре 2021 года.
Кроме того, Nvidia Canvas теперь способна создавать изображение в разрешении 1024x1024 пикселей, тогда как старая версия программы поддерживала лишь формат 256x256. Кроме того, в редактор добавлены 5 новых кистей, которые позволяют наметить области для генерации текстур соломы, цветов, ила, грязи или кустарника.
Подробности проекта
При разработке GauGAN2 Nvidia использовала 10 млн высококачественных изображений пейзажей. Также был задействован суперкомпьютер компании Selene, который находится на шестой позиции в мировом рейтинге по производительности на момент ноября 2021 года.
Кроме реалистичных картинок, нейросеть способна генерировать абстрактные миры, не похожие на земные, благодаря чему она также пригодна для создания концепт-артов. Например, алгоритм способен нарисовать песчаную пустыню с двумя солнцами, напоминающую планету Татуин из «Звездных войн».
Не без проблем
Разработка Nvidia доступна в двух вариантах – приложение Canvas для компьютеров и веб-версия редактора, которая опубликована на сайте компании. Для запуска десктопной программы необходимо наличие видеокарты с поддержкой Nvidia RTX – для обработки фотографий нейросеть использует тензорные ядра этих графических чипов.
По словам пользователей, протестировавших возможности приложения, алгоритм не всегда с первого раза генерирует изображение без артефактов, а чтобы получить рисунок, напоминающий реальную фотографию, необходимо несколько попыток.
Также нередко встречается неверное определение расстояния до объектов. К примеру, нейросеть способна разместить деревья на вершине утеса без масштабирования, не учитывая тот факт, что они расположены гораздо выше и дальше точки наблюдения. Несколько улучшить результат работы Nvidia Canvas может использование широких мазков кисти – так текстуры генерируются более реалистично.