Новый инструмент «Canvas» от Nvidia позволяет автору сделать грубый набросок пейзажа, а затем заполнить его убедительно фотореалистичным содержимым.
Каждый отдельный цвет представляет собой отдельный тип объекта: горы, вода, трава и т.д. Когда цвета нанесены на холст, набросок передается в GAN (Generative Adversarial Network). GAN, по сути, передаёт контент туда и обратно между ИИ-создателем, который пытается воссоздать реалистичное изображение, и ИИ-детектором, который оценивает, насколько это изображение действительно реалистично. Они работают вместе, чтобы получился достаточно реалистичный, по их мнению, образ того, что было «нарисовано» человеком.
Это в значительной степени более удобная для пользователя версия прототипа GauGAN, показанного на CVPR в 2019 году. Она гораздо более простая в использовании, создаёт более качественные изображения и может работать на любом компьютере под управлением Windows с подходящей видеокартой от Nvidia.
Canvas не пытается сделать что-то неотличимое от реальности — как объясняет концепт-художник Джама Джурабаев в видео ниже, это скорее возможность свободно экспериментировать с изображениями.
«Я больше не боюсь чистого холста», — говорит Джурабаев. «Я не боюсь вносить большие изменения, потому что знаю, что всегда есть ИИ, который поможет мне с деталями... Я могу вложить все свои усилия в творчество, а с остальным пусть справляется Canvas».
Это очень похоже на Chimera Painter от Google, если вы помните это специфическое приложение, в котором почти идентичный процесс использовался для создания фантастических животных. Вместо снега, камня и кустов здесь были задние лапы, мех, зубы и прочее, что делало его довольно сложным в использовании.
Однако, в отличие от Chimera Creator, это приложение запускается локально, а для работы требуется мощная видеокарта Nvidia. Графические процессоры уже давно являются предпочтительным оборудованием для приложений машинного обучения, а что-то вроде GAN в реальном времени определенно требует мощной видеокарты. Приложение можно скачать бесплатно с официального сайта разработчика.
Canvas работает со всеми видеокартами линеек GeForce, Quadro и TITAN RTX. Для запуска приложения потребуется установить драйвера версии 445 или новее. Работает только на Windows 10.
Еще по теме: