В фокусе

Новая нейросеть от Microsoft невероятно качественно оживляет фотографии

Вы только посмотрите на эти примеры!

Разработчики американской корпорации Microsoft представили новую нейросеть, предназначенную для оживления фотографий, чтобы лица людей могли двигаться и говорить. Технология получила название VASA-1. При этом уже открыт официальный сайт этой модели, где можно знакомиться с примерами готовых работ.

Разработчики рассказывают, что для нормального функционирования нейросети необходимо загрузить только одну фотографию человека и аудиодорожку с его голосом. После этого технология искусственного интеллекта постараются максимально точно передать эмоции, уловив многие тонкие нюансы. В Microsoft отмечают, что технология получилась настолько хороша, что делает готовые видеоролики чересчур реалистичными. Поэтому в кадре пользователи не заметят «типичных для роботов движений и застывшей мимики».

0:00
/0:22

При этом пользователям доступна возможность изменения настроения оживлённой фотографии. Например, человека в готовом видеоролике можно сделать более весёлым или же спокойным. Кроме того, есть настройка направления взгляда человека, который изображён на фотографии.

В процессе своей работы нейросеть VASA-1 разделяет лицо человека на фотографии на отдельные части, будто бы на мышцы, отвечающие за конкретные движения конкретных участков лица.

0:00
/0:16

На текущий момент модель имеет поддержку фотографий разрешением до 512×512 пикселей, а генерация видеороликов происходит с частотой до 45 кадров в секунду. Наилучший результат, как отмечают разработчики, можно получить на компьютерах, оснащённых видеокартой уровня NVIDIA RTX 4090.

При этом в корпорации Microsoft заявляют, что очень качественные видеоролики, которые удаётся получить с помощью нейросети VASA-1, выступают в качестве одного из основных достоинств этой модели, так и одним из её главных недостатков, потому что, как уверены аналитики американской компании, использование этой нейросети породит огромное количество фейков в интернете, что в итоге не приведёт ни к чему хорошему.

0:00
/1:13

В своём официальном заявлении по этому поводу в компании Microsoft отмечают, что на данный момент не планируется выпуск демоверсии нейросети, API, сервиса, дополнительных сведений о реализации или любой другой информации, связанной с технологией VASA-1. И это не произойдёт до тех пор, пока не будет уверенности в том, что нейросеть будет использоваться максимально ответственно и в соответствии с утверждёнными правилами и регламентами.

С остальным множеством примеров можно ознакомиться на официальном сайте Microsoft.


Ещё по теме:

Меню