Разработчики американской корпорации Microsoft представили новую нейросеть, предназначенную для оживления фотографий, чтобы лица людей могли двигаться и говорить. Технология получила название VASA-1. При этом уже открыт официальный сайт этой модели, где можно знакомиться с примерами готовых работ.
Разработчики рассказывают, что для нормального функционирования нейросети необходимо загрузить только одну фотографию человека и аудиодорожку с его голосом. После этого технология искусственного интеллекта постараются максимально точно передать эмоции, уловив многие тонкие нюансы. В Microsoft отмечают, что технология получилась настолько хороша, что делает готовые видеоролики чересчур реалистичными. Поэтому в кадре пользователи не заметят «типичных для роботов движений и застывшей мимики».
При этом пользователям доступна возможность изменения настроения оживлённой фотографии. Например, человека в готовом видеоролике можно сделать более весёлым или же спокойным. Кроме того, есть настройка направления взгляда человека, который изображён на фотографии.
В процессе своей работы нейросеть VASA-1 разделяет лицо человека на фотографии на отдельные части, будто бы на мышцы, отвечающие за конкретные движения конкретных участков лица.
На текущий момент модель имеет поддержку фотографий разрешением до 512×512 пикселей, а генерация видеороликов происходит с частотой до 45 кадров в секунду. Наилучший результат, как отмечают разработчики, можно получить на компьютерах, оснащённых видеокартой уровня NVIDIA RTX 4090.
При этом в корпорации Microsoft заявляют, что очень качественные видеоролики, которые удаётся получить с помощью нейросети VASA-1, выступают в качестве одного из основных достоинств этой модели, так и одним из её главных недостатков, потому что, как уверены аналитики американской компании, использование этой нейросети породит огромное количество фейков в интернете, что в итоге не приведёт ни к чему хорошему.
В своём официальном заявлении по этому поводу в компании Microsoft отмечают, что на данный момент не планируется выпуск демоверсии нейросети, API, сервиса, дополнительных сведений о реализации или любой другой информации, связанной с технологией VASA-1. И это не произойдёт до тех пор, пока не будет уверенности в том, что нейросеть будет использоваться максимально ответственно и в соответствии с утверждёнными правилами и регламентами.
С остальным множеством примеров можно ознакомиться на официальном сайте Microsoft.
Ещё по теме:
- Около 100 000 iPhone вместо утилизации были украдены, а затем отправлены в Китай
- Российские сервисы предупреждают пользователей о скором отключении авторизации через Apple и Google
- Solo Leveling: Arise преодолела отметку в 12 миллионов предварительных регистраций, и обзавелась датой релиза
