Apple продолжает развивать свои технологии искусственного интеллекта и представила новый инструмент, который позволяет анимировать статичные изображения с помощью текстовых описаний. Инструмент называется Keyframer и основан на больших языковых моделях (LLM), способных генерировать анимации.

Keyframer позволяет пользователям создавать анимированные иллюстрации из масштабируемой векторной графики (SVG) с помощью подсказок на естественном языке. Например, пользователь может загрузить изображение космической ракеты и запросить три дизайна, где небо меняет цвет, а звёзды мерцают. Keyframer сгенерирует анимационный код CSS, который можно доработать, редактируя его или вводя дополнительные подсказки.

Apple утверждает, что Keyframer даёт пользователям больше творческого контроля и гибкости, чем другие системы преобразования текста в изображение, такие как Dall-E и Midjourney, которые требуют полного описания дизайна в одной подсказке. Keyframer же позволяет итеративно создавать и уточнять проекты с помощью последовательных подсказок.

Apple описывает свою инновацию в новой исследовательской работе под названием Keyframer: Empowering Animation Design Using Large Language Models [PDF].

В работе также приводятся результаты интервью с профессиональными дизайнерами и инженерами-аниматорами, которые оценили скорость и качество работы Keyframer. Один из участников исследования сказал, что Keyframer сэкономил ему часы работы.

Keyframer – это не единственный прорыв Apple в области ИИ. Ранее компания представила ИИ-модель, которая может редактировать изображения на уровне пикселей с помощью мультимодальных LLM. Кроме того, Apple сообщила, что смогла развернуть LLM на iPhone и других устройствах с ограниченным объёмом памяти, используя флеш-память.

По слухам, Apple планирует внедрить функцию генеративного ИИ на iPhone и iPad к концу года, вместе с выходом iOS 18. Эта функция может улучшить работу Siri и дать пользователям возможность создавать различный контент с помощью ИИ, подобно ChatGPT. Это может стать самым большим обновлением в истории iPhone.

Ещё по теме: