Китайская ByteDance разрабатывает модель искусственного интеллекта для генерации пространственного видео в реальном времени. Предполагается, что новая система сможет создавать интерактивные виртуальные миры для прямых эфиров, коротких сериалов и игр. По данным Bloomberg, проект лично курирует основатель компании Чжан Имин.
Источники агентства утверждают, что запуск модели может состояться уже в октябре, однако окончательные сроки ещё не утверждены и планы могут измениться.
Ставка на пространственное видео
В основе разработки лежит Seedance — модель ByteDance для создания видео кинематографического качества. Новая система должна формировать трёхмерное окружение, в котором пользователь сможет взаимодействовать с объектами в режиме реального времени. По замыслу разработчиков, такой подход объединит ИИ-модели и облачные мощности ByteDance с её контентными сервисами и устройствами виртуальной реальности Pico.
Как сообщили собеседники Bloomberg, модель рассчитана на создание виртуальных миров, реагирующих на голос и движения владельца гарнитуры Pico. Система, по их данным, способна выдавать видео по запросу с задержкой около 0,05 секунды при частоте 20 кадров в секунду. Это позволит использовать её для пространственных интерфейсов и сред смешанной реальности.
ByteDance рассчитывает перенести наиболее ресурсоёмкую часть вычислений в облако. Такой подход может снизить требования к производительности VR-гарнитур, а значит — удешевить устройства. Конкуренция в сегменте при этом будет всё меньше зависеть от характеристик самих шлемов и всё больше — от качества ИИ-моделей, вычислительной инфраструктуры и доступа к аудитории контентных платформ.
Конкуренция с Google, Meta* и Apple
Разработка ByteDance относится к направлению так называемых моделей мира — ИИ-систем, способных моделировать физическую среду и поведение объектов в ней. Такие технологии рассматриваются как важная основа для робототехники, видеоигр и беспилотного транспорта. Над аналогичными подходами работают, в частности, исследователи Фэй-Фэй Ли и Янн Лекун.
В публикации Bloomberg новая модель сопоставляется с Genie — разработкой Google, предназначенной для создания интерактивных миров, визуализируемых в реальном времени. ByteDance намерена использовать своё преимущество в работе с видео, чтобы закрепиться в быстро растущем сегменте пространственных вычислений.
В случае успеха проект также усилит конкуренцию ByteDance с Meta* и Apple. Meta* развивает экосистему гарнитур Quest для массового рынка, а Apple продвигает Vision Pro как премиальную платформу пространственных вычислений. При этом обе компании пока не смогли превратить устройства смешанной реальности в массовый потребительский продукт.
Инвестиции в ИИ-инфраструктуру
Seedance стал одним из наиболее заметных ИИ-продуктов ByteDance, хотя на китайском рынке компания конкурирует с Alibaba Group, DeepSeek и Moonshot AI. Технология используется в ряде сервисов группы, в том числе в видеоредакторе CapCut и чат-боте Doubao, который Bloomberg называет самым популярным ИИ-ботом в Китае. Инструмент генерации видео также применяют независимые киностудии, авторы контента и начинающие ИИ-компании.
Мнение редакции
Рынок виртуальной и смешанной реальности долго пытался заинтересовать покупателей главным образом устройствами, однако решающим фактором может стать не вес гарнитуры и не разрешение дисплея, а наличие убедительного интерактивного контента. ByteDance располагает редким сочетанием преимуществ: огромной аудиторией видеосервисов, опытом в рекомендательных алгоритмах и доступом к облачным вычислениям. Но перспективная демонстрация технологии ещё не гарантирует массового спроса: компании предстоит доказать, что созданные ИИ миры будут не только технически эффектными, но и действительно полезными пользователям.