ByteDance готовит ИИ-модель виртуальных миров

Разработку пространственного ИИ лично курирует Чжан Имин

2 мин.
ByteDance готовит ИИ-модель виртуальных миров

Китайская ByteDance разрабатывает модель искусственного интеллекта для генерации пространственного видео в реальном времени. Предполагается, что новая система сможет создавать интерактивные виртуальные миры для прямых эфиров, коротких сериалов и игр. По данным Bloomberg, проект лично курирует основатель компании Чжан Имин.

Источники агентства утверждают, что запуск модели может состояться уже в октябре, однако окончательные сроки ещё не утверждены и планы могут измениться.

Ставка на пространственное видео

В основе разработки лежит Seedance — модель ByteDance для создания видео кинематографического качества. Новая система должна формировать трёхмерное окружение, в котором пользователь сможет взаимодействовать с объектами в режиме реального времени. По замыслу разработчиков, такой подход объединит ИИ-модели и облачные мощности ByteDance с её контентными сервисами и устройствами виртуальной реальности Pico.

Как сообщили собеседники Bloomberg, модель рассчитана на создание виртуальных миров, реагирующих на голос и движения владельца гарнитуры Pico. Система, по их данным, способна выдавать видео по запросу с задержкой около 0,05 секунды при частоте 20 кадров в секунду. Это позволит использовать её для пространственных интерфейсов и сред смешанной реальности.

ByteDance рассчитывает перенести наиболее ресурсоёмкую часть вычислений в облако. Такой подход может снизить требования к производительности VR-гарнитур, а значит — удешевить устройства. Конкуренция в сегменте при этом будет всё меньше зависеть от характеристик самих шлемов и всё больше — от качества ИИ-моделей, вычислительной инфраструктуры и доступа к аудитории контентных платформ.

Конкуренция с Google, Meta* и Apple

Разработка ByteDance относится к направлению так называемых моделей мира — ИИ-систем, способных моделировать физическую среду и поведение объектов в ней. Такие технологии рассматриваются как важная основа для робототехники, видеоигр и беспилотного транспорта. Над аналогичными подходами работают, в частности, исследователи Фэй-Фэй Ли и Янн Лекун.

В публикации Bloomberg новая модель сопоставляется с Genie — разработкой Google, предназначенной для создания интерактивных миров, визуализируемых в реальном времени. ByteDance намерена использовать своё преимущество в работе с видео, чтобы закрепиться в быстро растущем сегменте пространственных вычислений.

В случае успеха проект также усилит конкуренцию ByteDance с Meta* и Apple. Meta* развивает экосистему гарнитур Quest для массового рынка, а Apple продвигает Vision Pro как премиальную платформу пространственных вычислений. При этом обе компании пока не смогли превратить устройства смешанной реальности в массовый потребительский продукт.

Инвестиции в ИИ-инфраструктуру

Seedance стал одним из наиболее заметных ИИ-продуктов ByteDance, хотя на китайском рынке компания конкурирует с Alibaba Group, DeepSeek и Moonshot AI. Технология используется в ряде сервисов группы, в том числе в видеоредакторе CapCut и чат-боте Doubao, который Bloomberg называет самым популярным ИИ-ботом в Китае. Инструмент генерации видео также применяют независимые киностудии, авторы контента и начинающие ИИ-компании.

Мнение редакции

Рынок виртуальной и смешанной реальности долго пытался заинтересовать покупателей главным образом устройствами, однако решающим фактором может стать не вес гарнитуры и не разрешение дисплея, а наличие убедительного интерактивного контента. ByteDance располагает редким сочетанием преимуществ: огромной аудиторией видеосервисов, опытом в рекомендательных алгоритмах и доступом к облачным вычислениям. Но перспективная демонстрация технологии ещё не гарантирует массового спроса: компании предстоит доказать, что созданные ИИ миры будут не только технически эффектными, но и действительно полезными пользователям.

*Компания Meta, а также принадлежащие ей соцсети Facebook и Instagram, признаны экстремистскими и запрещены на территории РФ.