Учёные из Южной Кореи создали XR-платформу ComiXR, которая выводит комиксы за пределы экрана и размещает героев, реплики и визуальные эффекты прямо в окружающем пространстве. Проект Корейского передового института науки и технологий позволяет превращать обычные страницы вебтунов в интерактивные трёхмерные сцены, где сюжет реагирует на действия человека.
Группу разработчиков возглавил профессор Иэн Окли. Вместо очередного готового приложения команда решила разобраться, каким должен быть новый формат комиксов для устройств расширенной реальности XR, объединяющих виртуальные, дополненные и смешанные элементы.
Платформа ComiXR даёт пользователям возможность самостоятельно создавать пространственные версии комиксов. За основу берётся обычная печатная работа, а затем переносится в трёхмерную среду с объёмными персонажами, звуковым сопровождением, вибрацией и интерактивными эффектами.
В тестировании приняли участие 15 человек. Среди них оказались специалисты по взаимодействию человека и компьютера, профессиональные создатели вебтунов и обычные любители комиксов.
Гарнитура Meta* Quest Pro стала устройством для проверки. Она позволила протестировать трёхмерную графику, пространственный звук, отслеживание взгляда и мимики пользователя. За счёт этого участники смогли не просто смотреть на виртуальную страницу, а взаимодействовать с элементами сюжета внутри реального помещения.
Во время эксперимента пользователи сами размещали персонажей, текстовые облака, звуковые эффекты и другие детали сюжета в комнате. Вместо привычной последовательности страниц перед ними появлялась объёмная сцена, где каждый элемент можно было расположить так, чтобы чтение оставалось удобным.
Простое превращение плоского комикса в трёхмерную копию не даёт большого эффекта. Гораздо интереснее оказались варианты, где авторы использовали пространство вокруг читателя. Герои могли находиться на разном расстоянии от зрителя, элементы текста размещались выше или ниже, а сюжет получал ощущение глубины.
Одной из самых любопытных возможностей стало управление раскрытием сюжета через взгляд. Следующая реплика появлялась только после того, как читатель смотрел на нужного персонажа.
Создатели ComiXR также показали функции, которых нельзя добиться в классических комиксах. Например, выражение лица пользователя могло запускать определённые действия внутри сюжета, а вибрация гарнитуры передавала физические ощущения, связанные с происходящим.
Читатель мог почувствовать условный удар, изменение ритма сердца героя или другие моменты, которые раньше передавались только рисунками, текстом и звуковыми эффектами.
По итогам экспериментов команда выделила четыре направления, по которым могут развиваться XR-комиксы. Первый вариант превращает помещение в своеобразную выставочную площадку, где страницы окружают человека со всех сторон. Второй напоминает современные объёмные книги, где сцены раскрываются на столах, стенах и других поверхностях. Третий переносит персонажей в окружающий мир, позволяя размещать элементы повествования на улицах и открытых пространствах. Четвёртый связан с созданием более доступных форматов для людей с разными особенностями восприятия.
Исследователи при этом не считают, что новая технология должна заменить привычные вебтуны на смартфонах. По их мнению, у XR-формата будет собственная аудитория и отдельная роль. Созданные таким образом комиксы могут найти применение в музеях, образовательных проектах, интерактивных выставках и других местах, где пользователю важно не просто прочитать сюжет, а стать частью происходящего.
