В будущем пользователям устройств Apple, возможно, не придётся даже произносить слово «Siri»: компания изучает возможности использования функции распознавания взгляда, чтобы устройство знало, что с ним хотят поговорить.
Владельцы нескольких устройств в экосистеме Apple знакомы с одной из малоизвестных проблем использования Siri, а именно с тем, что на одном устройстве она работает, а на другом нет. Когда в комнате находятся iPhone, iPad и HomePod mini, бывает трудно определить, какое из устройств действительно ответит на запрос, и не всегда это может быть именно то устройство, которое нужно.
Кроме того, не все чувствуют себя комфортно при использовании команды «Привет, Siri», поэтому Apple недавно объявила о сокращении команды до простого «Siri», по крайней мере, на некоторых устройствах.
Несмотря на это, случайное использование голоса, например, с телевидения и радио всё равно может привести к запросам, которых пользователи, возможно, не хотели бы.
Кроме того, существует вероятность того, что пользователям придётся взаимодействовать с устройствами, не используя свой голос. Конечно, могут возникнуть ситуации, когда команду нужно отдать на расстоянии, или когда разговаривать с устройством может быть неловко с социальной точки зрения.
В недавно выданном патенте [PDF] под названием «Управление устройством с использованием информации о взгляде» компания Apple предполагает возможность визуального управления Siri. В частности, предлагается, чтобы устройства могли определять взгляд пользователя, чтобы выяснить, хочет ли он, чтобы устройство ответило.
В документе предлагается система, использующая камеры и другие датчики, способные определить местоположение пользователя и траекторию его взгляда, чтобы выяснить, на что он смотрит. Эта информация может быть использована для автоматического перевода устройства, на которое смотрят, в режим приёма указаний, когда оно активно слушает человека, ожидая, что ему будут даны соответствующие команды.
Использование взгляда в качестве индикатора того, хочет ли пользователь сообщить цифровому помощнику команду, полезно и в других отношениях. Например, обнаруженный взгляд, направленный на устройство, может подтвердить, что пользователь намерен активно использовать устройство для выполнения команд.
Для владельцев нескольких устройств распознавание взгляда может позволить отдать команду одному устройству, а не нескольким, выделив его взглядом.
В документе упоминается, что простой взгляд на устройство не обязательно будет зарегистрирован как намерение выслушать команду, поскольку должен быть выполнен ряд «критериев активации». Это может быть просто непрерывный взгляд в течение определённого периода времени, например, секунды, чтобы исключить случайные взгляды или ложные срабатывания при повороте головы.
Угол положения головы также важен. Например, если устройство расположено на прикроватной тумбочке, а пользователь лежит в постели и спит, устройство может потенциально считать взгляд пользователя, обращенный к устройству, в зависимости от того, как он лежит, но может и не считать его таковым, если поймет, что голова пользователя находится на боку, а не вертикально.
В ответ на это устройство может предоставить пользователю ряд индикаторов того, что помощник был активирован взглядом, например, шум или световой рисунок от встроенных светодиодов или дисплея.
Учитывая возможность регистрации взгляда пользователя, система также может определить, смотрит ли пользователь на объект, с которым он хочет взаимодействовать, а не на устройство, на котором находится виртуальный помощник. Например, пользователь может смотреть на одну из нескольких ламп в комнате, и устройство может использовать контекст взгляда человека, чтобы определить, какую лампу он хочет включить, исходя из команды.
В патенте, поданном 28 августа 2019 года, в качестве изобретателей указаны Шон Б. Келли, Фелипе Баким Де Араужо Э Сильва и Карлин Й. Барк.
Компания Apple еженедельно подаёт многочисленные патентные заявки, но существование патента лишь указывает на области, представляющие интерес для её исследований и разработок, однако это не гарантирует, что патент будет использован в будущем продукте или услуге.
Возможность дистанционного управления устройством несколько раз появлялась в ранее поданных патентах. Например, патент 2015 года на «Оценку положения кисти и пальцев на основе обучения» предполагает использование оптической системы трехмерного отображения жестов рук, которая по своей концепции может быть схожа с системой Kinect компании Microsoft.
Еще одна заявка от 2018 года на «Мультимедийную вычислительную или развлекательную систему для реагирования на присутствие и активность пользователя» предлагает использовать данные трёхмерных датчиков для создания карты глубины помещения, которая может быть использована для распознавания жестов во всем помещении.
Ещё по теме:
- В Евросоюзе хотят запретить ноутбуки с несъёмными аккумуляторами
- В России наблюдается переизбыток смартфонов iPhone 14 и iPhone 13
- macOS Sonoma отказывается от поддержки устаревших плагинов для почтового приложения
