Главный научный сотрудник Facebook Reality Labs Майкл Абраш рассказал о разработке технологии «сверхспособностей восприятия», которые будут реализованы в будущей умной гарнитуре компании. Особый акцент он сделал на функции улучшения слуха при помощи методов дополненной реальности. В некотором роде это аналог голограммы, информационного изображения на очках пользователя, но в виде аудиосигнала.
Главное достоинство гарнитуры Facebook – в возможности интеллектуального анализа данных с внешних микрофонов, камер и широкого спектра иных датчиков. Например, система может по внешнему виду собеседника и его мимике распознать манеру общения, узнать из LiveMaps, что дело происходит в шумном ресторане, учесть время суток, людской трафик и даже погоду, чтобы оптимально отфильтровать звук. Это дает возможность вести беседу в любых условиях, не повышая голос и не напрягая слух, но за такой простой опцией кроется огромный потенциал.
Если совместить гарнитуру с ИИ, то можно применять аудиоанализ для мгновенного перевода иностранной речи. Или для того, чтобы в шуме толпы вычленить голос плачущего ребенка, который потерялся. Можно настроить систему на поиск определенных слов и фраз, чтобы быстро отыскать на большой конференции определенного человека. Словом, «суперслух» открывает перед пользователями гарнитуры массу возможностей.