Раскрыт механизм работы интеллектуальных наушников Apple AirPods с камерами

[душман]

С выпуском тестовой версии macOS компания Apple случайно раскрыла видео с демонстрацией грядущих полностью беспроводных наушников со встроенными камерами. Код в ранней сборке macOS Tahoe 26.7 помог раскрыть некоторую дополнительную информацию об устройстве, сообщает Engadget.

Каждый наушник оснащается собственной камерой, а полученные изображения синхронизируются приложением с искусственным интеллектом Visual Intelligence и обрабатываются как единое целое. Камеры делают цветные снимки с разрешением до 1 мегапикселя. AirPods за счёт акселерометров учитывают движения головы; есть и программный алгоритм, отсеивающий снимки, качество которых пострадало из-за резких движений или перекрытого обзора. 

Часть задач по обработке данных осуществляется прямо в самих наушниках — на это указывает упоминание «периферийного вывода» (peripheral inference). Apple AirPods с камерами не снимают видео, а поддерживают лишь периодическую фотосъёмку, но этого достаточно для работы системы Visual Intelligence. Предусмотрены активный и пассивный режимы работы — в активном снимки получаются более качественными. 

Каждый наушник комплектуется индикатором съёмки, что важно для защиты конфиденциальности людей вокруг. Но в отличие от умных очков Meta камеры на AirPods предназначаются для съёмки не в личных целях, а только для нужд Apple Visual Intelligence. Новая функция входит в состав обновления Siri AI — мультимодальный помощник с ИИ может анализировать поступающие с наушников изображения и выполнять с ними некоторые действия.

Единственный известный сценарий применения Apple AirPods с камерами показан на демонстрационном видео — мужчина берёт в руки книгу и просит Siri запомнить её название. Сроки выхода устройства остаются неизвестными: по сведениям аналитика Bloomberg Марка Гурмана, это случится только в 2027 году.