Кажется, Apple всерьез взялась за наушники с камерами, и это уже не просто слухи. На этой неделе в сети появилось видео, как будут работать AirPods с камерами, но, как выяснилось, это была лишь верхушка айсберга. Энтузиасты забрались в код macOS и вытащили оттуда куда больше подробностей: разрешение снимков, индикатор съемки, распознавание людей в кадре и даже поправку на движения головы. Собрал все находки в кучу и разобрался, что из этого действительно интересно.
Камера в AirPods может располагаться на середине ножки, как на рендере, или на кончике
Что раскопали в коде macOS
По данным MacRumors, в релиз-кандидате macOS Tahoe 26.7 нашелся скрытый фреймворк AccessorySensorManager. Он отвечает за обработку данных с сенсоров наушников, когда те подключены к Маку. Из него и удалось вытащить основную порцию деталей о будущих AirPods, которых не было видно в самом демо-ролике.
Судя по всему, в каждом наушнике стоит отдельный сенсор. Работают они в паре и снимают синхронные цветные RGB-кадры c разрешением до 1 мегапикселя. У снимков совпадают идентификаторы, поэтому система видит одну и ту же сцену сразу с двух ракурсов. Два ракурса дают ощущение объема, и по паре кадров проще прикинуть, что перед вами и на каком расстоянии. Это нужно, чтобы функция Visual Intelligence точнее понимала, что происходит вокруг вас, и меньше ошибалась в подсказках. Наличие других сенсоров вроде инфракрасных камер код не исключает, но напрямую о них там ничего не сказано.
Наушники могут распознать книгу и сохранить ее на потом
Наушники с камерами — лишь часть большого плана Apple. Компания готовит замену Apple Watch и другие новинки, о которых мы уже подробно писали.
Два режима съемки и разное разрешение
Сразу расставлю точки над i. AirPods не снимают фото и не записывают видео в привычном понимании. Камеры делают внутренние кадры, которые моментально уходят на обработку в Visual Intelligence, а не оседают у вас в галерее. По сути, это не съемка ради фотографий, а способ дать наушникам зрение.
Режимов работы два. В активном, который скорее всего включается голосом через Siri, наушники снимают картинку 640×640 и возвращают обработанный кадр 1024×1024. По подсчетам исследователя, это около 0,4 мегапикселя исходных данных и чуть больше 1 мегапикселя на выходе. В пассивном режиме камера делает кадр 320×320 и отдает результат в 320×320 или 512×512. При этом физический сенсор внутри может быть и крупнее — это разрешения конкретной съемки, а не предел железа.
Пассивный режим тут самый занятный. Похоже, он отвечает за фоновое понимание обстановки. Фреймворк упоминает такие условия, как чужая речь рядом, изменения в окружающем звуке, смена позы, поворот головы и выход за пределы заданной зоны. Правда, запускает ли каждое из этих условий съемку, из кода понять нельзя.
Хотите следить за такими новостями Apple? Подписывайтесь на наши каналы в Telegram и МАКС, там мы разбираем все свежее и важное.
Индикатор съемки и распознавание людей
Наушники на голове постоянно двигаются, и для съемки это серьезная головная боль. Поэтому в коде заложена коррекция искажений объектива, взаимная калибровка двух камер и их привязка к датчику движения. Кадры со смазом или перекрытым обзором система отбраковывает сама — в работу идут только пригодные снимки.
Часть вычислений при этом происходит прямо в наушниках. В коде встречается термин peripheral inference. Проще говоря, AirPods сами определяют, есть ли в кадре человек, и не дергают лишний раз телефон или Мак. Такой подход экономит заряд и заодно снижает поток лишних данных, которые уходят наружу, а это уже вопрос приватности.
Наушники будут смотреть по сторонам и выполнять ваши запросы
Отдельно отмечу индикатор съемки. Фреймворк умеет удаленно управлять аппаратным индикатором и его яркостью. Значит, на корпусе наушника, вероятно, будет лампочка, которая покажет окружающим, что идет захват кадров. Логика ровно та же, что и с зеленой точкой на экране iPhone во время работы камеры.
Понятно, что начинка такого уровня стоит недешево, так что наушники наверняка подорожают вместе с новым iPhone. Насколько именно, мы уже прикидывали.
Не смогли разобраться в функции или остались вопросы? Пишите в наш чатик в Telegram или МАКС, там вам точно помогут.
Когда ждать AirPods с камерами
А вот тут кроется важный нюанс. В демо-видео показали не абстрактный прототип, а версию AirPods Pro 3 с камерами под кодовым именем B790. Но Марк Гурман из Bloomberg уже сообщил, что Apple отменила эту версию наушников и переключилась на новое поколение с кодовым именем B798.
По последним утечкам, ждать AirPods с камерами на ближайшей презентации не стоит
Получается, найденный фреймворк почти наверняка относится к отмененной модели. А значит, все эти находки — не гарантия финальных характеристик, а скорее наглядный пример того, как камеры в AirPods могут работать в принципе. К моменту релиза часть деталей вполне способна измениться, и это стоит держать в голове. С другой стороны, базовая логика обычно кочует из прототипа в прототип, так что общая картина едва ли перевернется с ног на голову.
По словам Гурмана, наушники с камерами ждут нас в 2027 году. Более того, они могут дебютировать вместе с юбилейным iPhone, приуроченным к 20-летию смартфона. Задел серьезный: наушники, которые видят мир вокруг и подсказывают, что в нем происходит. Если Apple доведет идею до ума, для Visual Intelligence это будет уже совсем другой уровень.
А пока новые AirPods только готовятся, за реальными скидками на технику заглядывайте в наш канал «Сундук Али-Бабы» в МАКС.