Патент Meta описывает камеры с распознаванием лиц и действий

Что произошло

В патентной заявке Meta описана система камер, которые передают живое или записанное видео для анализа. AI должен отмечать людей в кадре, определять их действия и объединять результаты в клипы, доступные по запросу на телефон или гарнитуру.

Согласно описанию, камеры сначала захватывают видео и передают его системе. Затем слой распознавания лиц анализирует кадры, чтобы определить не просто наличие человека, а конкретную персону. Отдельный слой распознавания действий фиксирует движения, например когда человек что-то поднимает, выходит из комнаты или когда собирается группа людей.

Как должна работать система

После анализа система собирает результаты в отдельные медиафайлы. Каждый файл может быть помечен человеком, действием или сразу двумя параметрами.

В заявке также описан ассистентский слой. Подключенное устройство сможет запрашивать видео в разговорной форме, а система будет формировать ответ из уже размеченных клипов, вместо того чтобы заставлять пользователя вручную просматривать запись. В материалах также указаны варианты обработки на сервере и на устройстве с использованием конвейера понимания естественного языка.

Контекст вокруг умных очков Meta

Камерное устройство Meta уже связано с линейкой Ray-Ban smart glasses, созданной вместе с EssilorLuxottica. Эти очки, впервые поставленные в 2023 году, записывают видео от первого лица и позволяют владельцу спрашивать AI о том, что он видит.

По данным Decrypt, владельцы недавно выпущенных очков Ray-Ban от Meta могли незаметно записывать незнакомцев в общественных местах, а подрядчики просматривали частные видеозаписи.

Почему это важно

Главный спорный пункт — способность системы идентифицировать и журналировать конкретных людей по лицу без их активного согласия. Именно такие опасения ранее поднимали сенаторы-демократы, когда обращались к Meta по поводу распознавания лиц в умных очках.

Сенаторы предупреждали, что распознавание лиц в реальном времени может подвергнуть людей риску преследования и домогательств. Если носимая камера сможет не только записывать незнакомцев, но и называть их, это усилит разрыв между позиционированием технологии Meta как «полезного ассистента» и ее фактическими возможностями.

При этом речь идет о патентной заявке, а не о готовом продукте. Ее статус — «Ready for Examination», а Patentlyze оценивает вероятность выдачи патента как среднюю. Meta и раньше подавала похожие заявки по компьютерному зрению для очков, а публикация означает только то, что идея зафиксирована, но не подтверждает создание или одобрение функции.