Умные очки научились на ходу идентифицировать людей

Двое студентов Гарварда создали то, что крупные ИТ-компании отказывались реализовывать из-за огромных рисков — умные очки с технологией распознавания лиц, которые автоматически идентифицируют человека.

Но студенты и на этом не остановились — их очки также собирают информацию со всего Интернета, включая домашний адрес, номер телефона и данные о членах семьи того, кто попал в объектив встроенной в очки камеры.

Проект I–XRAY разработали студенты Гарварда — Нгуен и его коллега Кейн Ардайфио. По словам Нгуена, они использовали пару имеющихся в продаже умных очков Ray Ban от запрещенной в России Meta (экстремистская организация, деятельность запрещена на территории РФ) и позволили пользователю «переходить от лица к имени».Нгуен показал очки изданию 404 Media — он сфотографировал Ардайфио, и система автоматически отправила его фото на сайт распознавания лиц в интернете, проанализировала сайты, где его лицо было найдено. Через пару минут телефон Нгуена показал имя Ардейфио и данные о школе, в которой он учился, о программе, которой он ранее обучался и об эссе, которое он написал.

Результаты своего эксперимента студенты опубликовали в запрещенной в России соцсети X, где показали принцип использования изобретения. Они надевают очки, и технология начинает работать: лица людей, которые попадают в поле зрения, распознаются автоматически. Через несколько секунд на телефоне пользователя появляется личная информация об «объектах съемки».

Также проводился тест с «настоящим человеком в метро». Ардайфио смотрит в своём телефоне, как выглядит человек, и потом подходит к женщине и говорит, что они познакомились в фонде, данные о котором были на ходу найдены в поисковике. Студенты утверждают, что им удалось идентифицировать десятки людей без их согласия. Однако в некоторых случаях данные оказались неточными.

Студенты говорят, что I–XRAY использует Pimeyes для поиска лиц людей, причем этот сервис открыт и доступен для всех желающих. После загрузки чьего-либо фото Pimeyes предоставляет список лиц, которые, по его мнению, совпадают, и URL-адреса, с которых были взяты эти изображения. Эти URL-адреса могут включать в себя профили на сайтах работодателей или местных спортивных клубов, членом которых человек может быть. Затем I–XRAY обрабатывает эти URL-адреса и с помощью большой языковой модели выводит имя, место работы и другие личные данные человека.

«Мы показывали людям их фотографии из детского сада, и они даже не видели их раньше, — говорит Ардайфио. — Большинство людей были удивлены тем, как много данных о них есть в Интернете».

Проект оценили неоднозначно, кто-то выражал восхищение: «О, это же здорово! Мы можем использовать это для общения или для розыгрыша своих друзей», — делился впечатлениями Нгуен. Однако некоторые высказывали опасения относительно возможных последствий: «Кто-то может просто найти адрес девушки и проследить за ней до дома».

Что об этом говорят в ИТ-индустрии

Возможность с помощью очков или камеры смартфона мгновенно разоблачить человека уже не один год является красной линией в технологиях. В своей книге о развитии системы распознавания лиц репортер New York Times Кашмир Хилл подробно рассказала о том, что и Facebook (запрещенная в России экстремистская организация), и Google располагали технологией распознавания лиц в сочетании с камерой, но отказались от ее выпуска. Как упоминает Хилл, председатель совета директоров Google Эрик Шмидт более десяти лет назад заявил, что Google «создала эту технологию, а мы ее утаили».

В свою очередь компания Clearview AI разработала мощную систему распознавания лиц, используя миллиарды изображений, взятых из социальных сетей. В первую очередь Clearview продает свой продукт правоохранительным органам. Clearview также занимается разработкой умных очков, в которых будет работать технология распознавания лиц. Компания подписала контракт с ВВС США на проведение соответствующего исследования.

Хотя Нгуен и Ардайфио не обнародовали код своего проекта, они продемонстрировали в публичной обстановке, что вполне возможно использовать готовые продукты и услуги для создания любой другой пары очков, которые будут автоматически идентифицировать людей — студенты использовали именно Ray Bans от Meta (экстремистская организация, деятельность запрещена на территории РФ) просто потому, что они выглядят так же, как и любые другие очки.

Представитель Meta (экстремистская организация, деятельность запрещена на территории РФ) отказался от комментариев, но указал на условия использования приложения Facebook (запрещенная в России экстремистская организация) View для работы с очками, в которых говорится: «Вы несете ответственность за использование Facebook (запрещенная в России экстремистская организация) View в безопасной, законной и уважительной манере». Кроме того очки Ray Bans от Meta оснащены индикатором, который должен включаться, когда устройство ведет съемку, давая понять другим людям, что их могут записывать.

А компания Pimeyes сообщила 404 Media, что «представленные детали нас весьма удивили. Наша система находит сайты, публикующие похожие изображения, но не предназначена для прямой или косвенной идентификации личности. Единственная информация, которую получают наши пользователи, — это список источников, где найдены изображения с высокой степенью сходства с искомым материалом».