| 14 января 2025 г. — 9:11 PT
Приложение «Фото» от Apple использует множество функций, чтобы помочь вам находить изображения в вашей библиотеке и узнавать больше о том, что на них изображено. Одна из этих функций называется «Расширенный визуальный поиск». Вот как она работает и как Apple защищает вашу конфиденциальность при ее использовании.
Visual Look Up против Расширенного визуального поиска
Важно провести одно ключевое различие: чем Расширенный визуальный поиск отличается от функции Apple Visual Look Up. Visual Look Up была представлена в составе iOS 15 и позволяет пользователям идентифицировать объекты, достопримечательности, растения и многое другое в приложении «Фото».
Например, вы можете провести пальцем вверх по изображению в приложении «Фото», чтобы узнать, какая порода собаки показана на снимке. Он может даже распознавать такие вещи, как инструкции по уходу за одеждой на ваших вещах, и что означают эти случайные символы на приборной панели вашего автомобиля.
Расширенный визуальный поиск существует отдельно от Visual Look Up. В то время как Visual Look Up помогает вам находить детали на одном фото, которое вы уже просматриваете, Расширенный визуальный поиск помогает вам находить *все* фотографии в вашей библиотеке, когда вы ищете достопримечательность или место. Эта функция работает даже в том случае, если у фотографий нет данных геолокации.
Например, вы можете поискать в своей библиотеке «Мост Золотые Ворота» и увидеть соответствующие изображения. Функция работает даже в том случае, если достопримечательность размыта и находится на заднем плане изображения.
Как Расширенный визуальный поиск защищает вашу конфиденциальность?
Ранее в этом месяце заголовки сообщали о том, что Расширенный визуальный поиск отправляет информацию о вашем местоположении в Apple, чтобы помочь найти эти достопримечательности и интересные места. В приложении «Настройки» Apple говорит: «Разрешить этому устройству частным образом сопоставлять места на ваших фотографиях с глобальным индексом, поддерживаемым Apple, чтобы вы могли искать практически любую достопримечательность или интересное место».
Это, естественно, вызвало вопросы о последствиях для конфиденциальности, особенно потому, что функция является опт-аут (отказ), а не опт-ин (согласие).
Однако Apple внедрила хорошо продуманный конвейер конфиденциальности, который, по ее словам, защищает ваши данные, когда активируется Расширенный визуальный поиск.
Этот процесс начинается с так называемого гомоморфного шифрования, которое работает следующим образом:
- Ваш iPhone шифрует запрос перед отправкой на сервер.
- Сервер обрабатывает зашифрованный запрос и генерирует ответ.
- Этот ответ отправляется обратно на ваш iPhone, где он расшифровывается.
Важно отметить, что в реализации Apple только ваши устройства имеют ключ дешифрования, а не сервер. Таким образом, сервер не может расшифровать исходный запрос. Apple использует гомоморфное шифрование для различных функций, включая Расширенный визуальный поиск.
Apple также использует так называемый поиск ближайших соседей с сохранением конфиденциальности, или PNNS, для Расширенного визуального поиска. Эта функция позволяет устройству пользователя конфиденциально запрашивать «глобальный индекс популярных достопримечательностей и интересных мест, поддерживаемый Apple, для поиска приблизительных совпадений мест, изображенных в их библиотеке фотографий».
Вот полный конвейер для запроса Расширенного визуального поиска, как Apple описывает его на своем сайте Machine Learning:
- Локальная модель машинного обучения анализирует фотографию, чтобы определить, есть ли «область интереса», или ROI, которая может содержать достопримечательность.
- Если модель обнаруживает ROI, она вычисляет «векторное представление» для этой части изображения.
- Затем это векторное представление шифруется и отправляется в базу данных сервера. Фотография и пиксели не отправляются в Apple, а скорее математическое представление этой «области интереса».
- Apple использует дифференциальную конфиденциальность в сочетании с ретранслятором OHTTP, управляемым третьей стороной, чтобы скрыть IP-адрес устройства, прежде чем запрос достигнет серверов Apple.
- Клиент также отправляет «поддельные запросы вместе с настоящими, чтобы сервер не мог определить, какие из них подлинные». Кроме того, запросы маршрутизируются через сеть анонимизации, чтобы гарантировать, что сервер не сможет связать несколько запросов с одним и тем же клиентом.
- Сервер определяет релевантную часть векторных представлений и возвращает соответствующие метаданные, такие как названия достопримечательностей, на устройство. Сервер не сохраняет данные после того, как результаты возвращены на ваш iPhone.
Это много слов и аббревиатур, но это подтверждает заявления Apple о том, что компания не может узнать ничего о содержании ваших фотографий.
Вы можете отключить Расширенный визуальный поиск, перейдя в приложение «Настройки», нажав «Приложения», затем «Фото». Прокрутите вниз до конца, и там будет переключатель для Расширенного визуального поиска. Apple заявляет, что этот переключатель следует использовать в основном в зонах с низким объемом данных.
Дополнительная информация о Расширенном визуальном поиске: