Будущие iPhone могут получить возможности ИИ прямо в сенсоре камеры

Apple уже использует возможности ИИ для обработки изображений на iPhone через нейронный движок, который входит в состав чипов серии A начиная с iPhone 8 и iPhone X. Но будущие iPhone могут получить часть обработки ИИ непосредственно от самого сенсора камеры…

The Verge сообщает, что Sony — поставщик передовых датчиков изображений, используемых в текущих iPhone — работает над интеграцией возможностей ИИ непосредственно в сенсор. Компания уже анонсировала первый такой сенсор, хотя он предназначен для коммерческих, а не потребительских приложений.

Sony анонсировала первый в мире датчик изображения с интегрированными возможностями ИИ. Новый датчик IMX500 включает в себя как вычислительную мощность, так и память, что позволяет ему выполнять задачи компьютерного зрения на основе машинного обучения без дополнительного оборудования. По словам Sony, результатом станут более быстрые, дешевые и безопасные ИИ-камеры […]

Многие приложения полагаются на отправку изображений и видео в облако для анализа. Это может быть долгий и небезопасный путь, подвергающий данные риску взлома. В других случаях производителям приходится устанавливать на устройства специализированные ядра обработки для удовлетворения дополнительной вычислительной нагрузки, как, например, в новых высококлассных телефонах от Apple, Google и Huawei.

Но Sony утверждает, что ее новый датчик изображения предлагает более эффективное решение, чем любой из этих подходов.

IMX500 предназначен для розничной и промышленной эксплуатации, например, для распознавания лиц при оформлении покупок без кассиров, но компания явно ориентируется на применение в смартфонах.

Неясно, воспользуется ли Apple такими датчиками. Компания вкладывает много усилий в разработку собственных алгоритмов обработки изображений, но вполне возможно, что будущие iPhone могут использовать датчики, которые будут выполнять часть работы ИИ, а затем передавать данные чипу серии A для дальнейшей обработки, потенциально повышая как производительность, так и эффективность.