iOS 18.2 позволяет спрашивать Siri о том, что находится на вашем экране

Filipe Espósito | Четверг, 24 октября, 2024, 12:45.

Filipe Espósito | 24 октября 2024 г. — 1:57 PT

Еще до выпуска iOS 18.1 для публики, Apple выпустила первую бета-версию iOS 18.2 для разработчиков, которая включает множество новых функций Apple Intelligence. Одной из новых функций является долгожданная интеграция с ChatGPT, и благодаря ей вы теперь можете спрашивать Siri о деталях того, что вы видите на экране своего устройства.

Используйте Siri, чтобы спросить ChatGPT, что вы видите на своем экране

С интегрированным в Siri ChatGPT, виртуальный помощник Apple будет использовать платформу OpenAI для ответов на сложные вопросы. Однако он также может читать то, что находится на экране вашего iPhone, iPad или Mac. Например, если вы смотрите видео или фотографию кого-то в Instagram, вы можете спросить: «Где это?» или «Что это за здание на этой фотографии?»

Siri сделает снимок экрана и загрузит его в ChatGPT, который сможет понять контекст и использовать свою базу данных для предоставления ответа. Конечно, из соображений конфиденциальности Siri всегда запрашивает разрешение перед захватом снимка экрана вашего устройства и отправкой его в ChatGPT.

Эта функция особенно интересна тем, у кого нет iPhone 16, который является единственным устройством, получающим Visual Intelligence. С помощью этой функции пользователи могут нажать «Управление камерой», чтобы получить информацию о том, что они видят через камеру. Visual Intelligence использует Apple Intelligence, ChatGPT и Google для предоставления ответов.

Если вы используете iPhone 15 Pro или совместимый iPad, вы можете просто сделать снимок и затем спросить Siri и ChatGPT все, что захотите.

Стоит отметить, что Apple также работает над собственной функцией распознавания на экране с использованием языковых моделей Apple Intelligence. Однако эта функция появится в другом обновлении iOS 18 — вероятно, в следующем году. Как только она станет доступна, Siri будет понимать контекст и выполнять действия на основе того, что находится на вашем экране — все это будет обрабатываться на устройстве.

iOS 18.2 lets you ask Siri about what’s on your screen

Подробнее об iOS 18.2

Помимо интеграции с ChatGPT, iOS 18.2 также включает Image Playground, Genmoji и обновленное приложение Mail.

На данный момент бета-версия iOS 18.2 доступна только для устройств, совместимых с Apple Intelligence. Это означает iPhone 15 Pro или новее и iPad с чипом M1 или новее. Конечно, обновление в конечном итоге станет доступно и для других устройств. Ранее Apple сообщала, что iOS 18.2 будет выпущена для широкой публики в декабре.

iOS 18.1 будет выпущена на следующей неделе с инструментами для письма Apple Intelligence и функцией суммирования уведомлений и текста.