Технология Visual Intelligence от Apple: что это такое и как работает умный визуальный поиск

На ежегодной конференции для разработчиков WWDC компания Apple представила масштабные обновления программного обеспечения, которые станут доступны на устройствах бренда в ближайшие месяцы. Одним из ключевых нововведений стала функция Visual Intelligence — инструмент на базе искусственного интеллекта Apple Intelligence, позволяющий пользователям мгновенно получать информацию об окружающих объектах.

Что представляет собой технология Visual Intelligence?

Visual Intelligence — это интеллектуальный инструмент, который использует алгоритмы машинного обучения для сканирования изображений. Функция способна распознавать объекты как на экране устройства, так и в реальном времени через объектив камеры, предоставляя пользователю релевантную информацию. Например, с помощью этой технологии можно определить породу собаки по фотографии или автоматически добавить концерт в календарь, просто наведя камеру на афишу. Фактически функция является аналогом популярных сервисов распознавания изображений, таких как Google Объектив и Circle to Search.

С выходом обновлений линейки OS 27 компания планирует существенно расширить присутствие Visual Intelligence в своей экосистеме, интегрировав функцию непосредственно в стандартное приложение «Камера». При нажатии кнопки затвора обновленный голосовой ассистент Siri сможет анализировать то, что видит объектив, и мгновенно отвечать на запросы пользователя.

Кроме того, Siri будет предлагать контекстные действия в зависимости от кадра. Если направить камеру на блюдо, ассистент отобразит его пищевую ценность, а при сканировании ресторанного чека поможет быстро разделить сумму счета между друзьями.

Интеграция в экосистему Apple

Технология Visual Intelligence будет доступна не только на смартфонах, но и на других устройствах компании:

• На компьютерах Mac запуск функции будет осуществляться с помощью специального сочетания клавиш, после чего пользователь сможет выделить любую область на экране и задать Siri интересующие вопросы.
• На планшетах iPad инструмент интегрируют в систему создания скриншотов. Достаточно сделать снимок экрана, чтобы система мгновенно распознала контент и предложила варианты действий.
• На гарнитурах Vision Pro в обновлении visionOS пользователи смогут получать информацию о предметах реального мира, просто задерживая на них свой взгляд.

Все обрабатываемые изображения сохраняются конфиденциально внутри приложения Siri, что обеспечивает безопасность личных данных пользователей.

Поддерживаемые устройства и доступность

На начальном этапе функция Visual Intelligence доступна на смартфонах с аппаратной поддержкой Apple Intelligence. В этот список входят устройства серий iPhone 16 и iPhone 17, а также флагманы предыдущего поколения — iPhone 15 Pro и iPhone 15 Pro Max.

В дальнейшем география работы сервиса и список поддерживаемых устройств будут расширяться. В частности, технология станет доступна на планшетах iPad и компьютерах Mac с процессорами M-серии, а также на гарнитуре смешанной реальности Apple Vision Pro. Функция уже официально поддерживается в ряде регионов, включая Великобританию.

Твитнуть