Apple выпустила visionOS 27 и добавила в Vision Pro поддержку Visual Intelligence. Пользователь может спросить Siri о физическом предмете перед собой или о содержимом открытого окна, не делая отдельный снимок и не переключаясь в другое приложение.

Функция использует камеры гарнитуры и контекст интерфейса. В демонстрациях Apple Siri распознаёт то, на что смотрит пользователь, объясняет увиденное и помогает работать с информацией, которая уже находится в поле зрения.

Для Vision Pro это естественный сценарий: гарнитура постоянно совмещает реальные предметы с виртуальными окнами. Вместо команды с длинным описанием пользователь может посмотреть на нужный объект и задать короткий вопрос.

Siri можно разместить в пространстве

Visual Intelligence входит в более крупное обновление Siri. Apple также добавила трёхмерное представление помощника, которое можно разместить в пространстве и активировать взглядом без фразы «Привет, Siri».

Доступность отдельных функций зависит от языка, региона и поддержки Apple Intelligence. Перед обновлением стоит проверить список доступных возможностей для своей страны и языка системы.

Источники: Apple Newsroom и примечания к выпуску visionOS 27.