Apple представила масштабные обновления доступности на базе ИИ

В преддверии ежегодной конференции разработчиков Google компания Apple анонсировала ряд значительных улучшений в своих функциях доступности. Эти обновления, работающие на базе Apple Intelligence (собственной системы искусственного интеллекта Apple), охватывают VoiceOver, голосовое управление, распознавание в реальном времени и автоматическую генерацию субтитров для видео. Кроме того, было заявлено, что пользователи гарнитуры Vision Pro получат возможность управлять совместимыми инвалидными колясками с помощью взгляда.

Расширенные возможности VoiceOver и новые функции распознавания

Функция VoiceOver, представляющая собой экранный диктор для людей с ослабленным зрением, получит улучшенное распознавание изображений благодаря Apple Intelligence. Система сможет более детально описывать содержимое, например, считывать информацию со счетов, включая сумму и дату оплаты, а также подробно описывать фотографии и личные записи.

Новая функция Live Recognition (распознавание в реальном времени), активируемая через iPhone, позволит идентифицировать объекты в кадре с помощью камеры и задавать уточняющие вопросы. Для пользователей с ослабленным зрением предусмотрена возможность привязки функции "Лупа" (Magnifier) к кнопке действия, что обеспечивает просмотр контента в высококонтрастном интерфейсе. Также доступно управление голосовыми командами, такими как "увеличить" или "включить фонарик", для быстрого доступа к функциям.

Интуитивное голосовое управление

Система голосового управления расширена за пределы приложения "Лупа". Пользователи смогут использовать естественный язык для выполнения различных действий на экране. Например, в Apple Maps (Картах Apple) можно будет сказать "открыть путеводитель по лучшим ресторанам", а в приложении "Файлы" — "нажать на фиолетовую папку", что значительно упростит навигацию и взаимодействие с устройствами.

Обновление приложения Reader

Значительные улучшения коснулись и приложения Reader (Читалка), которое теперь способно эффективно работать со сложными документами, такими как научные статьи, содержащие несколько колонок текста, изображения и таблицы. Новая версия предложит пользователям суммирование текста с помощью искусственного интеллекта и позволит читать контент на родном языке с сохранением пользовательских шрифтов и цветов. Отмечается, что обновлённый Reader адаптирован для людей с различными нарушениями, включая дислексию и ослабленное зрение.

ИИ-генерируемые субтитры для видео

Apple также добавит субтитры, генерируемые искусственным интеллектом, для видеороликов, не имеющих предварительно созданных надписей. Эта функция будет полезна как для видео, снятых на iPhone, так и для клипов, полученных от друзей или родственников. Сгенерированные субтитры будут доступны на всех ключевых устройствах компании, включая iPhone, iPad, Mac, Apple TV и Apple Vision Pro, при этом пользователи смогут настраивать их внешний вид.

Управление инвалидными колясками взглядом через Vision Pro

Помимо прочего, представлен новый проект, позволяющий пользователям гарнитуры Vision Pro управлять совместимыми инвалидными колясками с помощью взгляда. Apple подчеркнула, что эта функция будет стабильно работать при различном освещении без необходимости перенастройки. Запуск запланирован для США с альтернативными системами привода Tolt и LUCI, поддерживающими как Bluetooth, так и проводное подключение.

Дополнительные улучшения доступности

• Функция распознавания имени, которая уведомляет людей с нарушениями слуха при обращении к ним по имени, теперь поддерживает 50 языков.
• На платформе tvOS будет добавлена поддержка крупного текста, что улучшит читаемость для слабовидящих пользователей.
• Слуховые аппараты Made for iPhone получат улучшенную функцию передачи звука (handoff) между различными устройствами Apple, обеспечивая более плавное переключение.

Все анонсированные функции станут доступны пользователям позднее в этом году, предположительно, в рамках грядущего обновления iOS 27.