Google объединяет функции Circle to Search и ИИ-помощника Gemini

Компания Google начала масштабное обновление интерфейса Gemini для Android, интегрируя в него инструменты визуального поиска. Теперь пользователи могут выделять любые объекты на экране и мгновенно получать пояснения от искусственного интеллекта без переключения между приложениями и лишних манипуляций.

Новые возможности взаимодействия с экраном

В обновленной версии приложения Google под номером 17.20 ассистент Gemini получил расширенный функционал оверлея — вспомогательного окна, которое открывается поверх запущенных программ. При активации помощника теперь появляется подсказка, предлагающая обвести любой элемент на дисплее или задать вопрос о текущем содержимом экрана. Это изменение делает работу с ИИ более интуитивной и быстрой, объединяя диалоговые возможности нейросети с удобством функции Circle to Search («Обведи и найди»).

Основные нововведения в интерфейсе:

• Возможность обводить или выделять текст, фотографии и любые другие элементы интерфейса для использования их в качестве контекста для запроса к ИИ.
• Инструменты масштабирования: выделенную область теперь можно корректировать с помощью специальных маркеров, чтобы точнее указать объекту анализа границы интереса.
• Доступ к инструментам аннотирования, которые позволяют оставлять пометки на фрагментах экрана перед отправкой их в обработку.

Улучшенный контроль над данными

В обзорах отмечается, что помимо визуального выделения, в меню Gemini появился отдельный ярлык «Контент на экране». Эта функция позволяет вручную прикрепить снимок текущего состояния дисплея к текстовой команде. Хотя нейросеть и ранее могла анализировать происходящее на экране в некоторых сценариях, новый метод дает пользователю более прозрачный и прямой контроль над тем, какая именно информация передается алгоритмам для анализа.

По данным профильных изданий, обновление постепенно распространяется среди владельцев Android-устройств. Ожидается, что такая интеграция устранит функциональный разрыв между диалоговым интерфейсом Gemini и инструментами визуального поиска, которые ранее существовали как независимые элементы операционной системы.