Развитие систем Computer Use: Gemini 3.5 Flash, Perplexity для юристов и Record & Replay в Codex

Развитие систем Computer Use: Gemini 3.5 Flash, Perplexity для юристов и Record & Replay в Codex

Индустрия искусственного интеллекта переживает фундаментальный сдвиг в сторону создания полноценных автономных агентов. Разработчики переходят от концепции текстовых чат-ботов к созданию систем класса Computer Use — инструментов, способных взаимодействовать с интерфейсом персонального компьютера так же, как это делает человек. Вместо того чтобы просить пользователя скопировать и вставить текст, новые модели способны самостоятельно анализировать происходящее на экране, совершать клики мышью, вводить текст в поля ввода, прокручивать веб-страницы и переключаться между различными приложениями. Встраивание подобных функций в недорогие массовые модели, запуск специализированных профессиональных ИИ-агентов и появление систем автоматической записи сценариев меняют привычные подходы к автоматизации повседневной офисной работы.

Интеграция Computer Use в Gemini 3.5 Flash

Ярким примером доступности технологий компьютерного управления стало обновление модели Gemini 3.5 Flash от компании Google. Функция Computer Use теперь интегрирована нативно в эту экономичную модель. Она способна воспринимать изображение рабочего стола, распознавать элементы интерфейса программ и формировать команды для выполнения действий.

Важно понимать техническую специфику этой технологии. Сама ИИ-модель, находящаяся на удаленном сервере, физически не управляет компьютером пользователя. Она работает по принципу обратной связи (action loop). Модель получает скриншот текущего состояния экрана, анализирует его, принимает решение о следующем шаге и возвращает специальный вызов функции с координатами клика или текстом для ввода. Исполнением этой функции занимается клиентское программное обеспечение, запущенное непосредственно на устройстве разработчика или в специальном контейнере.

Вопросы безопасности при работе с Computer Use имеют первостепенное значение, поскольку агент получает доступ к управлению системой. Компания Google реализовала многоуровневый комплекс мер защиты:

• Проведение специализированного состязательного обучения моделей для выявления попыток захвата управления.
• Обязательное явное подтверждение пользователем критических и потенциально опасных действий на экране.
• Опциональная встроенная система обнаружения скрытых инъекций в подсказках, которая по умолчанию отключена, но может быть активирована разработчиком.
• Использование изолированных программных песочниц для выполнения клиентских скриптов.

Автоматизация юридической рутины с Perplexity "Computer for Counsel"

Специализированное применение технологий компьютерного управления находит свое воплощение в вертикальных профессиональных решениях. 24 июня 2026 года состоялся запуск ИИ-агента Perplexity "Computer for Counsel", спроектированного специально для юридических департаментов и адвокатских бюро. Продукт нацелен на автоматизацию трудоемких процессов анализа документов, поиска судебных прецедентов и проверки соблюдения регуляторных требований.

Perplexity интегрируется со стандартным набором инструментов, используемых юристами в ежедневной практике: сервисом электронных подписей DocuSign, системами управления документами NetDocuments и Box, а также специализированными платформами Clio и LegalZoom. ИИ-агент способен самостоятельно открывать договоры, извлекать ключевые условия, сопоставлять их с базой законов и формировать отчеты о возможных юридических рисках.

Главным преимуществом системы является сведение к минимуму вероятности галлюцинаций ИИ. В отличие от стандартных поисковых моделей, юридический агент Perplexity работает исключительно в рамках доверенного контура предоставленных документов и верифицированных правовых баз данных. Модель не выдумывает факты, а всегда сопровождает выводы точными ссылками на конкретные пункты соглашений или статьи законов.

Запись сценариев в OpenAI Codex Desktop: Record & Replay

Параллельно развивается направление упрощения создания ИИ-навыков. Обновление OpenAI Codex Desktop представило инструмент Record & Replay, позволяющий пользователям создавать сценарии автоматизации без написания кода. Функция доступна для пользователей операционной системы macOS.

Процесс создания сценария выглядит просто: пользователь включает запись, выполняет на компьютере последовательность действий (например, скачивает отчет из CRM, форматирует таблицу и отправляет ее по почте) и параллельно комментирует свои действия голосом через микрофон. Codex анализирует видеозапись экрана, сопоставляет ее со звуковой дорожкой и преобразует демонстрацию в исполняемый и редактируемый навык (skill).

В ходе независимых тестов Record & Replay успешно справлялся со сценариями загрузки коротких видеороликов YouTube Shorts и переноса файлов между каталогами. Однако технология пока не является абсолютно надежной. Первые запуски записанных сценариев требуют обязательного контроля и выдачи необходимых разрешений на доступ к файловой системе и браузеру. Стоит также отметить региональные ограничения: на старте функция Record & Replay недоступна для пользователей из Европейской экономической зоны, Великобритании и Швейцарии.

Практическое руководство по настройке Computer Use

Ниже представлены пошаговые регламенты работы с новыми системами управления:

• Регламент использования Gemini Computer Use:
  1. Настройте локальное окружение и установите библиотеку для работы с API Gemini, выбрав модель Gemini 3.5 Flash.
  2. Подключите инструмент Computer Use, передав в конфигурацию параметры вашего окружения (браузер или рабочий стол).
  3. Отправьте первый скриншот экрана вместе с текстовым описанием конечной цели (например, «найди информацию о погоде и запиши в файл»).
  4. Получите от API координаты клика или текст ввода, обработайте вызов функции на стороне клиента и выполните действие.
  5. Сделайте новый скриншот экрана после совершения действия и отправьте его обратно модели для продолжения цикла.
  6. В обязательном порядке запрашивайте подтверждение пользователя перед отправкой форм, проведением платежей или удалением файлов.
• Регламент работы с Perplexity Counsel:
  1. Выполните вход в панель администратора Perplexity и активируйте доступ к профессиональному модулю Counsel.
  2. Подключите авторизованные хранилища документов компании (например, NetDocuments или Box), настроив минимально необходимые права доступа.
  3. Проведите тестовые запуски на синтетических или несекретных контрактах для оценки качества анализа.
  4. Всегда требуйте от модели вывода точных цитат и проверяйте сформированные отчеты силами штатных юристов перед отправкой клиентам.
• Регламент записи навыков в Codex Record & Replay:
  1. Убедитесь, что ваше устройство работает под управлением macOS, а аккаунт находится в поддерживаемом регионе.
  2. Запустите запись процесса выполнения задачи, стараясь четко проговаривать голосом причины выбора тех или иных кнопок и файлов.
  3. После завершения записи дождитесь, пока Codex сформирует исполняемый навык.
  4. Запустите полученный скрипт в безопасном тестовом режиме на изолированных данных для проверки стабильности путей к файлам и поведения окон браузера.
  5. Не используйте автономные сценарии для совершения необратимых действий (оплата услуг, отправка писем клиентам) без предварительного одобрения человеком.