Anthropic выпустила модель ИИ, которая может управлять нашим компьютером

ИИ теперь может выполнять действия в интерфейсе нашего компьютера — просматривать экран, перемещать курсор, нажимать кнопки, вводить текст. 

Anthropic выпустила обновленные модели Claude 3.5 Sonnet и Claude 3.5 Haiku, которые выводят ИИ на новый уровень.

Это мощный инструмент для автоматизации задач, особенно в программировании и аналитике. 

В примерах на ютьюб-канале Anthropic, Claude делает следующие задачи: 

— Заполняет форму в одной вкладке, используя данные из google таблицы в другой 

— Находит место для встречи заката, рассчитывает время поездки и бронирует ее в календаре 

— Разрабатывает сайт, сохраняет файл и затем фиксирует баги уже на компьютере

Пример можно посмотреть тут. 

Asana, Canva, Cognition, DoorDash, Replit и The Browser Company уже начали использовать эту функцию, выполняя задачи, требующие десятков, а иногда и сотен шагов для завершения. 

Использовать бета-версию функции можно через Anthropic API, Amazon Bedrock и Vertex AI от Google Cloud. 

Однако, как утверждают в Anthropic, сейчас способность Claude использовать компьютер далека от идеала. Некоторые действия (прокрутка, перетаскивание, увеличение) вызывают сложности. Однако, в ближайшие месяцы ожидается быстрое совершенствование модели.