Microsoft разрешила ИИ-агентам самостоятельно управлять компьютером

Новая функция также способна распознавать изменения на экране, поэтому любая программа, которой может пользоваться человек, сможет использовать и искусственный интеллект.
Microsoft внедрила новую функцию "Computer Use" для Copilot Studio, которая позволяет ИИ-агентам самостоятельно взаимодействовать с вебсайтами и десктопными приложениями, будто это инструменты для автоматизации задач, сообщает The Verge.
В Microsoft объясняют, что эта функция позволяет агентам нажимать кнопки, выбирать пункты меню и вводить текст в поля на экране. Она позволяет им работать даже с теми системами, которые не имеют открытого API - интерфейса для взаимодействия между приложениями.
Copilot Studio сможет создавать ИИ-агентов, способных автоматизировать ввод данных, выполнять маркетинговые исследования или обрабатывать счета. По словам компании, функция также способна распознавать изменения на экране, как новые кнопки или изменения в интерфейсе, и продолжать работу без сбоев.