PC-Agent: мультиагентная платформа для автоматизации сложных задач на ПК 188

小编 ·

PC-Agent: мультиагентная платформа для автоматизации сложных задач на ПК

PC-Agent — новая иерархическая мультиагентная платформа на основе мультимодальных больших моделей (MLLM), совместно представленная лабораторией Alibaba Tongyi и Шанхайским университетом Цзяо Тун. Моделируя когнитивные процессы человека, она автоматизирует сложные задачи на ПК и может управлять Chrome, Word, WeChat и другими приложениями по инструкциям, увеличивая успешность выполнения задач на 32% по сравнению с существующими методами и устраняя ограничения традиционных подходов.

PC-Agent: мультиагентная платформа для автоматизации сложных задач на ПК

Что такое PC-Agent?

PC-Agent — это новая иерархическая интеллектуальная платформа (AI), основанная на мультимодальных больших моделях (MLLM), совместно разработанная лабораторией Alibaba Tongyi и Шанхайским транспортным университетом. Она способна автоматизировать выполнение сложных задач на ПК, имитируя когнитивные процессы человека, и может управлять Chrome, Word, WeChat и другими приложениями по заданным инструкциям. По сравнению с существующими методами её показатель успешного выполнения задач выше на 32%, что позволяет преодолеть ограничения традиционных подходов при работе со сложными задачами на ПК.

PC-Agent:一款用于PC上自动执行复杂任务的多智能体框架.webp

Ключевые особенности PC-Agent

  • Модуль активного восприятия (APM): объединяя мультимодальные большие модели и содержимое скриншотов, PC-Agent обеспечивает детальное восприятие экранного содержимого и точное выполнение операций.

  • Иерархическая многоагентная архитектура сотрудничества: PC-Agent разбивает сложные команды на три уровня — инструкции, подзадачи и действия — и задействует четырёх агентов: Manager, Progress, Decision и Reflection. Такая структура обеспечивает декомпозицию задач «сверху вниз» и точную обратную связь «снизу вверх».

  • Механизм динамического принятия решений: агент Reflection в реальном времени анализирует результаты выполнения и при необходимости корректирует действия, что гарантирует точность и адаптивность выполнения задач.

Сценарии применения PC-Agent

  • Автоматизация задач: PC-Agent может автоматически выполнять сложные цифровые задачи — например, систематизацию исследовательских материалов, подготовку отчётов, создание презентаций и т. д.

  • Кросс-приложные рабочие процессы: платформа способна обрабатывать сложные задачи, охватывающие несколько приложений, такие как обмен данными и выполнение операций между различными программами.

  • Высокая эффективность использования данных: даже при обучении на небольшом объёме качественных данных PC-Agent способен обрабатывать сложные рабочие процессы длиной до 50 шагов.

Преимущества PC-Agent

  • Высокий показатель успешного выполнения задач: при работе со сложными задачами успешность на 32% выше по сравнению с существующими методами.

  • Высокая эффективность данных: для обучения сложным задачам требуется лишь небольшой объём данных.

  • Мощные возможности управления: точное восприятие содержимого экрана, выполнение сложного редактирования и операций между приложениями.

  • Широкая область применения: автоматизация офисных задач — работа с документами, таблицами, презентациями, управление расписанием и т. д.

  • Высокая удовлетворённость пользователей: точность 92%, быстрый отклик, оценка пользователей 4,5 из 5 баллов.

  • Рост производительности: в экспериментальной оценке сложных задач показатель успешного выполнения у PC-Agent на 32% выше, чем у существующих методов.

  • Высокая адаптивность: благодаря моделированию когнитивных процессов человека PC-Agent лучше адаптируется к сложным условиям взаимодействия.

Репозиторий на GitHub:https://github.com/X-PLUG/MobileAgent/tree/main/PC-Agent