LDT-Coord: координация разнородных LLM-агентов через цифровой двойник

Команды роботизированных агентов на базе разнородных больших языковых моделей (LLM) всё чаще применяются в физических системах: умных фабриках, складах и сервисной робототехнике. Однако для их совместной работы требуются механизмы координации, способные функционировать при ограниченных сетевых ресурсах. Существующие подходы, опирающиеся на многокруговые диалоги на естественном языке, порождают три проблемы: рост коммуникационных издержек с увеличением размера команды, зависимость качества от возможностей LLM и задержки действий из-за итеративных согласований.

Решение: LDT-Coord

Для решения этих проблем предложен LDT-Coord — сетевой фреймворк координации, построенный на базе легковесного цифрового двойника (DT). Его работа устроена так:

• Каждый агент самостоятельно выбирает действие и передаёт серверу DT своё решение вместе со структурированным временным ограничением по общим ресурсам. Это позволяет отвязать качество координации от способности LLM рассуждать на естественном языке.
• На стороне DT работает оркестратор без обучения (rule-based orchestrator), который разрешает конфликты между агентами и возвращает инструкции для их предотвращения.
• Чтобы дополнительно снизить коммуникационную нагрузку, управление отчётностью агентов сформулировано как частично наблюдаемый марковский процесс принятия решений с ограничениями (C-POMDP). Для решения задачи применяется алгоритм PPO-Lagrangian.

Результаты

Моделирование показало, что LDT-Coord достигает уровня успешности выполнения задач, сопоставимого с традиционными методами координации. При этом фреймворк снижает коммуникационные издержки более чем в 70 раз и сохраняет устойчивость при использовании разнородных моделей.

Источник: cs.AI updates on arXiv.org