Evaluando la Eficacia de los Sistemas Multi-Agente: ¿Se Pueden Seleccionar Patrones Automáticamente?

Este artículo explora el rendimiento de los patrones multi-agente en varios benchmarks y modelos, revelando información sobre su eficacia.

4 min readTecnología

Se llevó a cabo una investigación que involucró seis patrones multi-agente en tres benchmarks y modelos. El análisis de equipos de agentes, compuestos por configuraciones como crítico-actor u orquestador-subordinado, mostró que estos equipos a menudo tenían un rendimiento inferior al de los agentes individuales, tanto en precisión como en costo, con aumentos de costo de hasta cuatro veces. Aunque esto podría sugerir una conclusión sencilla de que los sistemas multi-agente (MAS) no son necesarios, surgió una excepción. Cuanto más compleja es la tarea, mayores son las posibilidades de éxito del equipo, planteando dos preguntas críticas: ¿Influye la topología del sistema en los resultados? Y si es así, ¿podemos automatizar la selección del patrón adecuado para tareas específicas? Actualmente, la respuesta a la segunda pregunta es negativa, y las razones detrás de esto son particularmente intrigantes. Los ejemplos presentados utilizan el marco multi-agente FEDOT.MAS, con todo el código experimental y los resultados disponibles en un repositorio. Aunque mido la herramienta que desarrollé, las conclusiones extraídas no favorecen en gran medida a los sistemas multi-agente, reflejando una cierta autocrítica en lugar de promoción.

Tecnología