Lilian Weng place le LLM au cœur des agents autonomes

Contrôleur central Un modèle de langage peut fonctionner comme le contrôleur central d’un système d’agent autonome. Cette architecture place le LLM au cœur de la planification et de l’exécution des tâches. Le modèle peut découper une tâche importante en sous-objectifs plus petits. Cette décomposition fournit une structure pour traiter progressivement un objectif complexe. Des démonstrations de faisabilité associent cette approche à AutoGPT, GPT-Engineer et BabyAGI. Ces projets illustrent l’usage d’un LLM dans des systèmes conçus pour enchaîner plusieurs étapes. L’article de Lilian Weng présente ces capacités comme des composants d’agents autonomes pilotés par des modèles de langage.

Mémoire et décomposition Les systèmes fondés sur des LLM peuvent utiliser une mémoire à court terme et une mémoire à long terme. La première conserve des éléments utiles pendant une séquence de traitement. La seconde permet de conserver des informations au-delà d’une interaction immédiate. Cette distinction complète la capacité du modèle à diviser les grandes tâches en sous-objectifs. Le raisonnement en chaîne de pensée, appelé CoT, est également utilisé pour améliorer les performances sur des tâches complexes. L’ensemble réunit donc décomposition, raisonnement et mémoire dans une même architecture. AutoGPT, GPT-Engineer et BabyAGI figurent parmi les démonstrations citées.

Les LLM structurent les tâches complexes

Raisonnement séquentiel La chaîne de pensée sert à améliorer les performances d’un modèle sur des tâches complexes. Elle accompagne la décomposition d’un objectif en sous-objectifs plus simples. Un agent peut ainsi organiser son traitement autour d’étapes distinctes plutôt que d’une seule instruction globale. Cette capacité s’inscrit dans le rôle de contrôleur central attribué au LLM. Le modèle ne se limite donc pas à produire une réponse isolée. Il peut également structurer une séquence de résolution. Les démonstrations de faisabilité mentionnent AutoGPT, GPT-Engineer et BabyAGI. Leurs dépôts publics donnent accès à des exemples concrets de cette famille d’agents, notamment AutoGPT.

Évaluation par réflexion Un LLM peut effectuer une autocritique et une autoréflexion pour apprendre de ses erreurs. Ces mécanismes ajoutent une étape d’évaluation au fonctionnement de l’agent. L’article cite Reflexion, présenté par Shinn et Labash en 2023. Selon ces auteurs, Reflexion améliore les capacités de raisonnement grâce à une mémoire dynamique et à des capacités d’autoréflexion. Cette affirmation concerne le système Reflexion et ses mécanismes décrits. Elle ne transforme pas l’autoréflexion en résultat général pour tous les agents. Le principe reste toutefois lié à une architecture combinant mémoire, évaluation et raisonnement au sein d’un système piloté par un LLM.

ReAct combine action et raisonnement

Action et connaissances ReAct est présenté comme une approche destinée aux tâches exigeant des connaissances et de la prise de décision. Selon Yao et ses coauteurs en 2023, ReAct fonctionne mieux que la référence Act-only sur ces tâches. Cette comparaison porte sur deux configurations précises. Elle associe donc une affirmation attribuée à un auteur et un périmètre d’évaluation défini. ReAct s’inscrit parmi les méthodes qui organisent le comportement d’un agent autour du raisonnement et de l’action. La chaîne de pensée reste également mobilisée pour améliorer les performances sur des tâches complexes. Les agents autonomes réunissent ainsi plusieurs briques décrites dans l’analyse de Lilian Weng.