WikiSkill de Google : 63,7 % quand un seul rôle lit le wiki, 60,9 % quand deux le lisent
D'après Préimpression arXiv 2608.27454 (Google Research et Virginia Tech, 27 août 2026), relayé par The Decoder
Image : générée (Gemini)
Rédigé à partir de la source originale; chaque fait est vérifié contre le texte source.
À retenir
- Le système empile trois couches : les traces brutes des tentatives, un wiki qui les résume, et des compétences réutilisables tirées de ce wiki.
- Quatre rôles se partagent le travail : un agent qui exécute, un gardien du wiki, un proposeur de compétences (des marches à suivre réutilisables tirées des tentatives passées), et une porte de validation.
- Le résultat le plus contre-intuitif : donner le wiki au proposeur SANS le donner à l'agent qui exécute atteint 63,7 %. Le donner aux deux fait redescendre à 60,9 %.
- Sur ce banc d'essai précis, davantage de contexte dégrade donc le résultat au lieu de l'améliorer. La préimpression mesure cet écart, elle n'en fait pas une loi générale.
- Le wiki n'est jamais purgé : rien dans le dispositif ne prévoit d'annuler une leçon apprise, même fausse.
Pourquoi ça compte
La promesse habituelle des agents autonomes est qu'ils apprennent de leurs erreurs. Cette mesure montre que la mémoire aide surtout là où on ne l'attend pas. Pour qui évalue un outil agentique, la question utile n'est donc pas « garde-t-il une mémoire ? » mais « qui, dans le système, a le droit de la lire ? ». Portée bornée : un banc d'essai, pas une règle universelle.
Chiffre-clé
63,7 % de réussite quand seul le proposeur de compétences voit le wiki, contre 48,7 % sans wiki du tout et 60,9 % quand l'agent et le proposeur y ont accès tous les deux, selon la préimpression arXiv 2608.27454 du 27 août 2026.
Citation
« the agent, aka the model, doesn't truly learn in a continuous sense » the-decoder, qui résume la portée réelle du dispositif
Fondée sur la source originale
Sources
- Préimpression arXiv 2608.27454 (Google Research et Virginia Tech, 27 août 2026) : Source primaire : c'est le document qui porte les trois chiffres cités.
- Relais média : The Decoder → · Lire en français
