Dites-lui à quoi sert la mémoire

10 novembre 2026 · Lecture ≈ 4 min · Jules Thomas

Ce qui a été mesuré

L'article s'intitule « The components of agent memory ». Publié par l'équipe Engineering d'Anthropic, il est signé Lance Martin. L'un de ses tests tient en une seule tâche du banc d'essai CL-Bench 1.0 : répondre à une série de questions en cherchant dans une base de données. Après chaque réponse, le modèle apprend la bonne solution et peut écrire une note dans un dossier qui survit d'une session à l'autre.

Première version de la consigne : on dit seulement au modèle qu'un dossier de mémoire existe. Pour Opus 4.7 et Opus 5, cela suffit, et la mémoire leur apporte un gain sensible. Deuxième version : on ajoute une règle sur ce qu'il faut écrire, « record only failures ». Les deux modèles « lost much of the performance boost that memory gave them ». Les auteurs concluent que, pour les modèles les plus forts, la liberté de juger ce qui compte vaut mieux qu'une règle fixée d'avance, et que la règle peut même dégrader le résultat.

Chez un modèle plus ancien, c'est l'inverse. Sonnet 4.6 oubliait souvent de relire sa mémoire et ne testait pas ses hypothèses. Lui demander de relire avant de répondre, puis de vérifier ses théories, a « nearly doubled its benchmark score ». Sonnet 5 le fait seul : il relit sa mémoire avant de répondre 9 fois sur 10, quand Sonnet 4.6 le faisait moins d'une fois sur deux. D'où la formule de l'article : « it helps to tell Claude what memory is for, but not how to use it ».

Deux précautions. C'est un éditeur qui mesure ses propres modèles, sur une seule tâche. Et les deux consignes ne sont pas la même : celle qui fait perdre les forts dit quoi retenir, celle qui aide l'ancien dit de relire et de vérifier.

La règle qui appelle une règle

Dans la Critique de la raison pure, au début de l'Analytique des principes, Kant distingue deux facultés. L'entendement conçoit les règles. Le jugement décide si un cas tombe sous une règle. Or la logique générale, dit-il, ne peut pas donner de préceptes au jugement : pour lui apprendre à appliquer une règle, il faudrait une autre règle, qui demanderait à son tour du jugement. Sa conclusion, dans la traduction de Jules Barni : « le jugement est un don particulier, qui ne peut pas être appris, mais seulement exercé ».

« Record only failures » est exactement ce genre de règle. Décider ce qui mérite d'être retenu, c'est juger : ce fait servira-t-il demain ? La règle tranche à la place du modèle, une fois pour toutes, avant qu'il ait vu la partie. Le modèle qui savait juger obéit, et il perd ce qu'il aurait gardé. L'article constate sans expliquer. Kant donne une piste : la règle ne remplace pas le jugement, elle le court-circuite. Il prévient aussi que les exemples, à la longue, font employer les règles « plutôt comme des formules que comme des principes ».

Ce que Kant n'a pas prévu

Le cas de Sonnet 4.6 résiste. Pour Kant, aucune règle ne prémunit celui à qui manque le jugement « contre l'abus qu'il en peut faire ». Or une simple consigne a presque doublé le score d'un modèle qui jugeait mal. Deux lectures sont possibles. Ou bien la consigne n'est pas une règle de tri mais un exercice : relire, puis vérifier, c'est s'entraîner à juger, et Kant dit justement que le jugement s'exerce. Ou bien l'analogie s'arrête là, parce qu'un modèle n'est pas un sujet kantien. Je penche pour la première, sans pouvoir le prouver.

Kant réserve d'ailleurs sa plus belle image aux exemples, et non aux règles : « Les exemples sont donc pour le jugement comme une roulette pour l'enfant, et celui-là ne saurait jamais s'en passer auquel manque ce don naturel. » La roulette, ici, c'est le trotteur, le chariot où l'on met l'enfant qui ne marche pas encore. Il porte tant que l'enfant ne marche pas. Ensuite, il l'encombre.

Ce que j'en retiens pour mon métier

En août, j'ai retiré du fichier d'instructions de mon propre agent ses principes généraux, pour y laisser surtout des faits datés, ceux qu'aucun modèle ne peut deviner. Le critère tenait en une ligne : couper ce qui apprend à penser, garder ce qui apprend un fait de son monde. L'article d'Anthropic rappelle d'ailleurs que la documentation de Claude Code prévient que « longer instruction files reduce adherence ».

La leçon, pour qui déploie des agents, est simple : à chaque changement de modèle, relisez vos consignes. Celles qui portaient l'ancien peuvent brider le nouveau. Dites-lui à quoi sert la mémoire. Le reste, laissez-le juger.

Kant ajoute en note que le défaut de jugement « est proprement ce que l'on nomme stupidité », et qu'il n'y a pas de remède. Pour les modèles, il en existe un. Il s'appelle la version suivante.