Claude agenthukommelse: transkript-støttet drømmeri og delte skribentfeil
Et feil lagret landemerke sendte Claude over den samme Pokémon-kanten tre ganger i Anthropic's rapporterte eksperiment.
Et feil lagret landemerke sendte Claude over den samme Pokémon-kanten tre ganger i Anthropic's rapporterte eksperiment. Transkript-støttet drømmeri korrigerte notatet, mens separate kontraktssider og ordrette vilkår gjenopprettet manglende graderte fakta i en annen oppgave.
Les den skriftlige utgaven (engelsk) ↗
Hva denne videoen dekker
- Agenthukommelse vedvarer kontekst mellom økter; den beskrevne reparasjonen endrer notater snarere enn modellvekter.
- Å sjekke feil notat mot økttranskriptet hjalp den korrigerte grenen å nå Cerulean City.
- Søk alene scoret 53% av kriteriene; søk pluss den større wikien nådde 61% på 25 spørsmål om Stainless-dokumenter.
- Andre kilderapporterte juridiske oppgaver viste ingen klar wiki-gevinst eller en wiki større enn de originale dokumentene.
- Kontraktspesifikke sider, én skribent per side og ordrette vilkår gjenopprettet 57/57 graderte fakta; begge endringer ble testet sammen.
Spørsmål og svar
Hva endrer drømmeri i et agenthukommelsessystem?
Drømmeri gjennomgår tidligere økttranskripsjoner og omorganiserer lagret kontekst som senere økter kan lese. Anthropic's forskning definerer agenthukommelse som beholdt kontekst og ekskluderer endringer i modellvekter. Den omkringliggende programvaren velger når arbeidet kjører og hvilke transkripsjoner den mottar. Managed Agents' Dreams API er i forskningsforhåndsvisning og produserer et separat utdatalager for gjennomgang.
Hvordan holdt et feil minne Claude fanget i Mount Moon?
Claude noterte Pokémon-senteret på feil side av Mount Moon, og trodde deretter at hulen var bak den. Anthropic rapporterer at en enveis-avsats returnerte den til en tidligere rute, mens navigasjonsverktøyet overså fallet. Å sjekke det lagrede notatet mot den originale transkripsjonen korrigerte lokasjonen. Den korrigerte grenen nådde til slutt Cerulean City.
Når klarte ikke en koblet minne-wiki å forbedre kildesøk?
En wiki viste ingen klar gevinst på en rapportert juridisk oppgave der kriterier ofte kunne tilfredsstilles ved å hente informasjon fra et enkelt dokument. Anthropic beskriver også en separat oppgave der wikien ble større enn de originale dokumentene. Artikkelens resultater støtter oppgavespesifikk evaluering av representasjonen, med vedlikeholdskostnader vurdert sammen med eventuelle fordeler for svar.
Hvilke skriveendringer gjenopprettet de manglende kontraktsfaktaene?
Hver kontrakt mottok sin egen wiki-side med en enkelt agent som skrev den, og vilkår ble sitert ordrett. Anthropic's simulerte oppkjøps-oppgave støttet deretter alle femtisju graderte fakta, etter at den delte tabellversjonen inkluderte førtien. Eierskap og sitering endret seg sammen, så testen kan ikke isolere bidraget fra noen av endringene. Resultatet er et referansepunkt uten universell juridisk nøyaktighetsgaranti.
Hva var The Daily Diffs dom over transkripsjonsbasert minnereparasjon?
The Daily Diffs dom var NEEDS REVIEW. Niko ville brukt transkripsjonsbasert reparasjon, inspisert de endrede notatene og testet om en wiki hjelper den faktiske oppgaven. Anthropic's egne moteksempler viser at en representasjon kan legge til arbeid uten en klar fordel. Kokeboken deres advarer om at gamle transkripsjoner ikke kan etablere senere eksterne endringer, så viktige skiftende fakta trenger fortsatt verifisering.
Oversatt transkripsjon
Oversatt fra den originale engelske fortellingen. Tilgjengelig lyd og undertekster kontrolleres av YouTube.
Hvorfor holdt hukommelsen Claude fanget?
0:00 Å gi Claude en hukommelse burde hindre den i å gjenta feil. Anthropic så et feil notat sende den over den samme Pokémon-kanten tre ganger. I denne videoen, hvordan fanger hukommelsen Claude? Og hva fikser det faktisk? Anthropic kaller reparasjonen drømmeri. Ekstra modelløkter går gjennom lagrede transkripsjoner og redigerer minnefiler. Deres kontraktstest gjenopprettet til og med alle manglende fakta ved å endre hvordan disse minnene ble skrevet.
0:22 Hold den tanken. Det er lørdag 7. november, og dette er The Daily Diff. Agenthukommelse er kontekst lagret mellom økter. Modellens vekter forblir uendret. Den omkringliggende programvaren bestemmer når opprydding kjører og hvilke transkripsjoner den ser. Funksjonen Managed Agents' Dreams er i forskningsforhåndsvisning. Denne artikkelen slår ikke på drømmer for alle Claude-brukere.
Hva testet Anthropic faktisk?
0:41 Anthropic publiserte Lance Martins artikkel fredag. Dagens Hacker News-diskusjon har folk som krangler om hvilke minner de sletter. Hva skjer når et selvsikkert feil notat overlever til en annen økt? Vi har gitt hallusinasjonen et arkivskap. Claude må krysse Mount Moon, ved å bruke et nærliggende Pokémon-senter som landemerke. Den skriver ned at bygningen er på østsiden, selv om den er på vestsiden. Den drar i den tro at hulen allerede er bak den.
1:05 Så går den over en enveis-avsats til ruten den kom fra. Navigasjonsverktøyet overser fallet, så Claude forklarer feilen som overskytelse. Neste forsøk starter med den samme feilaktige antakelsen. Vedvarenhet har bevart feilen. Etter det tredje fallet skriver Claude at den skal stoppe i stedet for å fortsette å loope. Forskerens oppsett ber den automatisk om å fortsette. Den drar tilbake til en tidligere by, og den runden ender uten å nå Cerulean City. Selv boten vil at dette møtet skal ta slutt.
Hvordan fikset drømmeri ruten?
1:30 Forskerne kjører drømmeri på den feilaktige minnemappen. Claude sjekker notatet mot den originale økttranskripsjonen, fanger opp lokasjonsfeilen og omskriver den. Med det korrigerte notatet går den inn i Mount Moon igjen og når til slutt Cerulean. Det er det nyttige resultatet her. Et lagret krav sjekkes mot bevis før et nytt forsøk. I en kjøring samlet Sonnet tre punkt syv hundrevis av filer mens den tjente
1:50 ett merke. Fabel fem beholdt en mindre samling og tjente fire. Forskjellige modeller, én kjøring hver, så filsystemets bidrag kan ikke isoleres. På Hacker News sier yfontana at de sletter nesten alle automatiske minner fordi notatene vanligvis tilhører den nåværende oppgaven. Det er én brukers erfaring. Gårsdagens koordinater er et elendig kompass når du har flyttet deg.
Når hjelper en hukommelseswiki?
2:10 Anthropic bygget også en koblet wiki over Stainless's interne dokumenter. Claude organiserer relatert informasjon på tvers av økter, bruker deretter disse sidene til å svare på spørsmål. Dette kan hjelpe når et svar strekker seg over flere dokumenter. De originale filene forblir tilgjengelige for å sjekke kartet. Med søk alene scoret Claude femtitre prosent av de graderte kriteriene. Søk pluss den større wikien nådde sekstien prosent.
2:32 Dette var tjuefem spørsmål om ett selskaps dokumenter. Ekstra offline arbeid forbedret den evalueringen. Artikkelen gir oss ingen totalpris for å bygge wikien, så hold fakturakolonnen åpen. Dreams bruker standard API-tokenpriser, og jobber kan ta minutter til timer. Anthropic sier at kontinuerlig sjekking av hvert minne kan være upraktisk. Agentens andre skift går fortsatt på kredittkortet ditt. Den samme artikkelen inkluderer en juridisk oppgave der wikien viste ingen klar gevinst over
Når legger wikien ingenting til?
2:56 søk. En annen wiki ble større enn dokumentene den oppsummerte. Hvis et spørsmål kan besvares ved å finne ett avsnitt, kan det å bygge et leksikon først være en bemerkelsesverdig dyr måte å bruke søkefunksjonen på. Claude Code laster automatisk inn en begrenset innledende del av minneindeksen, med detaljerte notater holdt andre steder. En feil injisert instruksjon kan påvirke hver økt. Anthropic's kokebok advarer om at hukommelsen bare er så god som transkripsjonene. Gårsdagens logg kan ikke bekrefte morgendagens endringer.
Hvorfor forsvant seksten kontraktsfakta?
3:23 Nå til kontraktoppgaven. Flere agenter bygger en wiki for et simulert oppkjøp, og skriver vilkår inn i én felles tabell. Den resulterende briefen inkluderer førtien av syv og femti graderte fakta. Seksten fakta har forsvunnet et sted mellom kontraktene og det polerte svaret. Det er et ganske viktig sted å miste informasjon. Anthropic sporer feilen til dårlige oppsummeringer og agenter som overskriver hverandres arbeid. De manglende vilkårene ble aldri trygt bevart for svarøkten.
3:47 Drømmeri lar Claude reflektere over disse feilene, foreslå forskjellige wiki-instruksjoner og gjenoppbygge. Reparasjonen går helt tilbake til hvordan minnet er skrevet. Alle som har redigert det samme dokumentet med kolleger, kjenner denne smerten. Gi hver deltaker en større hjerne, og de kan fortsatt lagre over noens andres arbeid. Det spennende AI-minneproblemet har vandret inn på kontorkjøkkenet med en samtidighet-bug.
4:08 Hver kontrakt får sin egen side, skrevet av en enkelt agent. Vilkår er sitert ordrett. Den forbedrede wikien støtter alle femtisju graderte fakta. Det er den lovede løsningen. Separert eierskap forhindrer overskriving, og nøyaktige sitater bevarer vilkårene. Begge endringene skjedde samtidig, så ingen får all æren. Hold viktige minner sporbare til deres kilder. Managed Agents' Dreams bevarer inndatalageret og produserer et separat utdata
4:32 du kan gjennomgå. Hvis du heller vil lese dette enn å høre meg si det, lander differansen i innboksen din hver morgen, gratis på the daily diff dot dev, lenke nedenfor.
Ville jeg stole på dette minnesystemet?
4:39 Så dagens dom er NEEDS REVIEW. Jeg ville brukt transkripsjonsbasert reparasjon fordi en vedvarende feil fortjener en vedvarende fiks. Jeg ville sjekket de endrede notatene og testet om wikien hjelper min faktiske oppgave. Anthropic's moteksempler viser hvor lett minnevedlikehold blir et annet prosjekt du nå må vedlikeholde. Og det var differansen for i dag. Jeg er Niko fra Axrisi. Flett ansvarlig.
Kilder
- The components of agent memory — Lance Martin; figures by Monika Tuchowska; Anthropic-reported evaluationsAnthropic
- Dreams — research preview, separate output store, billing and lifecycleClaude Platform documentation
- Claude Code memory — injected index boundaryClaude Code documentation
- Dreaming with a dynamic workflow — transcript staleness and caller controlClaude Cookbook
- Sleep-time Compute — April 2025 prior work, no replication of this article claimedKevin Lin and colleagues / arXiv
- Harvey LAB — tasks, documents, grading rubrics and version scopeHarvey AI
- Authentic Dario Amodei portrait — TechCrunch Disrupt 2023; cropped, background removed and resized; Anthropic identity only, no authorship, current reaction or endorsementTechCrunch / Wikimedia Commons
- Original TechCrunch portrait source — Dario Amodei at Disrupt 2023TechCrunch / Flickr
- Portrait licence — Creative Commons Attribution 2.0Creative Commons
- Two Buttons — Jake Clark, Imgflip template; commentary labels added; brief process satire, hosting is not a licence or legal clearance and grants no blanket reuseJake Clark / Imgflip
- Groundhog Day GIF — Bill Murray and Stephen Tobolowsky as Phil/Ned; @groundhogday; silent, resized and captioned narrator commentary; no present-day reaction or blanket reuse; hosting is not a licence or legal clearanceGroundhog Day / GIPHY
- Two Buttons origin attribution — Jake Clark, October 2014; secondary sourceSupermeme
- Groundhog Day source link supplied by the GIPHY uploaderGroundhog Day



