+− THE DAILY DIFFdev & AI news
NEEDS REVIEW

Claude agent memory: transcript-backed dreaming and shared-writer failures

En felaktigt sparad "landmärkepost" gjorde att Claude föll nedför samma Pokémon-kant tre gånger i Anthropic:s rapporterade experiment.

Want to see our stories first on Google? Add us to your preferred sources — it helps us grow.

En felaktigt sparad "landmärkepost" gjorde att Claude föll nedför samma Pokémon-kant tre gånger i Anthropic:s rapporterade experiment. Transkriptionsstödd dröm "dröm" korrigerade anteckningen, medan separata kontraktsidor och exakta villkor återställde saknade graderade fakta i en annan uppgift.

Läs den skrivna upplagan (engelska) ↗

Vad den här videon täcker

  • Agentminne bibehåller kontext mellan sessioner; den beskrivna reparationen ändrar anteckningar snarare än modellvikter.
  • Att kontrollera den felaktiga anteckningen mot sessionsavskriften hjälpte den korrigerade grenen att nå Cerulean City.
  • Enbart sökning fick 53 % av kriterierna; sökning plus den större wikin nådde 61 % på 25 frågor om Stainless-dokument.
  • Andra källrapporterade juridiska uppgifter visade ingen tydlig wiki-fördel eller en wiki som var större än originaldokumenten.
  • Kontraktsspecifika sidor, en skribent per sida och exakta villkor återställde 57/57 graderade fakta; båda ändringarna testades tillsammans.

Frågor och svar

Vad förändrar "drömmen" i ett agentminnessystem?

"Dröm" granskar tidigare sessionsavskrifter och omorganiserar sparad kontext som senare sessioner kan läsa. Anthropic:s forskning definierar agentminne som bibehållen kontext och utesluter ändringar i modellvikter. Den omgivande programvaran väljer när arbetet körs och vilka avskrifter den får. API:et för "Managed Agents' Dreams" är i forskningsförhandsvisning och producerar ett separat utmatningslager för granskning.

Titta på den här delen 0:41 · Anthropic · Claude Platform documentation

Hur höll ett felaktigt minne Claude fast i Mount Moon?

Claude registrerade Pokémon Center på fel sida av Mount Moon, och trodde sedan att grottan låg bakom den. Anthropic rapporterar att en enkelriktad avsats ledde den tillbaka till en tidigare rutt, medan dess navigeringsverktyg missade fallet. Att kontrollera den sparade anteckningen mot den ursprungliga avskriften korrigerade platsen. Den korrigerade grenen nådde så småningom Cerulean City.

Titta på den här delen 1:30 · Anthropic

När misslyckades en länkad minneswiki med att förbättra källsökning?

En wiki visade ingen tydlig vinst i en rapporterad juridisk uppgift där kriterier ofta kunde uppfyllas genom att hämta information från ett enda dokument. Anthropic beskriver också en separat uppgift vars wiki blev större än originaldokumenten. Artikelns resultat stöder uppgiftsspecifik utvärdering av representationen, där underhållskostnader beaktas tillsammans med eventuell svarsfördel.

Titta på den här delen 2:53 · Anthropic

Vilka skrivförändringar återställde de saknade kontraktsfakta?

Varje kontrakt fick en egen wiki-sida med en enda agent som skrev den, och villkoren citerades ordagrant. Anthropic:s simulerade förvärvsuppgift stödde sedan alla femtiosju graderade fakta, efter att den delade tabellversionen inkluderade fyrtioett. Ägarskap och citering ändrades tillsammans, så testet kan inte isolera någons bidrag. Resultatet är ett benchmark-resultat utan någon universell juridisk noggrannhetsgaranti.

Titta på den här delen 3:23 · Anthropic · Harvey AI

Vad var The Daily Diffs dom över transkriptionsstödd minnesreparation?

The Daily Diffs dom var NEEDS REVIEW. Niko skulle använda transkriptionsstödd reparation, inspektera de ändrade anteckningarna och testa om en wiki hjälper den aktuella uppgiften. Anthropic:s egna motexempel visar att en representation kan lägga till arbete utan en tydlig fördel. Dess kokbok varnar för att gamla transkript inte kan fastställa senare externa ändringar, så viktiga föränderliga fakta behöver fortfarande verifieras.

Titta på den här delen 4:39 · Anthropic · Claude Cookbook

Översatt transkription

Översatt från den ursprungliga engelska berättelsen. Tillgängligt ljud och undertexter styrs av YouTube.

Varför höll minnet Claude fast?

0:00 Att ge Claude ett minne borde hindra den från att upprepa misstag. Anthropic såg en felaktig anteckning skicka den över samma Pokémon-kant tre gånger. I den här videon, hur fångar minnet Claude? Och vad fixar det egentligen? Anthropic kallar reparationen för "dröm". Extra modellsessioner återbesöker lagrade transkript och redigerar minnesfiler. Dess kontraktstest återställde till och med varje saknat faktum genom att ändra hur dessa minnen skrevs.

0:22 Håll kvar den tanken. Det är lördag, den sjunde november, och detta är The Daily Diff. Agentminne är kontext som sparas mellan sessioner. Modellens vikter förblir oförändrade. Den omgivande programvaran bestämmer när rensning sker och vilka transkript den ser. Funktionen "Managed Agents' Dreams" är i forskningsförhandsvisning. Denna artikel aktiverar inte "drömmar" för varje Claude-användare.

Vad testade Anthropic egentligen?

0:41 Anthropic publicerade Lance Martins artikel på fredagen. Dagens diskussion på Hacker News handlar om vilka minnen de raderar. Vad händer när en säkert felaktig anteckning överlever till en annan session? Vi har gett hallucinationen ett arkivskåp. Claude behöver korsa Mount Moon, med ett närliggande Pokémon Center som landmärke. Den skriver ner att byggnaden ligger på östra sidan, trots att den ligger på västra. Den tror att grottan redan ligger bakom den.

1:05 Sedan går den över en enkelriktad avsats till den rutt den kom ifrån. Dess navigeringsverktyg missar fallet, så Claude förklarar felet som att den "skjutit över målet". Nästa försök börjar med samma felaktiga antagande. Uthålligheten har bevarat buggen. Efter det tredje fallet skriver Claude att den ska sluta snarare än att fortsätta slingra. Forskarnas upplägg säger automatiskt åt den att fortsätta. Den återvänder till en tidigare stad, och den körningen slutar utan att nå Cerulean City. Till och med boten vill att detta möte ska ta slut.

Hur fixade "drömmen" rutten?

1:30 Forskarna kör "dröm" på den felaktiga minnesmappen. Claude kontrollerar anteckningen mot det ursprungliga sessionsavskriften, hittar platsfelet och skriver om det. Med den korrigerade anteckningen återgår den till Mount Moon och når så småningom Cerulean. Det är det användbara resultatet här. Ett sparat påstående kontrolleras mot bevis innan ett nytt försök. I en körning samlade Sonnet 3.7 hundratals filer samtidigt som den tjänade

1:50 ett märke. Fable 5 behöll en mindre samling och tjänade fyra. Olika modeller, en körning vardera, så arkivsystemets bidrag kan inte isoleras. På Hacker News säger yfontana att de raderar nästan alla automatiska minnen eftersom anteckningarna oftast tillhör den aktuella uppgiften. Det är en användares erfarenhet. Gårdagens koordinater blir en dålig kompass när du har flyttat på dig.

När hjälper en minneswiki?

2:10 Anthropic byggde också en länkad wiki över Stainless interna dokument. Claude organiserar relaterad information över sessioner, och använder sedan dessa sidor för att svara på frågor. Detta kan hjälpa när ett svar sträcker sig över flera dokument. Originalfilerna förblir tillgängliga för att kontrollera kartan. Med enbart sökning fick Claude 53 procent av de graderade kriterierna. Sökning plus den större wikin nådde 61 procent.

2:32 Det var tjugofem frågor om ett företags dokument. Extra offline-arbete förbättrade den utvärderingen. Artikeln ger oss inget totalpris för att bygga wikin, så håll fakturakolumnen öppen. "Dreams" använder vanliga API-tokenpriser, och jobb kan ta minuter till timmar. Anthropic säger att kontinuerlig kontroll av varje minne kan vara opraktiskt. Din agents andra skift går fortfarande på ditt kreditkort. Samma artikel innehåller en juridisk uppgift där wikin inte visade någon tydlig fördel jämfört med

När tillför wikin ingenting?

2:56 sökning. En annan wiki blev större än de dokument den sammanfattade. Om en fråga kan besvaras genom att hitta en enda passage, kan det vara ett anmärkningsvärt dyrt sätt att använda "hitta"-knappen att först bygga ett uppslagsverk. Claude Code laddar automatiskt en begränsad inledande del av sitt minnesindex, med detaljerade anteckningar förvarade någon annanstans. En felaktigt injicerad instruktion kan påverka varje session. Anthropic:s kokbok varnar för att minnet bara är så bra som transkriptionerna. Gårdagens logg kan inte verifiera denna morgons ändringar.

Varför försvann sexton kontraktsfakta?

3:23 Nu till kontraktsuppgiften. Flera agenter bygger en wiki för ett simulerat förvärv, och skriver villkor i en delad tabell. Den resulterande sammanfattningen inkluderar fyrtioett av femtiosju graderade fakta. Sexton fakta har försvunnit någonstans mellan kontrakten och det polerade svaret. Det är en ganska viktig plats att förlora information. Anthropic spårar felet till dåliga sammanfattningar och agenter som skriver över varandras arbete. De saknade villkoren bevarades aldrig säkert för den svarande

3:47 sessionen. "Dröm" låter Claude reflektera över dessa misslyckanden, föreslå olika wiki-instruktioner och bygga om. Reparationen når hela vägen tillbaka till hur minnet skrivs. Alla som har redigerat samma dokument med kollegor känner till denna smärta. Ge varje deltagare en större hjärna, och de kan fortfarande spara över någon annans arbete. Det spännande AI-minnesproblemet har vandrat in i kontorskök med en samtidighetsproblem bärande en "concurrency bug".

4:08 Varje kontrakt får sin egen sida, skriven av en enda agent. Villkoren citeras ordagrant. Den förbättrade wikin stöder alla femtiosju graderade fakta. Det är den utlovade lösningen. Separat ägarskap förhindrar överskrivning, och exakta citat bevarar villkoren. Båda ändringarna skedde samtidigt, så ingen får ensam ära. Håll viktiga minnen spårbara till sina källor. "Managed Agents' Dreams" bevarar inmatningslagret och producerar en separat utmatning

4:32 som du kan granska. Om du hellre läser detta än hör mig säga det, landar "the diff" i din inkorg varje morgon, gratis på thedailydiff.dev, länk nedan.

Skulle jag lita på detta minnessystem?

4:39 Så dagens dom är NEEDS REVIEW. Jag skulle använda transkriptionsstödd reparation eftersom ett ihållande misstag förtjänar en ihållande fix. Jag skulle kontrollera de ändrade anteckningarna och testa om wikin hjälper min aktuella uppgift. Anthropic:s motexempel visar hur lätt minnesunderhåll blir ytterligare ett projekt som du nu måste underhålla. Och det var dagens "diff". Jag är Niko från Axrisi. Sammanfoga ansvarsfullt.

Källor

  1. The components of agent memory — Lance Martin; figures by Monika Tuchowska; Anthropic-reported evaluationsAnthropic
  2. Dreams — research preview, separate output store, billing and lifecycleClaude Platform documentation
  3. Claude Code memory — injected index boundaryClaude Code documentation
  4. Dreaming with a dynamic workflow — transcript staleness and caller controlClaude Cookbook
  5. Sleep-time Compute — April 2025 prior work, no replication of this article claimedKevin Lin and colleagues / arXiv
  6. Harvey LAB — tasks, documents, grading rubrics and version scopeHarvey AI
  7. Authentic Dario Amodei portrait — TechCrunch Disrupt 2023; cropped, background removed and resized; Anthropic identity only, no authorship, current reaction or endorsementTechCrunch / Wikimedia Commons
  8. Original TechCrunch portrait source — Dario Amodei at Disrupt 2023TechCrunch / Flickr
  9. Portrait licence — Creative Commons Attribution 2.0Creative Commons
  10. Two Buttons — Jake Clark, Imgflip template; commentary labels added; brief process satire, hosting is not a licence or legal clearance and grants no blanket reuseJake Clark / Imgflip
  11. Groundhog Day GIF — Bill Murray and Stephen Tobolowsky as Phil/Ned; @groundhogday; silent, resized and captioned narrator commentary; no present-day reaction or blanket reuse; hosting is not a licence or legal clearanceGroundhog Day / GIPHY
  12. Two Buttons origin attribution — Jake Clark, October 2014; secondary sourceSupermeme
  13. Groundhog Day source link supplied by the GIPHY uploaderGroundhog Day

Niko from Axrisi

Nikoloz Turazashvili · Vexrail · Axrisi

LinkedIn · dev.to · GitHub · X · Substack

Relaterade videor