Claude 代理記憶:轉錄本支援的夢境和共享寫入器故障
在 Anthropic 報告的實驗中,一個錯誤的儲存地標讓 Claude 三次從同一個寶可夢懸崖掉下去。
在 Anthropic 報告的實驗中,一個錯誤的儲存地標讓 Claude 三次從同一個寶可夢懸崖掉下去。轉錄本支援的夢境糾正了筆記,而獨立的合約頁面和逐字記錄的條款則在另一項任務中找回了遺失的評分事實。
本影片重點
- 代理記憶在會話之間保留上下文;所述的修復是更改筆記而不是模型權重。
- 根據會話轉錄本檢查錯誤的筆記,有助於修正後的分支抵達華藍市。
- 單獨搜尋的評分標準為 53%;搜尋加上更大的 wiki 在 25 個關於 Stainless 文件的問題中達到 61%。
- 其他來源報告的法律任務顯示 wiki 沒有明顯的增益,或者 wiki 比原始文件更大。
- 合約專屬頁面、每個頁面一位作者和逐字記錄的條款找回了 57/57 個評分事實;這兩項更改同時進行測試。
問題與解答
夢境在代理記憶系統中改變了什麼?
夢境會檢閱先前的會話轉錄本,並重新組織後續會話可以讀取的儲存上下文。Anthropic 的研究將代理記憶定義為保留的上下文,不包括對模型權重的更改。周圍的軟體選擇何時運行該工作以及它接收哪些轉錄本。Managed Agents' Dreams API 處於研究預覽階段,並產生一個獨立的輸出儲存以供審查。
錯誤的記憶是如何讓 Claude 困在月見山的?
Claude 記錄的寶可夢中心位於月見山的錯誤一側,然後它離開時相信洞穴在它後面。Anthropic 報告說,一個單向懸崖將它帶回了較早的路線,而它的導航工具錯過了下降。根據原始轉錄本檢查儲存的筆記糾正了位置。糾正後的分支最終到達了華藍市。
連結的記憶 wiki 何時未能改善來源搜尋?
在一個報告的法律任務中,wiki 沒有顯示出明顯的增益,其中標準通常可以透過從單個文件檢索信息來滿足。Anthropic 還描述了一個單獨的任務,其 wiki 變得比原始文件更大。該文章的結果支持對表示進行任務特定評估,並將維護成本與任何回答效益一起考慮。
哪些寫作更改找回了遺失的合約事實?
每份合約都有自己的 wiki 頁面,由單一代理撰寫,條款逐字引用。Anthropic 的模擬收購任務隨後支持了所有 57 個評分事實,而共享表格版本則包含了 41 個。所有權和引用同時發生變化,因此測試無法隔離任何一種變化的貢獻。結果是一個基準成果,沒有普遍的法律準確性保證。
The Daily Diff 對轉錄本支援的記憶修復的判決是什麼?
The Daily Diff 的判決是 NEEDS REVIEW。Niko 會使用轉錄本支援的修復,檢查更改的筆記,並測試 wiki 是否有助於實際任務。Anthropic 自己的反例顯示,表示可能會增加工作而沒有明顯的益處。其食譜警告說,舊的轉錄本無法建立後續的外部更改,因此重要的更改事實仍然需要驗證。
翻譯文字稿
譯自英文原版旁白。可用的音訊和字幕由 YouTube 控制。
記憶為何讓 Claude 陷入困境?
0:00 給 Claude 一個記憶應該能阻止它重複犯錯。 Anthropic 觀察到一個錯誤的筆記讓它三次從同一個寶可夢懸崖掉下去。 在這段影片中,記憶如何困住 Claude? 什麼才是真正的修復方法? Anthropic 將這種修復稱為夢境。 額外的模型會話會重新檢視儲存的轉錄本並編輯記憶檔案。 它的合約測試甚至透過更改這些記憶的寫入方式,找回了所有遺失的事實。 記住這一點。
0:22 今天是 11 月 7 日星期六,這是 The Daily Diff。 代理記憶是在會話之間儲存的上下文。 模型的權重保持不變。 周圍的軟體決定何時執行清理以及它查看哪些轉錄本。 Managed Agents' Dreams 功能正在研究預覽中。 這篇文章不會為每個 Claude 用戶開啟夢境。 Anthropic 於週五發布了 Lance Martin 的文章。
Anthropic 實際測試了什麼?
0:41 今天 Hacker News 的討論中,人們正在爭論他們刪除哪些記憶。 當一個自信地錯誤的筆記存活到另一個會話時會發生什麼? 我們已經給幻覺一個文件櫃。 Claude 需要穿越月見山,使用附近的寶可夢中心作為地標。 它寫下建築物在東側, 即使它在西側。 它離開時相信洞穴已經在它後面了。 然後它走過一個單向的懸崖,進入它來的路線。
1:05 它的導航工具錯過了下降,所以 Claude 將失敗解釋為超出目標。 下一次嘗試從相同的錯誤假設開始。 持久性保留了錯誤。 在第三次墜落後,Claude 寫道它將停止而不是繼續循環。 研究人員的設定會自動告訴它繼續。 它回到一個較早的城鎮,那次運行結束時沒有到達華藍市。 即使機器人也希望這次會議結束。 研究人員對錯誤的記憶資料夾執行夢境。
夢境如何修復路線?
1:30 Claude 根據原始會話轉錄本檢查筆記, 發現位置錯誤,並將其重寫。 憑藉修正後的筆記,它重新進入月見山並最終到達華藍市。 這是這裡的有用結果。 儲存的聲明會在另一次嘗試之前與證據進行核對。 在一次運行中,Sonnet 3.7 在獲得一個徽章的同時累積了數百個檔案。 Fable 5 則保留了較小的集合並獲得了四個徽章。
1:50 不同的模型,各運行一次,因此檔案系統的貢獻無法單獨分離。 在 Hacker News 上,yfontana 表示他們刪除了幾乎所有自動記憶,因為筆記通常屬於當前任務。 那是一個用戶的經驗。 一旦你移動了,昨天的座標就是一個糟糕的指南針。 Anthropic 還在 Stainless 的內部文件上建立了一個連結 wiki。 Claude 在會話之間組織相關信息,
記憶 wiki 何時有用?
2:10 然後使用這些頁面回答問題。 當一個答案跨越多個文件時,這會有所幫助。 原始文件仍然可用於檢查地圖。 單獨搜尋,Claude 獲得了 評分標準的 53%。 搜尋加上更大的 wiki 達到了 61%。 這些是關於一家公司文件的 25 個問題。 額外的離線工作改進了該評估。
2:32 這篇文章沒有給我們建立 wiki 的總價, 所以請保持發票欄位開放。 夢境使用標準 API token 費率,作業可能需要幾分鐘到數小時。 Anthropic 表示連續檢查每個記憶可能不切實際。 您的代理的第二班仍然會計入您的信用卡。 同一篇文章還包括一個法律任務,其中 wiki 顯示對搜尋沒有明顯的增益。 另一個 wiki 比它摘要的文件還要大。 如果一個問題可以透過找到一段文字來回答,
wiki 何時沒有幫助?
2:56 那麼先建立一個百科全書可能是一種非常昂貴的使用查找按鈕的方式。 Claude Code 會自動載入其記憶索引中有限的起始部分,詳細筆記則保存在其他地方。 錯誤注入的指令會影響每個會話。 Anthropic 的食譜警告說,記憶的品質取決於轉錄本。 昨天的日誌無法驗證今天上午的更改。 現在是合約任務。 幾個代理為模擬收購建立了一個 wiki, 將條款寫入一個共享表格。
為何 16 個合約事實消失了?
3:23 最終的摘要包含 57 個評分事實中的 41 個。 16 個事實從合約到潤飾後的答案之間消失了。 這是一個相當重要的資訊遺失地點。 Anthropic 將失敗歸因於糟糕的摘要和代理互相覆寫工作。 遺失的條款從未安全地保留下來以供回答會話使用。 夢境讓 Claude 反思這些失敗, 提出不同的 wiki 指令,並重建。 修復一直追溯到記憶的寫入方式。
3:47 任何與同事編輯過相同文件的人都知道這種痛苦。 給每個參與者一個更大的大腦,他們仍然可以儲存到別人的工作上。 令人興奮的 AI 記憶問題 已經帶著並發錯誤 走進辦公室廚房。 每份合約都有自己的頁面,由單一代理撰寫。 條款逐字引用。 改進後的 wiki 支持所有 57 個評分事實。
4:08 這是承諾的修復。 獨立所有權防止覆蓋,精確引用保留條款。 這兩項更改同時發生,所以沒有任何一項獲得唯一功勞。 讓重要的記憶可以追溯到其來源。 Managed Agents' Dreams 保留輸入儲存並產生一個獨立的輸出供您審查。 如果您寧願閱讀這份內容而不是聽我說,那麼每天早上 The Daily Diff 都會免費寄到您的信箱,網址是 thedailydiff.dev,連結在下方。 因此,今天的判決是 NEEDS REVIEW。 我會使用轉錄本支援的修復,因為持續存在的錯誤值得持續的修復。
4:32 我會檢查更改的筆記,並測試 wiki 是否對我的實際任務有所幫助。 Anthropic 的反例顯示記憶維護很容易變成另一個您現在必須維護的專案。 這就是今天的 The Daily Diff。
我會相信這個記憶系統嗎?
4:39 我是 Axrisi 的 Niko。 負責合併。 Managed Agents' Dreams 保留輸入儲存並產生一個獨立的輸出供您審查。 如果您寧願閱讀這份內容而不是聽我說,那麼每天早上 The Daily Diff 都會免費寄到您的信箱,網址是 thedailydiff.dev,連結在下方。 因此,今天的判決是 NEEDS REVIEW。 我會使用轉錄本支援的修復,因為持續存在的錯誤值得持續的修復。 我會檢查更改的筆記,並測試 wiki 是否對我的實際任務有所幫助。 Anthropic 的反例顯示記憶維護很容易變成另一個您現在必須維護的專案。
來源
- The components of agent memory — Lance Martin; figures by Monika Tuchowska; Anthropic-reported evaluationsAnthropic
- Dreams — research preview, separate output store, billing and lifecycleClaude Platform documentation
- Claude Code memory — injected index boundaryClaude Code documentation
- Dreaming with a dynamic workflow — transcript staleness and caller controlClaude Cookbook
- Sleep-time Compute — April 2025 prior work, no replication of this article claimedKevin Lin and colleagues / arXiv
- Harvey LAB — tasks, documents, grading rubrics and version scopeHarvey AI
- Authentic Dario Amodei portrait — TechCrunch Disrupt 2023; cropped, background removed and resized; Anthropic identity only, no authorship, current reaction or endorsementTechCrunch / Wikimedia Commons
- Original TechCrunch portrait source — Dario Amodei at Disrupt 2023TechCrunch / Flickr
- Portrait licence — Creative Commons Attribution 2.0Creative Commons
- Two Buttons — Jake Clark, Imgflip template; commentary labels added; brief process satire, hosting is not a licence or legal clearance and grants no blanket reuseJake Clark / Imgflip
- Groundhog Day GIF — Bill Murray and Stephen Tobolowsky as Phil/Ned; @groundhogday; silent, resized and captioned narrator commentary; no present-day reaction or blanket reuse; hosting is not a licence or legal clearanceGroundhog Day / GIPHY
- Two Buttons origin attribution — Jake Clark, October 2014; secondary sourceSupermeme
- Groundhog Day source link supplied by the GIPHY uploaderGroundhog Day



