Claudeエージェントの記憶:トランスクリプトに基づく夢と共有ライターの失敗
Anthropicが報告した実験で、間違った保存されたランドマークがClaudeを同じポケモン崖から3回落としました。
Anthropicが報告した実験で、間違った保存されたランドマークがClaudeを同じポケモン崖から3回落としました。トランスクリプトに基づく夢はメモを修正し、別の契約ページと逐語的な用語は別のタスクで失われた評価済み事実を回復しました。
この動画の要点
- エージェントの記憶はセッション間でコンテキストを保持します。記述された修正はモデルの重みではなくメモを変更します。
- セッションのトランスクリプトと間違ったメモを照合することで、修正されたブランチはハナダシティに到達するのに役立ちました。
- 検索単独では基準の53%を達成しました。検索とより大きなWikiを組み合わせると、Stainlessのドキュメントに関する25の質問で61%に達しました。
- 他の情報源が報告した法的タスクでは、明確なWikiの利点がないか、Wikiが元のドキュメントよりも大きくなることが示されました。
- 契約固有のページ、ページごとの1人のライター、および逐語的な用語により、57/57の評価済み事実が回復されました。両方の変更は一緒にテストされました。
質疑応答
エージェントの記憶システムにおいて、「夢見」は何を変更しますか?
「夢見」は以前のセッションのトランスクリプトをレビューし、後のセッションが読み取ることができる保存されたコンテキストを再編成します。Anthropicの研究では、エージェントの記憶は保持されたコンテキストとして定義され、モデルの重みへの変更は除外されます。周囲のソフトウェアは、いつ作業が実行され、どのトランスクリプトを受け取るかを選択します。Managed Agents' Dreams APIは研究プレビュー版であり、レビュー用の個別の出力ストアを生成します。
間違った記憶がClaudeを月見山に閉じ込めたのはなぜですか?
Claudeはポケモンセンターを月見山の反対側に記録し、洞窟が後ろにあると信じて出発しました。Anthropicの報告によると、一方通行の崖がClaudeを以前のルートに戻し、そのナビゲーションツールは落下を見逃しました。保存されたメモと元のトランスクリプトを照合することで、場所が修正されました。修正されたブランチは最終的にハナダシティに到達しました。
リンクされた記憶Wikiがソース検索を改善できなかったのはいつですか?
ある報告された法的タスクでは、Wikiは明確な利点を示しませんでした。そのタスクでは、基準はしばしば単一の文書から情報を取得することで満たすことができました。Anthropicはまた、Wikiが元の文書よりも大きくなった別のタスクについても説明しています。この記事の結果は、表現のタスク固有の評価を支持し、保守コストと回答の利点を考慮に入れています。
失われた契約事実を回復した書き換えの変更は何ですか?
各契約は、単一のエージェントが作成した独自のWikiページを受け取り、用語は逐語的に引用されました。Anthropicのシミュレートされた買収タスクは、共有テーブルバージョンが41の事実を含んだ後、57の評価済み事実すべてをサポートしました。所有権と引用は一緒に変更されたため、どちらの変更の貢献も分離できません。結果はベンチマークの結果であり、普遍的な法的正確性の保証はありません。
トランスクリプトに基づく記憶修正に関するThe Daily Diffの評決は何でしたか?
The Daily Diffの評決は「要レビュー」でした。Nikoはトランスクリプトに基づく修正を使用し、変更されたメモを検査し、Wikiが実際のタスクに役立つかどうかをテストします。Anthropic自身の反例は、表現が明確な利点なしに作業を追加する可能性があることを示しています。そのクックブックは、古いトランスクリプトが後の外部の変更を確立できないことを警告しているため、重要な変更事実には依然として検証が必要です。
翻訳されたトランスクリプト
オリジナルの英語ナレーションから翻訳されています。利用可能なオーディオとキャプションはYouTubeによって管理されています。
なぜ記憶はClaudeを閉じ込めたのか?
0:00 Claudeに記憶を与えることで、間違いを繰り返すのを防ぐはずです。 Anthropicは、間違ったメモがClaudeを同じポケモン崖から3回落とすのを見ました。 このビデオでは、記憶はClaudeをどのように閉じ込めるのでしょうか? そして、実際にそれを修正するものは何でしょうか? Anthropicは修正を「夢見る」と呼んでいます。 追加のモデルセッションは、保存されたトランスクリプトを再訪し、記憶ファイルを編集します。 その契約テストでは、記憶の書き込み方法を変更することで、失われたすべての事実を回復することさえできました。 その考えを覚えておいてください。
0:22 11月7日土曜日、The Daily Diffです。 エージェントの記憶とは、セッション間で保存されるコンテキストのことです。 モデルの重みは変更されません。 周囲のソフトウェアが、いつクリーンアップを実行し、どのトランスクリプトを見るかを決定します。 Managed Agents' Dreams機能は研究プレビュー版です。 この記事は、すべてのClaudeユーザーに夢を有効にするものではありません。 Anthropicは金曜日にランス・マーティンの記事を公開しました。
Anthropicが実際にテストしたことは何か?
0:41 今日のHacker Newsの議論では、人々がどの記憶を削除するかについて議論しています。 自信を持って間違ったメモが別のセッションに持ち越されるとどうなるでしょうか? 我々は幻覚に書類棚を与えました。 Claudeは、近くのポケモンセンターをランドマークとして、月見山を渡る必要があります。 建物が東側にあると書き込みますが、実際は西側です。 洞窟はすでに後ろにあると信じて出発します。 そして、一方通行の崖を歩いて、来た道に戻ってしまいます。 ナビゲーションツールは落下を見逃し、Claudeは失敗を「行き過ぎた」と説明します。
1:05 次の試行は、同じ間違った仮定から始まります。 永続性によりバグが保存されています。 3回目の落下後、Claudeはループし続けるのではなく止まるつもりだと書きます。 研究者の設定は、自動的に続行するように指示します。 前の町に戻り、その実行はハナダシティに到達せずに終了します。 ボットでさえ、この会議を終わらせたいと思っています。 研究者は、欠陥のあるメモリフォルダーで「夢見る」を実行します。 Claudeは元のセッションのトランスクリプトとメモを照合し、場所のエラーを検出し、それを書き直します。
夢はどのようにルートを修正したのか?
1:30 修正されたメモを使って、月見山に再突入し、最終的にハナダシティに到達します。 それがここでの有用な結果です。 保存された主張は、別の試行の前に証拠と照合されます。 ある実行では、ソネット3.7は1つのバッジを獲得しながら何百ものファイルを蓄積しました。 フェイブル5は、より少ないコレクションを保持し、4つを獲得しました。 異なるモデル、それぞれ1回の実行であるため、ファイルシステムの貢献を分離することはできません。 Hacker Newsで、yfontanaは、メモが通常現在のタスクに属するため、ほとんどすべての自動記憶を削除すると言っています。 それはあるユーザーの経験です。
1:50 昨日座標は、一度移動してしまうと、ひどい羅針盤になります。 Anthropicはまた、Stainlessの内部文書の上にリンクされたWikiを構築しました。 Claudeはセッション間で関連情報を整理し、それらのページを使用して質問に答えます。 これは、答えがいくつかのドキュメントにまたがる場合に役立ちます。 元のファイルはマップを確認するために利用可能なままです。 検索単独では、Claudeは評価された基準の53%を達成しました。
いつ記憶Wikiは役立つのか?
2:10 検索とより大きなWikiを組み合わせると61%に達しました。 これらは、ある会社の文書に関する25の質問でした。 追加のオフライン作業により、その評価が改善されました。 記事はWiki構築の総費用を教えてくれないので、請求書欄は開いたままにしておいてください。 Dreamsは標準APIトークンレートを使用し、ジョブには数分から数時間かかる場合があります。 Anthropicは、すべての記憶を継続的にチェックすることは非現実的である可能性があると述べています。 エージェントの2番目のシフトは、引き続きクレジットカードに請求されます。 同じ記事には、Wikiが検索に対して明確な利点を示さなかった法的タスクが含まれています。
2:32 別のWikiは、要約した文書よりも大きくなりました。 質問が1つの段落を見つけることで答えられる場合、最初に百科事典を構築することは、「検索」ボタンを使用するのに驚くほど高価な方法になる可能性があります。 Claude Codeは、詳細なメモは別の場所に保持し、メモリインデックスの限られた開口チャンクを自動的にロードします。 誤った注入された指示は、すべてのセッションに影響を与える可能性があります。 Anthropicのクックブックは、記憶はトランスクリプトと同じくらい良いと警告しています。 昨日のログは今朝の変更を検証できません。 次に契約タスクです。 いくつかのエージェントがシミュレートされた買収のためにWikiを構築し、条項を1つの共有テーブルに書き込みます。
いつWikiは何も追加しないのか?
2:56 結果のブリーフには、評価された57の事実のうち41が含まれています。 16の事実が、契約と洗練された回答の間のどこかで消えてしまいました。 それは情報を失うにはかなり重要な場所です。 Anthropicは、失敗の原因を悪い要約とエージェントが互いの作業を上書きしたことにたどります。 不足している条項は、回答セッションのために安全に保存されることはありませんでした。 夢見はClaudeにこれらの失敗を反省させ、異なるWikiの指示を提案し、再構築させます。 修正は、記憶がどのように書かれているかまで遡ります。 同僚と同じドキュメントを編集したことがある人なら、この苦痛を知っているでしょう。
なぜ16の契約事実が消えたのか?
3:23 すべての参加者により大きな脳を与えても、彼らはまだ他の誰かの作業を上書きして保存することができます。 エキサイティングなAI記憶の問題は、オフィスのあるキッチンに同時実行バグをまとってさまよい込んできました。 各契約は、単一のエージェントによって書かれた独自のページを取得します。 用語は逐語的に引用されます。 改良されたWikiは、57の評価済み事実すべてをサポートします。 それが約束された修正です。 個別の所有権は上書きを防ぎ、正確な引用は条項を保持します。 両方の変更が同時に行われたため、どちらも単独で功績を得ることはできません。
3:47 重要な記憶は、その情報源に追跡できるようにしてください。 Managed Agents' Dreamsは入力ストアを保持し、レビューできる個別の出力を作成します。 私がこれを話すのを聞くのではなく読みたい場合は、diffは毎日朝あなたの受信トレイに無料で届きます。daily diff dot dev、リンクは以下にあります。 したがって、今日の評決は「要レビュー」です。 私はトランスクリプトに基づく修正を使用します。なぜなら、永続的な間違いには永続的な修正がふさわしいからです。 変更されたメモをチェックし、Wikiが実際のタスクに役立つかどうかをテストします。 Anthropicの反例は、記憶の維持がいかに簡単に別の維持しなければならないプロジェクトになるかを示しています。 それが今日のdiffです。
4:08 AxrisiのNikoです。 責任を持ってマージしてください。 エージェントに記憶を与えることは、間違いを繰り返さないようにするはずです。 Anthropicは、間違ったメモがClaudeを同じポケモン崖から3回落とすのを見ました。 このビデオでは、記憶はClaudeをどのように閉じ込めるのでしょうか? そして、実際にそれを修正するものは何でしょうか? Anthropicは修正を「夢見る」と呼んでいます。 追加のモデルセッションは、保存されたトランスクリプトを再訪し、記憶ファイルを編集します。
4:32 その契約テストでは、記憶の書き込み方法を変更することで、失われたすべての事実を回復することさえできました。 その考えを覚えておいてください。 土曜日、11月7日、これはThe Daily Diffです。
この記憶システムを信頼するか?
4:39 エージェントの記憶は、セッション間で保存されるコンテキストです。 モデルの重みは変更されません。 周囲のソフトウェアが、いつクリーンアップを実行し、どのトランスクリプトを見るかを決定します。 Managed Agents' Dreams機能は研究プレビュー版です。 この記事は、すべてのClaudeユーザーに夢を有効にするものではありません。 Anthropicは金曜日にランス・マーティンの記事を公開しました。 今日のHacker Newsの議論では、人々がどの記憶を削除するかについて議論しています。 自信を持って間違ったメモが別のセッションに持ち越されるとどうなるでしょうか?
情報源
- The components of agent memory — Lance Martin; figures by Monika Tuchowska; Anthropic-reported evaluationsAnthropic
- Dreams — research preview, separate output store, billing and lifecycleClaude Platform documentation
- Claude Code memory — injected index boundaryClaude Code documentation
- Dreaming with a dynamic workflow — transcript staleness and caller controlClaude Cookbook
- Sleep-time Compute — April 2025 prior work, no replication of this article claimedKevin Lin and colleagues / arXiv
- Harvey LAB — tasks, documents, grading rubrics and version scopeHarvey AI
- Authentic Dario Amodei portrait — TechCrunch Disrupt 2023; cropped, background removed and resized; Anthropic identity only, no authorship, current reaction or endorsementTechCrunch / Wikimedia Commons
- Original TechCrunch portrait source — Dario Amodei at Disrupt 2023TechCrunch / Flickr
- Portrait licence — Creative Commons Attribution 2.0Creative Commons
- Two Buttons — Jake Clark, Imgflip template; commentary labels added; brief process satire, hosting is not a licence or legal clearance and grants no blanket reuseJake Clark / Imgflip
- Groundhog Day GIF — Bill Murray and Stephen Tobolowsky as Phil/Ned; @groundhogday; silent, resized and captioned narrator commentary; no present-day reaction or blanket reuse; hosting is not a licence or legal clearanceGroundhog Day / GIPHY
- Two Buttons origin attribution — Jake Clark, October 2014; secondary sourceSupermeme
- Groundhog Day source link supplied by the GIPHY uploaderGroundhog Day



