Пам'ять агента Claude: виправлення "мрій" на основі стенограм та помилки спільних авторів
Неправильно збережений орієнтир тричі відправляв Claude через той самий Pokémon-уступ у зафіксованому експерименті Anthropic.
Неправильно збережений орієнтир тричі відправляв Claude через той самий Pokémon-уступ у зафіксованому експерименті Anthropic. "Мрії" на основі стенограм виправили примітку, тоді як окремі сторінки контрактів і дослівні терміни відновили відсутні оцінені факти в іншому завданні.
Читати письмову версію (англійською) ↗
Що охоплює це відео
- Пам'ять агента зберігає контекст між сеансами; описаний ремонт змінює примітки, а не ваги моделі.
- Перевірка неправильної примітки за стенограмою сесії допомогла виправленій гілці дістатися до міста Церулін.
- Лише пошук набрав 53% критеріїв; пошук плюс більша вікі досягли 61% на 25 запитань про документи Stainless.
- Інші юридичні завдання, зафіксовані в джерелах, не показали чіткого покращення за допомогою вікі або вікі, яка була більшою за оригінальні документи.
- Сторінки, специфічні для контрактів, один автор на сторінку та дослівні терміни відновили 57/57 оцінених фактів; обидві зміни були протестовані разом.
Запитання та відповіді
Що змінює "мрія" в системі пам'яті агента?
Механізм "мрій" переглядає стенограми попередніх сесій та реорганізує збережений контекст, який можуть читати наступні сесії. Дослідження Anthropic визначає пам'ять агента як збережений контекст і виключає зміни ваг моделі. Навколишнє програмне забезпечення обирає, коли виконується робота та які стенограми воно отримує. API Managed Agents' Dreams знаходиться на стадії попереднього дослідження та створює окреме сховище вихідних даних для перегляду.
Як неправильна пам'ять тримала Claude в пастці на Місячній Горі?
Claude записав Pokémon-центр на неправильній стороні Місячної Гори, а потім виїхав, вважаючи, що печера позаду. Anthropic повідомляє, що односторонній уступ повернув його на попередній маршрут, тоді як його навігаційний інструмент пропустив падіння. Перевірка збереженої примітки за оригінальною стенограмою виправила місцезнаходження. Виправлена гілка врешті-решт досягла міста Церулін.
Коли пов'язана вікі пам'яті не змогла покращити пошук джерел?
Вікі не показала чіткого покращення в одному звітньому юридичному завданні, де критерії часто могли бути задоволені шляхом отримання інформації з одного документа. Anthropic також описує окреме завдання, вікі якого стала більшою за оригінальні документи. Результати статті підтримують оцінку представлення для конкретних завдань, з урахуванням витрат на підтримку разом з будь-якою користю для відповіді.
Які зміни в написанні відновили відсутні факти контракту?
Кожен контракт отримав власну сторінку вікі, написану одним агентом, а терміни були цитовані дослівно. Завдання імітованого поглинання Anthropic потім підтримало всі п'ятдесят сім оцінених фактів, після того, як версія спільної таблиці включала сорок один. Власність та цитування змінилися разом, тому тест не може ізолювати внесок жодної зі змін. Результат є бенчмарком без універсальної гарантії юридичної точності.
Який був вердикт The Daily Diff щодо ремонту пам'яті на основі стенограм?
Вердикт The Daily Diff був ПОТРЕБУЄ ПЕРЕГЛЯДУ. Ніко використовував би ремонт на основі стенограм, перевірив би змінені нотатки та перевірив, чи допомагає вікі актуальному завданню. Власні контрприклади Anthropic показують, що представлення може додавати роботу без чіткої користі. Їхня кулінарна книга попереджає, що старі стенограми не можуть підтвердити пізніші зовнішні зміни, тому важливі факти, що змінюються, все ще потребують перевірки.
Перекладена стенограма
Перекладено з оригінальної англійської розповіді. Доступне аудіо та субтитри контролюються YouTube.
Чому пам'ять тримала Claude в пастці?
0:00 Надання Claude пам'яті має зупинити повторення помилок. Anthropic спостерігала, як одна неправильна примітка тричі відправляла його через той самий Pokémon-уступ. У цьому відео: як пам'ять тримає Claude в пастці? І що насправді це виправляє? Anthropic називає ремонт "мріями". Додаткові сесії моделі переглядають збережені стенограми та редагують файли пам'яті. Її тест контрактів навіть відновив усі відсутні факти, змінивши спосіб написання цих спогадів. Зачекайте.
0:22 Зачекайте. Сьогодні субота, сьоме листопада, і це The Daily Diff. Пам'ять агента – це контекст, збережений між сеансами. Ваги моделі залишаються незмінними. Навколишнє програмне забезпечення вирішує, коли запускається очищення і які стенограми воно бачить. Функція Managed Agents' Dreams знаходиться на стадії попереднього дослідження. Ця стаття не вмикає "мрії" для кожного користувача Claude.
Що Anthropic насправді тестувала?
0:41 Anthropic опублікувала статтю Ланса Мартіна у п'ятницю. Сьогоднішня дискусія на Hacker News показує, як люди сперечаються про те, які спогади вони видаляють. Що відбувається, коли впевнено неправильна примітка зберігається до іншої сесії? Ми дали галюцинації картотеку. Claude потрібно перетнути Місячну Гору, використовуючи сусідній Pokémon-центр як орієнтир. Він записує, що будівля знаходиться на східній стороні, хоча вона знаходиться на західній. Він виїжджає, вважаючи, що печера вже позаду.
1:05 Потім він переходить через односторонній уступ на маршрут, з якого він прийшов. Його навігаційний інструмент пропускає падіння, тому Claude пояснює збій як перевищення. Наступна спроба починається з тієї ж неправильної припущення. Наполегливість зберегла помилку. Після третього падіння Claude пише, що він збирається зупинитися, а не продовжувати цикл. Налаштування дослідників автоматично наказує йому продовжувати. Він повертається до попереднього міста, і цей прогін закінчується, не досягнувши міста Церулін. Навіть бот хоче, щоб ця зустріч закінчилася.
Як "мрії" виправили маршрут?
1:30 Дослідники запускають "мрії" на папці з несправними спогадами. Claude звіряє примітку з оригінальною стенограмою сесії, виявляє помилку в місцезнаходженні та переписує її. З виправленою приміткою він знову входить на Місячну Гору і врешті-решт досягає Церуліна. Це корисний результат. Збережене твердження перевіряється на відповідність доказам перед наступною спробою. В одному прогоні Sonnet 3.7 накопичив сотні файлів, заробляючи
1:50 один значок. Fable 5 зберігав меншу колекцію та заробив чотири. Різні моделі, по одному запуску кожна, тому внесок системи подачі документів не може бути ізольований. На Hacker News yfontana каже, що вони видаляють майже всі автоматичні спогади, тому що нотатки зазвичай належать до поточного завдання. Це досвід одного користувача. Вчорашні координати є поганим компасом, коли ви вже рухалися.
Коли вікі пам'яті допомагає?
2:10 Anthropic також створила пов'язану вікі на основі внутрішніх документів Stainless. Claude організовує пов'язану інформацію між сеансами, потім використовує ці сторінки для відповіді на запитання. Це може допомогти, коли відповідь охоплює кілька документів. Оригінальні файли залишаються доступними для перевірки карти. Лише за допомогою пошуку Claude набрав п'ятдесят три відсотки оцінених критеріїв. Пошук плюс більша вікі досягли шістдесяти одного відсотка.
2:32 Це було двадцять п'ять запитань про документи однієї компанії. Додаткова офлайн-робота покращила цю оцінку. Стаття не надає нам загальної ціни на створення вікі, тому залиште стовпець рахунку-фактури відкритим. Dreams використовує стандартні тарифи токенів API, а завдання можуть займати від хвилин до годин. Anthropic стверджує, що постійна перевірка кожної пам'яті може бути непрактичною. Друга зміна вашого агента все одно йде за ваш рахунок. Та сама стаття включає юридичне завдання, де вікі не показала чіткої переваги над
Коли вікі нічого не додає?
2:56 пошуком. Інша вікі зросла більше, ніж документи, які вона узагальнювала. Якщо на запитання можна відповісти, знайшовши один уривок, побудова енциклопедії спочатку може бути надзвичайно дорогим способом використання кнопки "знайти". Claude Code автоматично завантажує обмежений початковий фрагмент свого індексу пам'яті, з детальними нотатками, що зберігаються в іншому місці. Неправильна введена інструкція може вплинути на кожен сеанс. Кулінарна книга Anthropic попереджає, що пам'ять настільки хороша, наскільки хороші стенограми. Вчорашній журнал не може підтвердити сьогоднішні зміни.
Чому зникли шістнадцять фактів контракту?
3:23 Тепер до завдання з контрактом. Кілька агентів створюють вікі для імітованого поглинання, записуючи умови в одну спільну таблицю. Отриманий звіт включає сорок один із п'ятдесяти семи оцінених фактів. Шістнадцять фактів зникли десь між контрактами та відшліфованою відповіддю. Це досить важливе місце, щоб втратити інформацію. Anthropic простежує причину збою до поганих резюме та агентів, які перезаписують роботу один одного. Відсутні терміни ніколи не були безпечно збережені для сесії відповіді.
3:47 "Мрії" дозволяють Claude розмірковувати над цими збоями, пропонувати різні інструкції для вікі та перебудовувати. Ремонт сягає аж до того, як записується пам'ять. Кожен, хто редагував той самий документ з колегами, знає цей біль. Дайте кожному учаснику більший мозок, і вони все одно можуть зберегти свою роботу поверх чужої роботи. Захоплююча проблема пам'яті ШІ заблукала на офісну кухню в одязі помилки паралелізму.
4:08 Кожен контракт отримує власну сторінку, написану одним агентом. Терміни цитуються дослівно. Покращена вікі підтримує всі п'ятдесят сім оцінених фактів. Це обіцяне виправлення. Окреме володіння запобігає знищенню, а точні цитати зберігають терміни. Обидві зміни відбулися разом, тому жодна не отримує одноосібної заслуги. Зберігайте важливі спогади, які можна відстежити до їхніх джерел. Managed Agents' Dreams зберігає сховище вхідних даних та створює окремий вихідний результат,
4:32 який ви можете переглянути. Якщо ви краще прочитаєте це, ніж почуєте від мене, "diff" надходить у вашу поштову скриньку щоранку, безкоштовно на thedailydiff.dev, посилання нижче.
Чи довіряв би я цій системі пам'яті?
4:39 Отже, сьогоднішній вердикт – ПОТРЕБУЄ ПЕРЕГЛЯДУ. Я б використовував ремонт на основі стенограм, тому що стійка помилка заслуговує на стійке виправлення. Я б перевірив змінені нотатки та перевірив, чи допомагає вікі моєму актуальному завданню. Контрприклади Anthropic показують, наскільки легко підтримка пам'яті стає ще одним проектом, який вам тепер потрібно підтримувати. І це "diff" на сьогодні. Я Ніко з Axrisi. Зливайте відповідально.
Джерела
- The components of agent memory — Lance Martin; figures by Monika Tuchowska; Anthropic-reported evaluationsAnthropic
- Dreams — research preview, separate output store, billing and lifecycleClaude Platform documentation
- Claude Code memory — injected index boundaryClaude Code documentation
- Dreaming with a dynamic workflow — transcript staleness and caller controlClaude Cookbook
- Sleep-time Compute — April 2025 prior work, no replication of this article claimedKevin Lin and colleagues / arXiv
- Harvey LAB — tasks, documents, grading rubrics and version scopeHarvey AI
- Authentic Dario Amodei portrait — TechCrunch Disrupt 2023; cropped, background removed and resized; Anthropic identity only, no authorship, current reaction or endorsementTechCrunch / Wikimedia Commons
- Original TechCrunch portrait source — Dario Amodei at Disrupt 2023TechCrunch / Flickr
- Portrait licence — Creative Commons Attribution 2.0Creative Commons
- Two Buttons — Jake Clark, Imgflip template; commentary labels added; brief process satire, hosting is not a licence or legal clearance and grants no blanket reuseJake Clark / Imgflip
- Groundhog Day GIF — Bill Murray and Stephen Tobolowsky as Phil/Ned; @groundhogday; silent, resized and captioned narrator commentary; no present-day reaction or blanket reuse; hosting is not a licence or legal clearanceGroundhog Day / GIPHY
- Two Buttons origin attribution — Jake Clark, October 2014; secondary sourceSupermeme
- Groundhog Day source link supplied by the GIPHY uploaderGroundhog Day



