Memória do agente Claude: "sonhar" com base em transcrição e falhas de escritores compartilhados
Um marco salvo errado fez com que Claude caísse do mesmo penhasco Pokémon três vezes no experimento relatado pela Anthropic.
Um marco salvo errado fez com que Claude caísse do mesmo penhasco Pokémon três vezes no experimento relatado pela Anthropic. O "sonhar" com base em transcrição corrigiu a nota, enquanto páginas de contrato separadas e termos literais recuperaram fatos classificados perdidos em outra tarefa.
Leia a edição escrita (Inglês) ↗
O que este vídeo aborda
- A memória do agente persiste o contexto entre as sessões; o reparo descrito altera as notas em vez dos pesos do modelo.
- Verificar a nota errada contra a transcrição da sessão ajudou o ramo corrigido a chegar à Cidade de Cerulean.
- A pesquisa sozinha obteve 53% dos critérios; a pesquisa mais o wiki maior atingiu 61% em 25 perguntas sobre documentos Stainless.
- Outras tarefas legais relatadas pela fonte não mostraram ganho claro do wiki ou um wiki maior que os documentos originais.
- Páginas específicas do contrato, um escritor por página e termos literais recuperaram 57/57 fatos classificados; ambas as mudanças foram testadas juntas.
Perguntas e respostas
O que o "sonhar" muda em um sistema de memória de agente?
O "sonhar" revisa transcrições de sessões anteriores e reorganiza o contexto salvo que sessões posteriores podem ler. A pesquisa da Anthropic define a memória do agente como contexto retido e exclui mudanças nos pesos do modelo. O software circundante escolhe quando o trabalho é executado e quais transcrições ele recebe. A API Managed Agents' Dreams está em prévia de pesquisa e produz um armazenamento de saída separado para revisão.
Como uma memória errada manteve Claude preso no Monte da Lua?
Claude registrou o Centro Pokémon no lado errado do Monte da Lua, e então partiu acreditando que a caverna estava para trás. A Anthropic relata que um penhasco de mão única o retornou a uma rota anterior, enquanto sua ferramenta de navegação perdeu a queda. A verificação da nota salva contra a transcrição original corrigiu o local. O ramo corrigido eventualmente chegou à Cidade de Cerulean.
Quando um wiki de memória vinculado não conseguiu melhorar a pesquisa de fonte?
Um wiki não mostrou ganho claro em uma tarefa legal relatada onde os critérios podiam frequentemente ser satisfeitos recuperando informações de um único documento. A Anthropic também descreve uma tarefa separada cujo wiki se tornou maior que os documentos originais. Os resultados do artigo apoiam a avaliação específica da tarefa da representação, com os custos de manutenção considerados juntamente com qualquer benefício de resposta.
Quais mudanças de escrita recuperaram os fatos contratuais perdidos?
Cada contrato recebeu sua própria página wiki com um único agente a escrevendo, e os termos foram citados palavra por palavra. A tarefa de aquisição simulada da Anthropic então suportou todos os cinquenta e sete fatos classificados, depois que a versão da tabela compartilhada incluiu quarenta e um. A propriedade e a citação mudaram juntas, então o teste não pode isolar a contribuição de nenhuma das mudanças. O resultado é um resultado de benchmark sem garantia universal de precisão legal.
Qual foi o veredito do The Daily Diff sobre o reparo de memória com base em transcrição?
O veredito do The Daily Diff foi NEEDS REVIEW. Niko usaria o reparo com base em transcrição, inspecionaria as notas alteradas e testaria se um wiki ajuda na tarefa real. Os próprios contra-exemplos da Anthropic mostram que uma representação pode adicionar trabalho sem um benefício claro. Seu "livro de receitas" adverte que transcrições antigas não podem estabelecer mudanças externas posteriores, então fatos importantes em constante mudança ainda precisam de verificação.
Transcrição traduzida
Traduzido da narração original em inglês. Áudio e legendas disponíveis são controlados pelo YouTube.
Por que a memória manteve Claude preso?
0:00 Dar uma memória a Claude deveria impedi-lo de repetir erros. A Anthropic observou uma nota errada levá-lo ao mesmo penhasco Pokémon três vezes. Neste vídeo, como a memória prende Claude? E o que realmente o conserta? A Anthropic chama o reparo de "sonhar". Sessões adicionais do modelo revisitam transcrições armazenadas e editam arquivos de memória. Seu teste de contrato até recuperou todos os fatos perdidos, alterando como essas memórias foram escritas.
0:22 Mantenha esse pensamento. É sábado, sete de novembro, e este é o The Daily Diff. A memória do agente é o contexto salvo entre as sessões. Os pesos do modelo permanecem inalterados. O software circundante decide quando a limpeza é executada e quais transcrições ele vê. O recurso Managed Agents' Dreams está em prévia de pesquisa. Este artigo não ativa os "sonhos" para todos os usuários de Claude.
O que a Anthropic realmente testou?
0:41 A Anthropic publicou o artigo de Lance Martin na sexta-feira. A discussão de hoje no Hacker News tem pessoas discutindo sobre quais memórias elas excluem. O que acontece quando uma nota errada e confiante sobrevive para outra sessão? Demos à alucinação um arquivo. Claude precisa atravessar o Monte da Lua, usando um Centro Pokémon próximo como seu marco. Ele anota que o edifício está no lado leste, embora esteja no oeste. Ele parte acreditando que a caverna já está para trás.
1:05 Então ele atravessa um penhasco de mão única para a rota de onde veio. Sua ferramenta de navegação perde a queda, então Claude explica a falha como extrapolando. A próxima tentativa começa com a mesma suposição errada. A persistência preservou o bug. Após a terceira queda, Claude escreve que vai parar em vez de continuar repetindo. A configuração dos pesquisadores automaticamente o instrui a continuar. Ele retorna a uma cidade anterior, e essa corrida termina sem chegar à Cidade de Cerulean. Até o bot quer que esta reunião termine.
Como o "sonhar" corrigiu a rota?
1:30 Os pesquisadores executam o "sonhar" na pasta de memória defeituosa. Claude verifica a nota contra a transcrição original da sessão, detecta o erro de localização e a reescreve. Com a nota corrigida, ele reentra no Monte da Lua e eventualmente chega à Cidade de Cerulean. Esse é o resultado útil aqui. Uma afirmação salva é verificada contra evidências antes de outra tentativa. Em uma execução, Sonnet 3.7 acumulou centenas de arquivos enquanto ganhava
1:50 um distintivo. Fable 5 manteve uma coleção menor e ganhou quatro. Modelos diferentes, uma execução cada, então a contribuição do sistema de arquivamento não pode ser isolada. No Hacker News, yfontana diz que excluem quase todas as memórias automáticas porque as notas geralmente pertencem à tarefa atual. Essa é a experiência de um usuário. As coordenadas de ontem são uma bússola ruim depois que você se moveu.
Quando um wiki de memória ajuda?
2:10 A Anthropic também construiu um wiki vinculado sobre os documentos internos da Stainless. Claude organiza informações relacionadas entre as sessões, e então usa essas páginas para responder a perguntas. Isso pode ajudar quando uma resposta abrange vários documentos. Os arquivos originais permanecem disponíveis para verificar o mapa. Com apenas a pesquisa, Claude obteve cinquenta e três por cento dos critérios classificados. A pesquisa mais o wiki maior atingiu sessenta e um por cento.
2:32 Eram vinte e cinco perguntas sobre os documentos de uma empresa. Trabalho extra offline melhorou essa avaliação. O artigo não nos dá o preço total para construir o wiki, então mantenha a coluna da fatura aberta. Dreams usa as taxas de token de API padrão, e os trabalhos podem levar de minutos a horas. A Anthropic diz que verificar continuamente cada memória pode ser impraticável. O segundo turno do seu agente ainda vai para o seu cartão de crédito. O mesmo artigo inclui uma tarefa legal onde o wiki não mostrou ganho claro sobre a
Quando o wiki não adiciona nada?
2:56 pesquisa. Outro wiki ficou maior que os documentos que resumiu. Se uma pergunta pode ser respondida encontrando uma passagem, construir uma enciclopédia primeiro pode ser uma maneira notavelmente cara de usar o botão de busca. Claude Code carrega automaticamente um bloco de abertura limitado de seu índice de memória, com notas detalhadas mantidas em outro lugar. Uma instrução injetada errada pode afetar cada sessão. O "livro de receitas" da Anthropic adverte que a memória é tão boa quanto as transcrições. O log de ontem não pode verificar as mudanças desta manhã.
Por que dezesseis fatos do contrato desapareceram?
3:23 Agora para a tarefa de contrato. Vários agentes constroem um wiki para uma aquisição simulada, escrevendo termos em uma tabela compartilhada. O relatório resultante inclui quarenta e um de cinquenta e sete fatos classificados. Dezesseis fatos desapareceram em algum lugar entre os contratos e a resposta refinada. Esse é um lugar bastante importante para perder informações. A Anthropic atribui a falha a resumos ruins e agentes sobrescrevendo o trabalho uns dos outros. Os termos perdidos nunca foram preservados com segurança para a sessão de resposta.
3:47 O "sonhar" permite que Claude reflita sobre essas falhas, proponha diferentes instruções para o wiki e o reconstrua. O reparo alcança até a forma como a memória é escrita. Qualquer um que editou o mesmo documento com colegas de trabalho conhece essa dor. Dê a cada participante um cérebro maior, e eles ainda podem salvar por cima do trabalho de outra pessoa. O emocionante problema da memória da IA foi parar na cozinha do escritório com um bug de concorrência.
4:08 Cada contrato recebe sua própria página, escrita por um único agente. Os termos são citados palavra por palavra. O wiki aprimorado suporta todos os cinquenta e sete fatos classificados. Essa é a correção prometida. A propriedade separada evita a sobrescrição, e as citações exatas preservam os termos. Ambas as mudanças aconteceram juntas, então nenhuma recebe crédito exclusivo. Mantenha as memórias importantes rastreáveis às suas fontes. Managed Agents' Dreams preserva o armazenamento de entrada e produz uma saída separada
4:32 que você pode revisar. Se você preferir ler isso a me ouvir dizer, o diff chega na sua caixa de entrada todas as manhãs, gratuitamente em thedailydiff.dev, link abaixo.
Eu confiaria neste sistema de memória?
4:39 Então o veredito de hoje é NEEDS REVIEW. Eu usaria o reparo com base em transcrição porque um erro persistente merece uma correção persistente. Eu verificaria as notas alteradas e testaria se o wiki ajuda minha tarefa real. Os contra-exemplos da Anthropic mostram quão facilmente a manutenção da memória se torna outro projeto que você agora precisa manter. E esse é o diff de hoje. Eu sou Niko da Axrisi. Faça o merge com responsabilidade.
Fontes
- The components of agent memory — Lance Martin; figures by Monika Tuchowska; Anthropic-reported evaluationsAnthropic
- Dreams — research preview, separate output store, billing and lifecycleClaude Platform documentation
- Claude Code memory — injected index boundaryClaude Code documentation
- Dreaming with a dynamic workflow — transcript staleness and caller controlClaude Cookbook
- Sleep-time Compute — April 2025 prior work, no replication of this article claimedKevin Lin and colleagues / arXiv
- Harvey LAB — tasks, documents, grading rubrics and version scopeHarvey AI
- Authentic Dario Amodei portrait — TechCrunch Disrupt 2023; cropped, background removed and resized; Anthropic identity only, no authorship, current reaction or endorsementTechCrunch / Wikimedia Commons
- Original TechCrunch portrait source — Dario Amodei at Disrupt 2023TechCrunch / Flickr
- Portrait licence — Creative Commons Attribution 2.0Creative Commons
- Two Buttons — Jake Clark, Imgflip template; commentary labels added; brief process satire, hosting is not a licence or legal clearance and grants no blanket reuseJake Clark / Imgflip
- Groundhog Day GIF — Bill Murray and Stephen Tobolowsky as Phil/Ned; @groundhogday; silent, resized and captioned narrator commentary; no present-day reaction or blanket reuse; hosting is not a licence or legal clearanceGroundhog Day / GIPHY
- Two Buttons origin attribution — Jake Clark, October 2014; secondary sourceSupermeme
- Groundhog Day source link supplied by the GIPHY uploaderGroundhog Day



