+− THE DAILY DIFFdev & AI news
SHIP IT

’n KI het 'n produksiedatabasis uitgevee. Nege sekondes.

’n KI-koderingsagent (Cursor met Claude Opus 4.6) loop 'n geloofsbriewe-wanpas in "staging" raak en "regmaak" dit deur volumeDelete op Railway te roep met 'n rekening-geskopeerde token wat dit in 'n onverwante lêer gevind het.

Want to see our stories first on Google? Add us to your preferred sources — it helps us grow.

’n KI-koderingsagent (Cursor met Claude Opus 4.6) loop 'n geloofsbriewe-wanpas in "staging" raak en "regmaak" dit deur volumeDelete op Railway te roep met 'n rekening-geskopeerde token wat dit in 'n onverwante lêer gevind het. Produksiedatabasis en elke volume-rugsteun, weg in nege sekondes. Noodsaaklike ondersoek: die tydlyn, die presiese curl, die drie argitektoniese feite wat dit moontlik gemaak het (rugsteune op dieselfde volume, wortel-geskopeerde tokens, 'n API sonder die dashboard se 48-uur ontdoen), en wie werklik die skuld kry. Uitspraak oor die regstelling: SHIP IT.

Lees die geskrewe uitgawe (Engels) ↗

Wat hierdie video dek

  • 24 Apr 2026: een API-oproep vee PocketOS se produksievolume en sy rugsteune uit; nuutste buite-terrein kopie is 3 maande oud
  • Die token is geskep om pasgemaakte domeine te bestuur; Railway se vloei het dit rekening-geskopeerd (alles) voorsien
  • 27 Apr: Railway herwin die data van ramp-rugsteune; 29 Apr noodsaaklike ondersoek; 1 Mei: API-skrap is nou sagte-skrap vir 48 u

Vrae en antwoorde

Hoe het 'n KI-koderingsagent 'n produksiedatabasis en sy rugsteun in nege sekondes uitgevee?

Op 24 April het 'n agent in Cursor wat Claude Opus 4.6 gebruik het, 'n geloofsbriewe-wanpas in "staging" gehad en besluit om 'n Railway-volume uit te vee. Dit het 'n onverwante CLI-teken gevind en een volumeDelete-oproep na Railway se GraphQL-eindpunt gestuur, sonder bevestiging of omgewingstoets. Die volume wat dit aangeneem het "staging" was, was produksie, en die rugsteun is daarop gestoor.

x.com · blog.railway.com

Hoekom verdwyn rugsteun wat op dieselfde volume gestoor is wanneer die volume uitgevee word?

'n Rugsteun op dieselfde volume deel sy ontploffingsradius. Railway se rugsteun-dokumentasie meld dat die uitvee van 'n volume alle rugsteun uitvee. In die PocketOS-voorval was die nuutste kopie wat elders gestoor is drie maande oud. Die data het teruggekom van 'n afgeleë ramp-rugsteun wat Railway se uitvoerende hoof op 27 April bevestig het.

docs.railway.com · x.com · blog.railway.com

Hoekom kon 'n API-teken wat vir pasgemaakte domeine geskep is, 'n databasis uitvee?

Die teken is maande vroeër geskep om pasgemaakte domeine te bestuur, maar Railway se skeppingsvloei het dit rekening-geskopeerd geprovisioneer, die wydste omvang wat dit verkoop. Die episode sê nouer omvange bestaan, maar die vloei versteek dit, so 'n teken vir DNS-rekords kon databasisse uitvee. Niemand het dit opgemerk totdat iets dit gedoen het nie.

x.com · blog.railway.com

Hoekom het die dashboard se "undo" nie teen die API-uitveeg beskerm nie?

Die Railway-dashboard het jare lank 'n agt-en-veertig uur ongedaan op uitveë gehad, maar die API-eindpunt wat die agent geroep het, is die verouderde pad en het onmiddellik uitgevee. Elke veiligheidshek het geleef waar 'n mens klik. Op 1 Mei het Railway API-uitveë verander na sagte-uitveë vir 48 uur, soos die dashboard reeds gedoen het, volgens sy changelog.

blog.railway.com · railway.com

Wat moet spanne verander na die PocketOS-databasis-uitveegvoorval?

The Daily Diff se uitspraak was SHIP IT, oor die oplossing. Railway het binne vier dae 'n eerlike postmortem gepubliseer en API-uitveë vir agt-en-veertig uur herstelbaar gemaak. Die episode se aksie vir spanne is om elke teken wat 'n agent kan bereik, te lys en elkeen as wortel te behandel totdat die teendeel bewys is. Dit het die skuld geplaas op die verstekinstellings, en het nóg die stigter nóg die model genoem.

blog.railway.com · railway.com · x.com

Vertaalde transkripsie

Vertaal uit die oorspronklike Engelse vertelling. Beskikbare klank en onderskrifte word deur YouTube beheer.

0:00 'n KI-koderingsagent loop 'n verkeerde wagwoord in "staging" raak, en "regmaak" dit deur te skrap die produksiedatabasis en elke rugsteun in een API-oproep. Nege sekondes, wat steeds vinniger is as die wagwoordherstel. Die maatskappy is PocketOS, motorhuur sagteware. Die agent is Cursor wat Claude Opus 4.6 gebruik, die duurste model op die spyskaart, en die platform is Railway. Die stigter skryf dit op X, sewe miljoen mense lees dit, en vier dae later publiseer Railway sy eie noodsaaklike ondersoek.

0:27 Almal stem saam oor wat gebeur het; niemand stem saam oor wie se skuld dit is nie. Hoe dit gebeur, hoekom dit moontlik is, en wie eintlik die skuld kry. Dit is The Daily Diff, noodsaaklike ondersoek. Vrydagmiddag, 24 April. Die agent is op 'n roetine-taak in "staging", loop 'n geloofsbriewe-wanpas raak, en besluit die oplossing is om 'n Railway-volume te skrap. Dit het 'n token nodig, gaan soek, en vind een in 'n onverwante lêer: 'n CLI-token maande vroeër geskep om pasgemaakte domeine te bestuur.

0:55 Dan loop dit dit. Een curl: 'n POST na Railway se GraphQL-eindpunt, 'n draertoken, 'n mutasie genaamd volumeDelete. Geen bevestiging, geen tik-die-volume-naam, geen omgewingkontrole nie. Die volume wat dit aanneem "staging" is, is produksie, en die rugsteune is daarop. Binne tien minute merk die stigter Railway se uitvoerende hoof op X, wat antwoord dat dit duisend persent nie moontlik behoort te wees nie. Dertig uur later, steeds geen herstel-antwoord nie, so die stigter publiseer

1:19 alles, insluitend belydenis. Drie feite maak dit moontlik, nie een van hulle die model nie. Een: Railway stoor volume-rugsteune op die volume. Die dokumente sê dit in vyf woorde: die uitvee van 'n volume skrap alle rugsteune. Dit is 'n kopie in dieselfde ontploffingsradius; die nuutste kopie elders is drie maande oud. Twee: die token is rekening-geskopeerd, die wydste omvang wat Railway verkoop. Smaller omvange bestaan, maar die skeppingsvloei versteek hulle,

1:40 so 'n token vir DNS-rekords kan databasisse skrap, en niemand vind uit totdat iets dit doen nie. Drie: die dashboard het al jare lank 'n agt-en-veertig-uur ontdoen op skrappings; die API-eindpunt wat die agent oproep, is die ou pad, en dit skrap onmiddellik. Elke veiligheidsgrens wat Railway gebou het, is waar 'n mens klik, en die agent gebruik die een deur wat hulle vergeet het. Gevra hoekom, skryf Opus: Ek het geraai dat die skrapping van 'n "staging"-volume beperk sou wees tot "staging" alleen; Ek het nie geverifieer nie.

2:04 'n Baie goeie belydenis van 'n model wat niks onthou nie en die mees aanneemlike verskoning genereer. git blame: die geloofsbriewe-wanpas word behandel as iets om te "regmaak" eerder as iets om by te stop, en die ontdoen-knoppie woon in die UI terwyl die API antwoord elke geauthentiseerde skrapping met ja. Nie die stigter nie, nie die model nie. Die verstek. Ontploffingsradius: nege sekondes om te skrap, drie maande se besprekings weg, Saterdagoggend-huurkantoore met geen rekord van wie daar staan nie,

2:31 en ongeveer twee en 'n half dae totdat Railway se uitvoerende hoof in DM's sê dat die data terug is, van 'n buite-terrein ramp-rugsteun wat die skrapping net laat verdwyn het. Die mees gelikede antwoord: 'n agent wat jy gebruik het, het iets geskrap, en jy blameer almal behalwe jouself. Billik. Railway het ook sy MCP-bediener vir agente die week tevore gelanseer, op dieselfde tokens. Ook billik. Uitspraak, noodsaaklike ondersoek: SHIP IT, oor die regstelling. Railway publiseer 'n eerlike noodsaaklike ondersoek in vier dae, en teen 1 Mei API-skrappings

3:00 sagte-skrap vir agt-en-veertig uur soos die dashboard. Maandag-aksie: lys elke token wat jou agent kan bereik, en behandel elkeen as wortel totdat die teendeel bewys is. Stuur vir my die insident waaroor jy steeds nie mag praat nie, in die kommentaar, of by the daily diff dot dev. En dit is die verskil vir vandag. Ek is Niko van Axrisi. Smelt verantwoordelik saam.

Bronne

  1. Jer Crane (founder, PocketOS), "An AI Agent Just Destroyed Our Production Data. It Confessed in Writing."x.com
  2. Railway, "Your AI wants to nuke your database. Guardrails fix that." (Apr 29, 2026)blog.railway.com
  3. Railway changelog #0288, "Undoable volume deletes" (May 1, 2026)railway.com
  4. Railway docs, Backups ("Wiping a volume deletes all backups.")docs.railway.com
  5. Jake Cooper (Railway CEO), "The AI Engineer: A New Breed"x.com
  6. Recovery confirmedx.com
  7. Hacker News (860 points, 1,032 comments)news.ycombinator.com
  8. The Registerwww.theregister.com
  9. The New Stackthenewstack.io

Niko from Axrisi

Nikoloz Turazashvili · Vexrail · Axrisi

LinkedIn · dev.to · GitHub · X · Substack

Verwante video's