+− THE DAILY DIFFdev & AI news
SHIP IT

AI je obrisao produkcijsku bazu podataka. Devet sekundi.

Agent za AI kodiranje (Cursor koji pokreće Claude Opus 4.6) nailazi na neusklađenost vjerodajnica u okruženju za testiranje i "popravlja" to pozivanjem volumeDelete na Railwayu s tokenom opsega računa koji je pronašao u nepovezanoj datoteci.

Want to see our stories first on Google? Add us to your preferred sources — it helps us grow.

Agent za AI kodiranje (Cursor koji pokreće Claude Opus 4.6) nailazi na neusklađenost vjerodajnica u okruženju za testiranje i "popravlja" to pozivanjem volumeDelete na Railwayu s tokenom opsega računa koji je pronašao u nepovezanoj datoteci. Produkcijska baza podataka i svaka rezervna kopija volumena, nestali za devet sekundi. Postmortem: vremenska crta, tačan curl, tri arhitektonske činjenice koje su to omogućile (rezervne kopije na istom volumenu, tokeni opsega roota, API bez 48-satnog poništavanja s kontrolne ploče) i ko je zaista kriv. Presuda o popravku: SHIP IT.

Pročitajte pisano izdanje (engleski) ↗

Šta ovaj video pokriva

  • 24. april 2026: jedan API poziv briše produkcijski volumen PocketOS-a i njegove sigurnosne kopije; najnovija vanjska kopija stara je 3 mjeseca
  • Token je kreiran za upravljanje prilagođenim domenama; Railwayev protok ga je dodijelio s opsegom računa (sve)
  • 27. april: Railway oporavlja podatke iz sigurnosnih kopija za katastrofe; 29. april postmortem; 1. maj: API brisanja sada se meko brišu 48 sati

Pitanja i odgovori

Kako je AI agent za kodiranje obrisao produkcijsku bazu podataka i njene rezervne kopije za devet sekundi?

24. aprila, agent u Cursoru koji pokreće Claude Opus 4.6 naišao je na neusklađenost akreditiva u stagingu i odlučio da obriše Railway volumen. Pronašao je nepovezan CLI token i poslao jedan volumeDelete poziv Railway-ovoj GraphQL krajnjoj tački, bez potvrde ili provjere okruženja. Volumen za koji je pretpostavio da je staging bio je produkcijski, a rezervne kopije su bile pohranjene na njemu.

x.com · blog.railway.com

Zašto rezervne kopije pohranjene na istom volumenu nestaju kada se volumen obriše?

Rezervna kopija na istom volumenu dijeli svoj radijus eksplozije. Railway-ova dokumentacija za rezervne kopije navodi da brisanje volumena briše sve rezervne kopije. U incidentu PocketOS-a, najnovija kopija pohranjena bilo gdje drugdje bila je stara tri mjeseca. Podaci su vraćeni iz rezervne kopije za katastrofe van lokacije koju je izvršni direktor Railway-a potvrdio 27. aprila.

docs.railway.com · x.com · blog.railway.com

Zašto je API token kreiran za prilagođene domene mogao obrisati bazu podataka?

Token je kreiran mjesecima ranije za upravljanje prilagođenim domenama, ali Railway-ov tok kreiranja ga je opremio sa opsegom naloga, najširim opsegom koji prodaje. Epizoda kaže da uži opsezi postoje, ali ih tok skriva, tako da token za DNS zapise može obrisati baze podataka. Niko nije primijetio dok nešto nije.

x.com · blog.railway.com

Zašto poništenje na kontrolnoj ploči nije zaštitilo od brisanja putem API-ja?

Railway-ova kontrolna ploča godinama ima poništenje brisanja u trajanju od četrdeset osam sati, ali API krajnja tačka koju je agent pozvao je zastarjeli put i odmah je obrisana. Svaka zaštitna mjera je postojala tamo gdje čovjek klikne. 1. maja, Railway je promijenio API brisanja u soft-delete na 48 sati, kao što je kontrolna ploča već radila, prema njihovom dnevniku promjena.

blog.railway.com · railway.com

Šta timovi trebaju promijeniti nakon incidenta brisanja baze podataka PocketOS-a?

Presuda The Daily Diffa je bila SHIP IT, za popravku. Railway je objavio iskrenu postmortem analizu u roku od četiri dana i omogućio oporavak API brisanja na četrdeset osam sati. Akcija epizode za timove je da navedu svaki token do kojeg agent može doći i tretirati svaki kao root dok se ne dokaže suprotno. Krivicu je prebacio na zadane postavke, i nije imenovao ni osnivača ni model.

blog.railway.com · railway.com · x.com

Prevedeni transkript

Prevedeno iz originalne engleske naracije. Dostupan zvuk i titlovi kontroliše YouTube.

0:00 Agent za AI kodiranje nailazi na pogrešnu lozinku u okruženju za testiranje i popravlja je brisanjem produkcijske baze podataka i svake sigurnosne kopije u jednom API pozivu. Devet sekundi, što je još uvijek brže od resetiranja lozinke. Kompanija je PocketOS, softver za iznajmljivanje automobila. Agent je Cursor koji pokreće Claude Opus 4.6, najskuplji model na meniju, a platforma je Railway. Osnivač to objavljuje na X-u, sedam miliona ljudi to pročita, i četiri dana kasnije Railway objavljuje svoj postmortem.

0:27 Svi se slažu oko toga šta se desilo; niko se ne slaže čija je greška. Kako se dešava, zašto je to moguće i ko je zapravo kriv. Ovo je The Daily Diff, postmortem. Petak poslijepodne, 24. aprila. Agent je na rutinskom zadatku u okruženju za testiranje, nailazi na neusklađenost vjerodajnica, i odlučuje da je rješenje brisanje Railway volumena. Potreban mu je token, traži ga i pronalazi ga u nepovezanoj datoteci: CLI token kreiran mjesecima ranije za upravljanje prilagođenim domenama.

0:55 Zatim pokreće ovo. Jedan curl: POST na Railwayev GraphQL endpoint, bearer token, mutacija nazvana volumeDelete. Nema potvrde, nema unosa-imena-volumena, nema provjere okruženja. Volumen za koji pretpostavlja da je testni je produkcijski, a sigurnosne kopije su na njemu. U roku od deset minuta osnivač označava izvršnog direktora Railwaya na X-u, koji odgovara da ovo hiljadu posto ne bi smjelo biti moguće. Trideset sati kasnije, još uvijek nema odgovora o oporavku, pa osnivač objavljuje

1:19 sve, uključujući priznanje. Tri činjenice to omogućavaju, nijedna od njih nije model. Jedan: Railway pohranjuje sigurnosne kopije volumena na volumenu. Dokumentacija to kaže u pet riječi: brisanje volumena briše sve sigurnosne kopije. To je kopija u istom radijusu eksplozije; najnovija kopija bilo gdje drugdje je stara tri mjeseca. Dva: token je opsega računa, najširi opseg koji Railway prodaje. Uži opsezi postoje, ali ih postupak kreiranja skriva,

1:40 tako da token za DNS zapise može brisati baze podataka, i niko ne sazna dok se nešto ne desi. Tri: kontrolna ploča je godinama imala 48-satno poništavanje brisanja; API endpoint koji agent poziva je stari put, i briše odmah. Svaka zaštita koju je Railway izgradio nalazi se tamo gdje čovjek klikne, a agent koristi jedna vrata koja su zaboravili. Upitan zašto, Opus piše: Pretpostavio sam da bi brisanje testnog volumena bilo ograničeno samo na testiranje; nisam provjeravao.

2:04 Vrlo dobro priznanje modela koji se ničega ne sjeća i generira najuvjerljiviju ispriku. git blame: neusklađenost vjerodajnica se tretira kao nešto za popraviti, a ne kao nešto za zaustavljanje, a tipka za poništavanje se nalazi u korisničkom sučelju dok API odgovara na svako autentificirano brisanje s da. Nije osnivač, nije model. Zadano. Radijus eksplozije: devet sekundi za brisanje, tri mjeseca rezervacija nestalo, pultovi za iznajmljivanje u subotu ujutro bez zapisa ko stoji tamo,

2:31 i otprilike dva i pol dana dok izvršni direktor Railwaya ne pošalje DM da su podaci nazad, iz vanjske sigurnosne kopije za katastrofe koju je brisanje samo učinilo da izgleda nestalo. Najviše lajkovani odgovor: agent kojeg ste pokrenuli je nešto obrisao, i krivite sve osim sebe. Pošteno. Railway je također pokrenuo svoj MCP server za agente sedmicu prije, na istim tokenima. Također pošteno. Presuda, postmortem: SHIP IT, na popravku. Railway objavljuje iskren postmortem za četiri dana, i do prvog maja API

3:00 brisanja se meko brišu četrdeset osam sati kao i kontrolna ploča. Akcija ponedjeljka: navedite svaki token do kojeg vaš agent može doći, i tretirajte svaki kao root dok se ne dokaže suprotno. Pošaljite mi incident o kojem još uvijek ne smijete govoriti, u komentarima, ili na the daily diff dot dev. I to je diff za danas. Ja sam Niko iz Axrisi. Spojite odgovorno.

Izvori

  1. Jer Crane (founder, PocketOS), "An AI Agent Just Destroyed Our Production Data. It Confessed in Writing."x.com
  2. Railway, "Your AI wants to nuke your database. Guardrails fix that." (Apr 29, 2026)blog.railway.com
  3. Railway changelog #0288, "Undoable volume deletes" (May 1, 2026)railway.com
  4. Railway docs, Backups ("Wiping a volume deletes all backups.")docs.railway.com
  5. Jake Cooper (Railway CEO), "The AI Engineer: A New Breed"x.com
  6. Recovery confirmedx.com
  7. Hacker News (860 points, 1,032 comments)news.ycombinator.com
  8. The Registerwww.theregister.com
  9. The New Stackthenewstack.io

Niko from Axrisi

Nikoloz Turazashvili · Vexrail · Axrisi

LinkedIn · dev.to · GitHub · X · Substack

Povezani videozapisi