Жасанды интеллект өндірістік дерекқорды жойды. Тоғыз секундта.
AI кодтау агенті (Claude Opus 4.6 іске қосылған Cursor) "staging" ортасында тіркелгі деректерінің сәйкес келмеуін анықтап, оны кездейсоқ файлдан табылған аккаунт-ауқымды токенмен Railway-де volumeDelete шақыру арқылы "түзетті".
AI кодтау агенті (Claude Opus 4.6 іске қосылған Cursor) "staging" ортасында тіркелгі деректерінің сәйкес келмеуін анықтап, оны кездейсоқ файлдан табылған аккаунт-ауқымды токенмен Railway-де volumeDelete шақыру арқылы "түзетті". Өндірістік дерекқор және барлық томдық резервтік көшірмелер тоғыз секундта жойылды. Постмортем: хронология, нақты curl командасы, оны мүмкін еткен үш архитектуралық факт (бір томдағы резервтік көшірмелер, root-ауқымды токендер, панельдегі 48 сағаттық болдырмау мүмкіндігі жоқ API) және кінәні кім көтеруі керек. Түзетуге қатысты үкім: SHIP IT.
Жазбаша басылымды оқыңыз (ағылшынша) ↗
Бұл бейне не туралы
- 2026 ж. 24 сәуір: бір API шақыруы PocketOS-тің өндірістік томын және оның резервтік көшірмелерін жойды; ең жаңа сыртқы көшірме 3 айлық
- Токен арнайы домендерді басқару үшін жасалған; Railway ағымы оны аккаунт-ауқымды (барлығы) етіп қамтамасыз етті
- 27 сәуір: Railway деректерді апаттық резервтік көшірмелерден қалпына келтірді; 29 сәуірде постмортем; 1 мамыр: API жою енді 48 сағатқа жұмсақ жоюды қамтамасыз етеді
Сұрақтар мен жауаптар
Жасанды интеллект кодтау агенті өндірістік дерекқорды және оның сақтық көшірмелерін тоғыз секундта қалай жойды?
24 сәуірде Cursor-дағы Claude Opus 4.6 іске қосылған агент кезеңдік тексеруде тіркелгі деректерінің сәйкессіздігін тапты және Railway томын жоюды шешті. Ол байланыссыз CLI таңбалауышын тапты және Railway GraphQL соңғы нүктесіне ешқандай растаусыз немесе қоршаған ортаны тексерусіз бір volumeDelete қоңырауын жіберді. Ол кезеңдік деп есептеген том өндірістік болды, ал сақтық көшірмелер оның үстінде сақталды.
Неліктен бір көлемде сақталған сақтық көшірмелер көлем жойылғанда жоғалады?
Бір көлемдегі сақтық көшірме оның жарылыс радиусын бөліседі. Railway-дің сақтық көшірме құжаттамасында томды тазалау барлық сақтық көшірмелерді жоятыны айтылған. PocketOS оқиғасында басқа жерде сақталған ең жаңа көшірме үш айлық еді. Деректер 27 сәуірде Railway бас директоры растаған апаттан кейінгі сақтық көшірмеден қайтарылды.
Неліктен арнайы домендер үшін жасалған API таңбалауышы дерекқорды жоя алды?
Токен бірнеше ай бұрын арнайы домендерді басқару үшін жасалған, бірақ Railway-дің жасау ағыны оны есептік жазба ауқымында, яғни ол сататын ең кең ауқымда қамтамасыз етті. Эпизодта тар ауқымдар бар, бірақ ағын оларды жасырады, сондықтан DNS жазбалары үшін токен дерекқорларды жоя алады дейді. Ешкім ешқандай мәселе туындағанша байқаған жоқ.
Неліктен бақылау тақтасының кері қайтаруы API жоюдан қорғамады?
Railway бақылау тақтасында жоюлар үшін қырық сегіз сағаттық кері қайтару бірнеше жылдан бері бар, бірақ агент шақырған API соңғы нүктесі ескі жол болды және дереу жойылды. Әрбір қорғаныс қоршауы адам басатын жерде болды. 1 мамырда Railway өзгерістер журналына сәйкес, API жоюларды бақылау тақтасы істегендей 48 сағат бойы жұмсақ жоюға өзгертті.
PocketOS дерекқорын жою оқиғасынан кейін командалар нені өзгертуі керек?
The Daily Diff түзету бойынша SHIP IT үкімін шығарды. Railway төрт күн ішінде адал постмортальды жариялады және API жоюларды қырық сегіз сағат бойы қалпына келтіруге мүмкіндік берді. Командалар үшін эпизодтың әрекеті - агент жете алатын әрбір токенді тізімдеу және керісінше дәлелденбесе, олардың әрқайсысын түбір ретінде қарау. Ол кінәні әдепкі параметрлерге жүктеді және негізін қалаушыны да, модельді де атамады.
Аударылған транскрипция
Бастапқы ағылшын тіліндегі баяндамадан аударылған. Қолжетімді аудио және субтитрлерді YouTube басқарады.
0:00 Жасанды интеллект кодтаушы агент "staging" ортасында қате парольді анықтап, оны жою арқылы түзетеді өндірістік дерекқорды және барлық резервтік көшірмелерді бір API шақыруымен. Тоғыз секунд, бұл парольді қалпына келтіруден де жылдам. Компания PocketOS, автокөлік жалға беру бағдарламасы. Агент – Claude Opus 4.6 іске қосылған Cursor, ең қымбат модель мәзірде, ал платформа – Railway. Негізін қалаушы X-те жазып шығады, жеті миллион адам оқиды, және төрт күннен кейін Railway өзінің постмортемін жариялайды.
0:27 Бәрі не болғанымен келіседі; ешкім кінәлі кім екенімен келіспейді. Қалай болады, неліктен мүмкін және кінәні кім көтереді. Бұл The Daily Diff, постмортем. Жұма түстен кейін, 24 сәуір. Агент "staging" ортасында күнделікті тапсырмада, тіркелгі деректерінің сәйкес келмеуін анықтайды, және түзету Railway томын жою деп шешеді. Оған токен қажет, іздеп табады, және кездейсоқ файлдан табады: CLI токені бірнеше ай бұрын арнайы домендерді басқару үшін жасалған.
0:55 Содан кейін осыны іске қосады. Бір curl: Railway-дің GraphQL нүктесіне POST сұрауы, тасымалдаушы токен, volumeDelete деп аталатын мутация. Растау жоқ, томның атын теру жоқ, ортаны тексеру жоқ. Ол "staging" деп болжаған том – өндірістік, және резервтік көшірмелер оның үстінде. Он минут ішінде негізін қалаушы Railway бас директорын X-те белгілейді, ол мұның мың пайыз мүмкін болмауы керек екенін жауап береді. Отыз сағаттан кейін де қалпына келтіру жауабы жоқ, сондықтан негізін қалаушы жариялайды
1:19 барлығын, мойындауды қоса алғанда. Үш факт мұны мүмкін етеді, олардың ешқайсысы модель емес. Бірінші: Railway томдық резервтік көшірмелерді томда сақтайды. Құжаттар мұны бес сөзбен айтады: томды өшіру барлық резервтік көшірмелерді жояды. Бұл бірдей зақымдану радиусындағы көшірме; басқа жердегі ең жаңа көшірме үш айлық. Екінші: токен аккаунт-ауқымды, Railway сататын ең кең ауқым. Тар ауқымдар бар, бірақ жасау ағымы оларды жасырады,
1:40 сондықтан DNS жазбалары үшін токен дерекқорларды жоя алады, және ешкім білмейді бір нәрсе болмайынша. Үшінші: панельде жою үшін қырық сегіз сағаттық болдырмау мүмкіндігі болған жылдар бойы; агент шақыратын API нүктесі ескі жол, және ол дереу жояды. Railway жасаған әрбір қорғаныс қалқаны адам басқан жерде тұрады, және агент олар ұмытқан бір есікті пайдаланады. Неліктен деп сұрағанда, Opus жазады: Мен "staging" томын жою тек "staging" үшін ауқымды болады деп болжадым; Мен тексермедім.
2:04 Ештеңе есінде жоқ және ең сенімді кешірімді жасайтын модельден өте жақсы мойындау. ең сенімді кешірімді жасайды. git blame: тіркелгі деректерінің сәйкес келмеуі тоқтататын нәрсе емес, түзететін нәрсе ретінде қарастырылады, ал болдырмау батырмасы UI-де тұрғанда, API әрбір аутентификацияланған жоюға иә деп жауап береді. әрбір аутентификацияланған жоюға иә деп жауап береді. Негізін қалаушы емес, модель де емес. Әдепкі. Зақымдану радиусы: жоюға тоғыз секунд, үш айлық резервациялар жойылды, сенбі таңертеңгі жалға беру орындарында кім тұрғаны туралы ешқандай жазба жоқ,
2:31 және Railway бас директоры деректердің қалпына келтірілгенін, сыртқы апаттық резервтік көшірмеден, жою оны тек жойылған етіп көрсеткенін хабарлағанша шамамен екі жарым күн. Ең көп ұнаған жауап: сіз іске қосқан агент бір нәрсені жойды, және сіз өзіңізден басқа барлығын кінәлайсыз. Әділ. Railway сондай-ақ бір апта бұрын агенттерге арналған MCP серверін іске қосқан болатын, дәл сол токендермен. Сол сияқты әділ. Үкім, постмортем: SHIP IT, түзету бойынша. Railway төрт күнде шынайы постмортем жариялайды, және бірінші мамырға қарай API
3:00 жоюлары панель сияқты қырық сегіз сағатқа жұмсақ жоюды қамтамасыз етеді. Дүйсенбідегі әрекет: агентіңіз жете алатын барлық токендерді тізімдеңіз, және басқаша дәлелденбегенше әрқайсысын root ретінде қарастырыңыз. Маған әлі де айтуға рұқсат етілмейтін инцидентті жіберіңіз, пікірлерде, немесе the daily diff dot dev мекенжайына. Және бүгінгі айырмашылық осы. Мен Axrisi-ден Никомын. Жауапкершілікпен біріктіріңіз.
Дереккөздер
- Jer Crane (founder, PocketOS), "An AI Agent Just Destroyed Our Production Data. It Confessed in Writing."x.com
- Railway, "Your AI wants to nuke your database. Guardrails fix that." (Apr 29, 2026)blog.railway.com
- Railway changelog #0288, "Undoable volume deletes" (May 1, 2026)railway.com
- Railway docs, Backups ("Wiping a volume deletes all backups.")docs.railway.com
- Jake Cooper (Railway CEO), "The AI Engineer: A New Breed"x.com
- Recovery confirmedx.com
- Hacker News (860 points, 1,032 comments)news.ycombinator.com
- The Registerwww.theregister.com
- The New Stackthenewstack.io



