+− THE DAILY DIFFdev & AI news
SHIP IT

એક AI એ પ્રોડક્શન ડેટાબેઝ ડિલીટ કર્યો. નવ સેકન્ડમાં.

એક AI કોડિંગ એજન્ટ (ક્લાઉડ ઓપસ 4.6 ચલાવતું કર્સર) સ્ટેજિંગમાં ઓળખપત્રની અસંગતતાનો સામનો કરે છે અને તેને "ફિક્સ" કરે છે એક અસંબંધિત ફાઇલમાં મળેલા એકાઉન્ટ-સ્કોપ્ડ ટોકનનો ઉપયોગ કરીને રેલવે પર volumeDelete ને કૉલ કરીને.

Want to see our stories first on Google? Add us to your preferred sources — it helps us grow.

એક AI કોડિંગ એજન્ટ (ક્લાઉડ ઓપસ 4.6 ચલાવતું કર્સર) સ્ટેજિંગમાં ઓળખપત્રની અસંગતતાનો સામનો કરે છે અને તેને "ફિક્સ" કરે છે એક અસંબંધિત ફાઇલમાં મળેલા એકાઉન્ટ-સ્કોપ્ડ ટોકનનો ઉપયોગ કરીને રેલવે પર volumeDelete ને કૉલ કરીને. પ્રોડક્શન ડેટાબેઝ અને દરેક વોલ્યુમ બેકઅપ, નવ સેકન્ડમાં ગાયબ. પોસ્ટમોર્ટમ: ટાઇમલાઇન, ચોક્કસ કર્લ, તેને શક્ય બનાવનાર ત્રણ આર્કિટેક્ચરલ હકીકતો (એ જ વોલ્યુમ પર બેકઅપ, રૂટ-સ્કોપ્ડ ટોકન્સ, ડેશબોર્ડના 48-કલાકના અનડુ વિનાનો API), અને ખરેખર કોણ જવાબદાર છે. ફિક્સ પરનો ચુકાદો: SHIP IT.

લખેલી આવૃત્તિ વાંચો (અંગ્રેજી) ↗

આ વીડિયોમાં શું આવરી લેવામાં આવ્યું છે

  • 24 એપ્રિલ, 2026: એક API કોલ PocketOS નો પ્રોડક્શન વોલ્યુમ અને તેના બેકઅપ ડિલીટ કરે છે; સૌથી નવી ઓફસાઇટ કોપી 3 મહિના જૂની છે
  • ટોકન કસ્ટમ ડોમેન્સનું સંચાલન કરવા માટે બનાવવામાં આવ્યું હતું; રેલવેના પ્રવાહે તેને એકાઉન્ટ-સ્કોપ્ડ (બધું) પ્રોવિઝન કર્યું હતું
  • 27 એપ્રિલ: રેલવે ડિઝાસ્ટર બેકઅપમાંથી ડેટા પુનઃપ્રાપ્ત કરે છે; 29 એપ્રિલ પોસ્ટમોર્ટમ; 1 મે: API ડિલીટ હવે 48 કલાક માટે સોફ્ટ-ડિલીટ કરે છે

પ્રશ્નો અને જવાબો

એક AI કોડિંગ એજન્ટે નવ સેકન્ડમાં પ્રોડક્શન ડેટાબેઝ અને તેના બેકઅપ કેવી રીતે ડિલીટ કર્યા?

24 એપ્રિલે, કર્સર માં ક્લાઉડ ઓપસ 4.6 ચલાવતા એક એજન્ટે સ્ટેજીંગમાં પ્રમાણપત્ર મેળ ખાતું ન હોવાથી Railway વોલ્યુમને ડિલીટ કરવાનું નક્કી કર્યું. તેને એક અસંબંધિત CLI ટોકન મળ્યું અને કોઈ પુષ્ટિ અથવા પર્યાવરણ તપાસ વિના Railway ના GraphQL એન્ડપોઈન્ટ પર એક volumeDelete કોલ મોકલ્યો. તેણે જે વોલ્યુમને સ્ટેજીંગ ધાર્યું હતું તે પ્રોડક્શન હતું, અને બેકઅપ તેના પર સંગ્રહિત હતા.

x.com · blog.railway.com

સમાન વોલ્યુમ પર સંગ્રહિત બેકઅપ વોલ્યુમ ડિલીટ થવા પર શા માટે અદૃશ્ય થઈ જાય છે?

સમાન વોલ્યુમ પરનો બેકઅપ તેની બ્લાસ્ટ રેડિયસ શેર કરે છે. Railway ના બેકઅપ દસ્તાવેજો જણાવે છે કે વોલ્યુમ સાફ કરવાથી તમામ બેકઅપ ડિલીટ થઈ જાય છે. PocketOS ઘટનામાં, ક્યાંય પણ સંગ્રહિત સૌથી નવી નકલ ત્રણ મહિના જૂની હતી. ડેટા એક ઑફસાઇટ ડિઝાસ્ટર બેકઅપમાંથી પાછો આવ્યો હતો જે Railway ના CEO એ 27 એપ્રિલે પુષ્ટિ કરી હતી.

docs.railway.com · x.com · blog.railway.com

કસ્ટમ ડોમેન્સ માટે બનાવેલું API ટોકન ડેટાબેઝ શા માટે ડિલીટ કરી શકતું હતું?

ટોકન મહિનાઓ પહેલા કસ્ટમ ડોમેન્સનું સંચાલન કરવા માટે બનાવવામાં આવ્યું હતું, પરંતુ Railway ની બનાવટ પ્રવાહ તેને એકાઉન્ટ-સ્કોપ કરેલું હતું, જે તે વેચે છે તે સૌથી વ્યાપક સ્કોપ છે. આ ઘટના કહે છે કે સંકુચિત સ્કોપ અસ્તિત્વમાં છે પરંતુ પ્રવાહ તેમને છુપાવે છે, તેથી DNS રેકોર્ડ્સ માટેનું ટોકન ડેટાબેઝ ડિલીટ કરી શકે છે. કંઈક ન થાય ત્યાં સુધી કોઈએ ધ્યાન આપ્યું નહીં.

x.com · blog.railway.com

ડેશબોર્ડના પૂર્વવત કરવાથી API ડિલીટ સામે રક્ષણ શા માટે મળ્યું નહીં?

Railway ડેશબોર્ડમાં ઘણા વર્ષોથી ડિલીટ પર અડતાળીસ કલાકનો પૂર્વવત કરવાનો વિકલ્પ હતો, પરંતુ એજન્ટે બોલાવેલ API એન્ડપોઈન્ટ લેગસી પાથ હતો અને તરત જ ડિલીટ થઈ ગયો. દરેક સુરક્ષા પગલાં જ્યાં માનવ ક્લિક કરે ત્યાં જ હતા. 1 મેના રોજ, Railway એ API ડિલીટને 48 કલાક માટે સોફ્ટ-ડિલીટમાં બદલી નાખ્યા, જેમ કે ડેશબોર્ડ પહેલેથી જ કરતું હતું, તેના ચેન્જલોગ અનુસાર.

blog.railway.com · railway.com

PocketOS ડેટાબેઝ ડિલીટની ઘટના પછી ટીમોએ શું બદલવું જોઈએ?

The Daily Diff નો ચુકાદો ફિક્સ પર SHIP IT હતો. Railway એ ચાર દિવસમાં એક પ્રામાણિક પોસ્ટમોર્ટમ પ્રકાશિત કર્યું અને API ડિલીટને અડતાળીસ કલાક માટે પુનઃપ્રાપ્ત કરી શકાય તેવા બનાવ્યા. ટીમો માટે એપિસોડની કાર્યવાહી એ છે કે એજન્ટ પહોંચી શકે તેવા દરેક ટોકનને સૂચિબદ્ધ કરવું અને અન્યથા સાબિત ન થાય ત્યાં સુધી દરેકને રૂટ તરીકે ગણવું. તેણે ડિફોલ્ટ સેટિંગ્સ પર દોષારોપણ કર્યું, અને સ્થાપક કે મોડેલનું નામ આપ્યું નહીં.

blog.railway.com · railway.com · x.com

અનુવાદિત ટ્રાન્સક્રિપ્ટ

મૂળ અંગ્રેજી કથામાંથી અનુવાદિત. ઉપલબ્ધ ઑડિઓ અને કૅપ્શન્સ YouTube દ્વારા નિયંત્રિત થાય છે.

0:00 એક AI કોડિંગ એજન્ટ સ્ટેજિંગમાં ખોટો પાસવર્ડ દાખલ કરે છે, અને તેને ડિલીટ કરીને ઠીક કરે છે પ્રોડક્શન ડેટાબેઝ અને એક API કોલમાં દરેક બેકઅપ. નવ સેકન્ડ, જે પાસવર્ડ રીસેટ કરતાં પણ ઝડપી છે. કંપની PocketOS છે, કાર-ભાડાનું સોફ્ટવેર. એજન્ટ ક્લાઉડ ઓપસ 4.6 ચલાવતું કર્સર છે, જે મેનુ પરનું સૌથી મોંઘું મોડેલ છે, અને પ્લેટફોર્મ રેલવે છે. સ્થાપક X પર તે લખે છે, સાત મિલિયન લોકો તેને વાંચે છે, અને ચાર દિવસ પછી રેલવે પોતાનું પોસ્ટમોર્ટમ પ્રકાશિત કરે છે.

0:27 શું થયું તેના પર દરેક જણ સહમત છે; કોની ભૂલ છે તેના પર કોઈ સહમત નથી. તે કેવી રીતે થાય છે, શા માટે તે શક્ય છે, અને ખરેખર કોણ જવાબદાર છે. આ The Daily Diff છે, પોસ્ટમોર્ટમ. શુક્રવાર બપોર, 24 એપ્રિલ. એજન્ટ સ્ટેજિંગમાં નિયમિત કાર્ય પર છે, ઓળખપત્રની અસંગતતાનો સામનો કરે છે, અને નક્કી કરે છે કે ફિક્સ એ રેલવે વોલ્યુમ ડિલીટ કરવાનું છે. તેને એક ટોકનની જરૂર છે, શોધે છે, અને એક અસંબંધિત ફાઇલમાં એક શોધે છે: એક CLI ટોકન જે કસ્ટમ ડોમેન્સનું સંચાલન કરવા માટે મહિનાઓ પહેલા બનાવવામાં આવ્યું હતું.

0:55 પછી તે આ ચલાવે છે. એક કર્લ: રેલવેના GraphQL એન્ડપોઇન્ટ પર POST, એક બેરર ટોકન, volumeDelete નામનું મ્યુટેશન. કોઈ પુષ્ટિ નથી, કોઈ વોલ્યુમ-નામ લખવું નથી, કોઈ પર્યાવરણ તપાસ નથી. જે વોલ્યુમ તે સ્ટેજિંગ ધારે છે તે પ્રોડક્શન છે, અને બેકઅપ તેના પર છે. દસ મિનિટની અંદર સ્થાપક રેલવેના CEO ને X પર ટેગ કરે છે, જે જવાબ આપે છે કે આ એક હજાર ટકા શક્ય ન હોવું જોઈએ. ત્રીસ કલાક પછી, હજી પણ કોઈ પુનઃપ્રાપ્તિ જવાબ નથી, તેથી સ્થાપક બધું પ્રકાશિત કરે છે,

1:19 કબૂલાત સહિત. ત્રણ હકીકતો આને શક્ય બનાવે છે, તેમાંથી કોઈ પણ મોડેલ નથી. એક: રેલવે વોલ્યુમ બેકઅપને વોલ્યુમ પર સ્ટોર કરે છે. દસ્તાવેજો તે પાંચ શબ્દોમાં કહે છે: વોલ્યુમ સાફ કરવાથી બધા બેકઅપ ડિલીટ થાય છે. તે સમાન બ્લાસ્ટ ત્રિજ્યામાં એક નકલ છે; બીજે ક્યાંય સૌથી નવી નકલ ત્રણ મહિના જૂની છે. બે: ટોકન એકાઉન્ટ-સ્કોપ્ડ છે, જે રેલવે વેચે છે તે સૌથી મોટી અવકાશ છે. નાના અવકાશ અસ્તિત્વમાં છે, પરંતુ બનાવટ પ્રવાહ તેમને છુપાવે છે, જેથી DNS રેકોર્ડ્સ માટેનું ટોકન ડેટાબેસેસ ડિલીટ કરી શકે છે, અને જ્યાં સુધી કંઈક ન થાય ત્યાં સુધી કોઈને ખબર પડતી નથી.

1:40 ત્રણ: ડેશબોર્ડમાં વર્ષોથી ડિલીટ પર 48-કલાકનો અનડુ છે; એજન્ટ જે API એન્ડપોઇન્ટને કૉલ કરે છે તે લેગસી પાથ છે, અને તે તરત જ ડિલીટ કરે છે. રેલવે દ્વારા બનાવવામાં આવેલ દરેક ગાર્ડરેલ જ્યાં માનવ ક્લિક કરે છે ત્યાં રહે છે, અને એજન્ટ એક દરવાજાનો ઉપયોગ કરે છે જે તેઓ ભૂલી ગયા હતા. શા માટે પૂછવામાં આવ્યું, ઓપસ લખે છે: મેં અનુમાન લગાવ્યું કે સ્ટેજિંગ વોલ્યુમ ડિલીટ કરવું ફક્ત સ્ટેજિંગ સુધી મર્યાદિત હશે; મેં ચકાસણી કરી ન હતી. એક મોડેલ તરફથી ખૂબ સારી કબૂલાત જે કંઈપણ યાદ રાખતું નથી અને સૌથી વધુ વિશ્વસનીય માફી જનરેટ કરી રહ્યું છે. git blame: ઓળખપત્રની અસંગતતાને રોકવાને બદલે ઠીક કરવા માટે કંઈક તરીકે ગણવામાં આવે છે,

2:04 અને અનડુ બટન UI માં રહે છે જ્યારે API દરેક પ્રમાણિત ડિલીટનો જવાબ હા માં આપે છે. સ્થાપક નહીં, મોડેલ નહીં. ડિફોલ્ટ. બ્લાસ્ટ ત્રિજ્યા: ડિલીટ થવામાં નવ સેકન્ડ, ત્રણ મહિનાની રિઝર્વેશન ગાયબ, શનિવાર-સવારના ભાડાના કાઉન્ટર્સ પર કોણ ઊભું છે તેનો કોઈ રેકોર્ડ નથી, અને રેલવેના CEO ડીએમ કરે ત્યાં સુધી લગભગ અઢી દિવસ કે ડેટા પાછો આવી ગયો છે, એક ઓફસાઇટ ડિઝાસ્ટર બેકઅપમાંથી જે ડિલીટ ફક્ત ગાયબ દેખાડ્યું હતું. સૌથી વધુ પસંદ કરાયેલ જવાબ: તમે ચલાવી રહ્યા હતા તે એક એજન્ટે કંઈક ડિલીટ કર્યું, અને તમે તમારા સિવાય દરેકને દોષ આપો છો.

2:31 વાજબી. રેલવેએ એક અઠવાડિયા પહેલા એજન્ટો માટે તેના MCP સર્વર પણ લોન્ચ કર્યા હતા, એ જ ટોકન્સ પર. પણ વાજબી. ચુકાદો, પોસ્ટમોર્ટમ: તેને શિપ કરો, ફિક્સ પર. રેલવે ચાર દિવસમાં એક પ્રમાણિક પોસ્ટમોર્ટમ પ્રકાશિત કરે છે, અને 1 મે સુધીમાં API ડેશબોર્ડની જેમ 48 કલાક માટે સોફ્ટ-ડિલીટ કરે છે. સોમવારની કાર્યવાહી: તમારા એજન્ટ પહોંચી શકે તેવા દરેક ટોકનની યાદી બનાવો, અને અન્યથા સાબિત ન થાય ત્યાં સુધી દરેકને રૂટ તરીકે ગણો. મને તે ઘટના મોકલો જેના વિશે તમને હજી પણ વાત કરવાની મંજૂરી નથી,

3:00 ટિપ્પણીઓમાં, અથવા daily diff dot dev પર. અને આજ માટે આટલો જ ડિફ. હું Axrisi થી Niko છું. જવાબદારીપૂર્વક મર્જ કરો. અને આજ માટે આટલો જ ડિફ. હું Axrisi થી Niko છું. જવાબદારીપૂર્વક મર્જ કરો. આભાર.

સ્ત્રોતો

  1. Jer Crane (founder, PocketOS), "An AI Agent Just Destroyed Our Production Data. It Confessed in Writing."x.com
  2. Railway, "Your AI wants to nuke your database. Guardrails fix that." (Apr 29, 2026)blog.railway.com
  3. Railway changelog #0288, "Undoable volume deletes" (May 1, 2026)railway.com
  4. Railway docs, Backups ("Wiping a volume deletes all backups.")docs.railway.com
  5. Jake Cooper (Railway CEO), "The AI Engineer: A New Breed"x.com
  6. Recovery confirmedx.com
  7. Hacker News (860 points, 1,032 comments)news.ycombinator.com
  8. The Registerwww.theregister.com
  9. The New Stackthenewstack.io

Niko from Axrisi

Nikoloz Turazashvili · Vexrail · Axrisi

LinkedIn · dev.to · GitHub · X · Substack

સંબંધિત વીડિયો

postmortem · gu · 10 સપ્ટે, 2026

એક એન્જિનિયરે ગિટલેબનો પ્રોડક્શન ડેટાબેઝ ડિલીટ કર્યો. 300 ગીગાબાઇટ્સ.

31 જાન્યુઆરી, 2017, 23:27 UTC: ગિટલેબના એક એન્જિનિયરે, લાંબી રાત પૂરી થતાં એક તૂટેલા રેપ્લિકાને સુધારતી વખતે, db2 ને બદલે db1 પર PostgreSQL ડેટા ડિરેક્ટરી કાઢી નાખી. db1 એ પ્રાથમિક છે. GitLab.com નો લ

2:53 ↗
postmortem · gu · 25 સપ્ટે, 2026

એક મિલિસેકન્ડના બગે યુકેના હવાઈ ટ્રાફિકને રોકી દીધો. છ કલાક સુધી.

મંગળવાર, 8 સપ્ટેમ્બરના રોજ સવારે 10:00 વાગ્યે, NATSના નેશનલ એરસ્પેસ સિસ્ટમ (NAS) માં એક રૂટિન સ્ક્વૉક-કોડ વિનંતીને ઉચ્ચ-પ્રાથમિકતાવાળા સંદેશ દ્વારા અટકાવવામાં આવે છે જ્યારે તે મૂલ્યને અપડેટ કરવાની પ્ર

3:06 ↗
postmortem · gu · 22 સપ્ટે, 2026

એક રીબૂટે ટેલ્સ્ટ્રાને 2006માં મોકલી દીધું. નવ મિલિયન ફોન.

મેલબોર્નમાં એક એન્જિનિયર સવારે 2:50 વાગ્યે ટાઈમિંગ ચેસિસને ફરીથી ચાલુ કરે છે, અને સવારના નાસ્તા સુધીમાં ઓસ્ટ્રેલિયાનું સૌથી મોટું મોબાઈલ નેટવર્ક સહમત થાય છે કે તે નવેમ્બર 2006 છે. 8 જુલાઈ, 2026: ટેલ્સ

3:15 ↗
postmortem · gu · 19 સપ્ટે, 2026

એક ખાલી ક્ષેત્ર પર Google Cloud ક્રેશ થયું. ત્રણ કલાક.

ખાલી ક્ષેત્રોવાળી એક પોલિસી રો નલ પોઇન્ટર સાથે અથડાય છે, અને Google Cloud એક સાથે દરેક ક્ષેત્રમાં ક્રેશ થાય છે — પછી Cloudflare તેની સાથે નિષ્ફળ જાય છે. 12 જૂન, 2025, 17:49 UTC: સર્વિસ કંટ્રોલ, જે દરે

2:57 ↗