+− THE DAILY DIFFdev & AI news
SHIP IT

એક ખાલી ક્ષેત્ર પર Google Cloud ક્રેશ થયું. ત્રણ કલાક.

ખાલી ક્ષેત્રોવાળી એક પોલિસી રો નલ પોઇન્ટર સાથે અથડાય છે, અને Google Cloud એક સાથે દરેક ક્ષેત્રમાં ક્રેશ થાય છે — પછી Cloudflare તેની સાથે નિષ્ફળ જાય છે.

ખાલી ક્ષેત્રોવાળી એક પોલિસી રો નલ પોઇન્ટર સાથે અથડાય છે, અને Google Cloud એક સાથે દરેક ક્ષેત્રમાં ક્રેશ થાય છે — પછી Cloudflare તેની સાથે નિષ્ફળ જાય છે. 12 જૂન, 2025, 17:49 UTC: સર્વિસ કંટ્રોલ, જે દરેક Google Cloud API વિનંતીને મંજૂર કરતું બાઇનરી છે, તે "અજાણ્યા ખાલી ક્ષેત્રો" સાથે ક્વોટા-પોલિસી ફેરફાર વાંચે છે, બે અઠવાડિયા પહેલા કોઈ નલ ચેક અને કોઈ ફિચર ફ્લેગ વિના મોકલવામાં આવેલ કોડ પાથને હિટ કરે છે, અને દરેક ક્ષેત્રમાં ક્રેશ લૂપમાં જાય છે — રો વૈશ્વિક સ્તરે સેકન્ડોમાં પ્રતિકૃતિ પામી હતી. બાહ્ય API ત્રણ કલાક માટે 503 પરત કરે છે; us-central1 2 કલાક 40 મિનિટ લે છે કારણ કે ફરી શરૂ થતા કાર્યો કોઈ રેન્ડમાઇઝ્ડ બેકઓફ વિના સમાન સ્પાનર ટેબલને ભરી દે છે. Google ના આઉટેજના ત્રણ મિનિટમાં, Cloudflare's Workers KV — જેનો સોર્સ ઓફ ટ્રુથ "તૃતીય-પક્ષ ક્લાઉડ પ્રદાતા" પર છે — 90% વિનંતીઓ ગુમાવે છે, અને Access, WARP, Workers AI, Pages, Stream અને Turnstile 2 કલાક 28 મિનિટ માટે તેની સાથે ડાઉન થઈ જાય છે. Google નું સ્ટેટસ પેજ તેની પ્રથમ અપડેટ એક કલાક મોડું પોસ્ટ કરે છે, કારણ કે તે Google Cloud પર ચાલે છે.

લખેલી આવૃત્તિ વાંચો (અંગ્રેજી) ↗

આ વીડિયોમાં શું આવરી લેવામાં આવ્યું છે

  • એક ખાલી ક્ષેત્ર, એક નલ પોઇન્ટર, દરેક ક્ષેત્ર
  • સમયરેખા: 29 મે → 17:45 → ક્રેશ લૂપ → લાલ બટન → 17:52 Cloudflare
  • us-central1: ટોળાની અસર
  • પદ્ધતિ: વિનંતી પાથમાં તપાસ, વૈશ્વિક પ્રતિકૃતિ, એક વિક્રેતા
  • git blame — વિભાજન

અનુવાદિત ટ્રાન્સક્રિપ્ટ

મૂળ અંગ્રેજી કથામાંથી અનુવાદિત. ઉપલબ્ધ ઑડિઓ અને કૅપ્શન્સ YouTube દ્વારા નિયંત્રિત થાય છે.

એક ખાલી ક્ષેત્ર, એક નલ પોઇન્ટર, દરેક ક્ષેત્ર

0:00 ખાલી ક્ષેત્રોવાળી એક પોલિસી રો નલ પોઇન્ટર સાથે અથડાય છે, અને Google Cloud ક્રેશ થાય છે એક સાથે દરેક ક્ષેત્રમાં — અને Cloudflare તેની સાથે નિષ્ફળ જાય છે, પછી Google ને "તૃતીય-પક્ષ પ્રદાતા" કહે છે. 12 જૂન, 2025, 17:49 UTC. Google નો અહેવાલ: સર્વિસ કંટ્રોલ, જે દરેક API વિનંતીને મંજૂર કરતું બાઇનરી છે, ત્રણ કલાક માટે ક્રેશ લૂપમાં. Cloudflare's, તે જ સાંજે: Workers KV, નેવું ટકા નિષ્ફળ, બે કલાક અઠ્ઠાવીસ મિનિટ.

0:23 કેવી રીતે બન્યું, શા માટે એક ખાલી ક્ષેત્ર સેકન્ડોમાં વૈશ્વિક બન્યું, અને કોને દોષ મળે છે. આ છે The Daily Diff, પોસ્ટમોર્ટમ. 29 મે. સર્વિસ કંટ્રોલને એક નવો ક્વોટા ચેક મળે છે, જે એક

સમયરેખા: 29 મે → 17:45 → ક્રેશ લૂપ → લાલ બટન → 17:52 Cloudflare

0:35 લાલ બટન — સાથે ક્ષેત્ર દ્વારા ક્ષેત્રમાં મોકલવામાં આવે છે, પરંતુ નવો કોડ પાથ રોલઆઉટ દરમિયાન ક્યારેય ચાલતો નથી; કંઈપણ તેને હજુ સુધી ટ્રિગર કરતું નથી. કોઈ નલ ચેક નહીં. કોઈ ફીચર ફ્લેગ નહીં. 17:45. ખાલી ક્ષેત્રો સાથેનો એક પોલિસી ફેરફાર સ્પાનર ટેબલમાં આવે છે. ક્વોટા વૈશ્વિક છે, તેથી રો સેકન્ડોમાં બધે પ્રતિકૃતિ પામે છે. દરેક સર્વિસ કંટ્રોલ બાઇનરી તેને વાંચે છે, નલ પોઇન્ટરને હિટ કરે છે, ક્રેશ થાય છે, ફરી શરૂ થાય છે, તેને ફરીથી વાંચે છે. દરેક API કૉલ: 503.

0:55 Google ઝડપી છે: બે મિનિટમાં ટ્રાયેજ, દસ મિનિટમાં મૂળ કારણ. લાલ બટન ચાલીસ મિનિટમાં બહાર છે, અને નાના ક્ષેત્રો પહેલા પુનઃપ્રાપ્ત થાય છે. સ્ટેટસ પેજ એક કલાકમાં તેની પ્રથમ અપડેટ પોસ્ટ કરે છે, કારણ કે તે Google Cloud પર ચાલે છે. 17:52. Cloudflare ની WARP ટીમ નવા ઉપકરણોને રજીસ્ટર કરવામાં નિષ્ફળ થતા જુએ છે. Workers KV, જે Cloudflare નો અડધો ભાગ રૂપરેખા અને ઓળખ માટે ઉપયોગ કરે છે, તૃતીય-પક્ષ ક્લાઉડ પર રહે છે. એક્સેસ દરેક લોગિનમાં નિષ્ફળ જાય છે — ડિઝાઇન દ્વારા, તે બંધ નિષ્ફળ જાય છે.

1:20 Workers AI દરેક અનુમાનમાં નિષ્ફળ જાય છે. 19:11, Gergely Orosz: એક સાથે બે સ્વતંત્ર ક્લાઉડ ડાઉન, પહેલા ક્યારેય જોયું નથી. 19:32, Google સપોર્ટ એક વપરાશકર્તાને કહે છે કે કોઈ જાણીતી અડચણો નથી — તમારી કૂકીઝ સાફ કરવાનો પ્રયાસ કરો. બીજી બધી જગ્યાઓ 19:48 સુધીમાં પુનઃપ્રાપ્ત થાય છે.

us-central1: ટોળાની અસર

1:34 us-central1 નથી: ફરી શરૂ થતા કાર્યો સમાન સ્પાનર ટેબલને ભરી દે છે, કોઈ રેન્ડમાઇઝ્ડ બેકઓફ નહીં, તેથી Google તેમને હાથથી થ્રોટલ કરે છે. બે કલાક ચાલીસ મિનિટ. એક: પોલિસી ચેક વિનંતી પાથની અંદર બેસે છે; જ્યારે ચેક મૃત્યુ પામે છે,

પદ્ધતિ: વિનંતી પાથમાં તપાસ, વૈશ્વિક પ્રતિકૃતિ, એક વિક્રેતા

1:46 API મૃત્યુ પામે છે. બે: ક્વોટા ડેટા કોઈ સ્ટેજિંગ વિના વૈશ્વિક બને છે; એક ખરાબ રો એક વૈશ્વિક રો છે. ત્રણ: Cloudflare જાણતું હતું. Workers KV તેના પોતાના R2 માં મધ્ય-સ્થળાંતરિત હતું, એક પ્રદાતા સુધી — પોસ્ટમોર્ટમ તેને કવરેજમાં અંતર કહે છે. પોસ્ટમોર્ટમ તેને કવરેજમાં અંતર કહે છે.

git blame — વિભાજન

2:00 git blame. Google, પચાસ-પાંચ ટકા: કોઈ નલ ચેક નહીં, કોઈ ફીચર ફ્લેગ નહીં, કોઈ બેકઓફ નહીં — તેમના અહેવાલમાં કહેવામાં આવ્યું છે કે એક ફ્લેગ તેને સ્ટેજિંગમાં પકડી લેત. વૈશ્વિક પ્રતિકૃતિ, વીસ: એક રો, દરેક ક્ષેત્ર, સેકન્ડો. Cloudflare, વીસ: એક વિક્રેતાના સ્ટોર પર અડધી પ્રોડક્ટ લાઇન, અને એક પોસ્ટમોર્ટમ જે ક્યારેય Google કહેતું નથી. સ્ટેટસ પેજ, પાંચ, જેના પર તે અહેવાલ આપે છે તેના પર રહેવા માટે. વિસ્ફોટ ત્રિજ્યા: સિત્તેર Google Cloud પ્રોડક્ટ્સ, દસ Workspace એપ્સ,

વિસ્ફોટ ત્રિજ્યા

2:23 દરેક ક્ષેત્ર. ત્રણ કલાક. Cloudflare પર: Access, WARP, Workers AI, Pages, Stream — અઢી કલાક. Hacker News, ચૌદસો પોઇન્ટ; ટોચની ટિપ્પણી: સ્ટેટસ પેજ લીલું છે.

ચુકાદો + સોમવારની લાઇન

2:33 ચુકાદો, પોસ્ટમોર્ટમ: SHIP IT. બંને પોસ્ટમોર્ટમ ત્રીસ કલાકની અંદર આવે છે, બંને પોતાને દોષી ઠેરવે છે, અને Google ના સુધારા નક્કર છે: ખુલ્લા નિષ્ફળ, ફ્લેગ્સ ડિફોલ્ટ રૂપે બંધ, એક્સપોનેન્શિયલ બેકઓફ. સોમવારની લાઇન: એક ફ્લેગ પાછળ નવો કોડ જે બંધ થાય છે, અને જ્યાં ડેટા આવે છે ત્યાં એક નલ ચેક. મને તે ઘટના મોકલો જેના વિશે તમે હજી પણ વાત કરી શકતા નથી, ટિપ્પણીઓમાં, અથવા the daily diff dot dev પર. અને તે આજનો diff છે.

2:53 હું Axrisi થી નિકો છું. RESPONSIBLY મર્જ કરો.

સ્ત્રોતો

  1. Google Cloud Service Health, Incident Report (Jun 13, 2025) + Mini Incident Report (Jun 12)status.cloud.google.com
  2. Cloudflare, "Cloudflare service outage June 12, 2025" (Jun 12, 2025, 22:00 UTC)blog.cloudflare.com
  3. Cloudflare Status, "Broad Cloudflare service outages" (18:19–21:31 UTC)www.cloudflarestatus.com
  4. Gergely Orosz, 19:11 UTC, "Their infra is fully independent AFAIK"x.com
  5. @Google support, 19:32 UTC, "there aren't any known service disruptions"x.com
  6. Thomas Kurian (Google Cloud CEO), Jun 13 01:35 UTCx.com
  7. Hacker News, "GCP Outage" (1,468 points)news.ycombinator.com
  8. Hacker News, "Cloudflare was down" (341 points)news.ycombinator.com
  9. Hacker News, "Google Cloud Incident Report – 2025-06-13" (209 points)news.ycombinator.com

સંબંધિત વીડિયો

postmortem · gu · 16 સપ્ટે, 2026

ફેસબુકે પોતાને ઇન્ટરનેટ પરથી ડિલીટ કરી દીધું. છ કલાક.

ફેસબુક ઇન્ટરનેટ પરથી પોતાનું સરનામું હટાવે છે, અને જ્યારે તેના એન્જિનિયરો તેને પાછું લાવવા આવે છે, ત્યારે બેજ રીડર પણ બંધ હોય છે, કારણ કે તે ફેસબુક પર ચાલે છે. 4 ઓક્ટોબર, 2021, 15:40 UTC: એક નિયમિત બે

3:01 ↗
postmortem · gu · 25 સપ્ટે, 2026

એક મિલિસેકન્ડના બગે યુકેના હવાઈ ટ્રાફિકને રોકી દીધો. છ કલાક સુધી.

મંગળવાર, 8 સપ્ટેમ્બરના રોજ સવારે 10:00 વાગ્યે, NATSના નેશનલ એરસ્પેસ સિસ્ટમ (NAS) માં એક રૂટિન સ્ક્વૉક-કોડ વિનંતીને ઉચ્ચ-પ્રાથમિકતાવાળા સંદેશ દ્વારા અટકાવવામાં આવે છે જ્યારે તે મૂલ્યને અપડેટ કરવાની પ્ર

3:06 ↗
postmortem · gu · 22 સપ્ટે, 2026

એક રીબૂટે ટેલ્સ્ટ્રાને 2006માં મોકલી દીધું. નવ મિલિયન ફોન.

મેલબોર્નમાં એક એન્જિનિયર સવારે 2:50 વાગ્યે ટાઈમિંગ ચેસિસને ફરીથી ચાલુ કરે છે, અને સવારના નાસ્તા સુધીમાં ઓસ્ટ્રેલિયાનું સૌથી મોટું મોબાઈલ નેટવર્ક સહમત થાય છે કે તે નવેમ્બર 2006 છે. 8 જુલાઈ, 2026: ટેલ્સ

3:15 ↗
postmortem · gu · 12 સપ્ટે, 2026

એક રેગ્યુલર એક્સપ્રેશને ક્લાઉડફ્લેરને નીચે લાવ્યું. ૨૭ મિનિટ.

૨ જુલાઈ, ૨૦૧૯, ૧૩:૪૨ UTC: ક્લાઉડફ્લેરના વેબ એપ્લિકેશન ફાયરવોલ માટે એક નવો નિયમ લગભગ બે સેકન્ડમાં ૧૮૦+ શહેરોમાં લાઇવ થાય છે. તે સિમ્યુલેટ મોડમાં XSS નિયમ છે, તેથી તે કંઈપણ અવરોધિત કરતું નથી, પરંતુ તે હ

3:00 ↗