Google Cloud het op 'n leë veld neergestort. Drie ure.
’n Beleidsry met ’n paar leë velde tref ’n nulwyser, en Google Cloud stort gelyktydig in elke streek neer – dan val Cloudflare daarmee saam.
’n Beleidsry met ’n paar leë velde tref ’n nulwyser, en Google Cloud stort gelyktydig in elke streek neer – dan val Cloudflare daarmee saam. 12 Junie 2025, 17:49 UTC: Diensbeheer, die binêre wat elke Google Cloud API-versoek goedkeur, lees ’n kwota-beleidverandering met “onbedoelde leë velde”, tref ’n kodepaaie wat twee weke vroeër verskeep is met geen nulondersoek en geen kenmerkvlag nie, en gaan in 'n ineenstortlus in elke streek – die ry het binne sekondes wêreldwyd gerepliseer. Eksterne API’s gee 503 vir drie uur terug; us-central1 neem 2 uur 40 minute omdat die herbegin take dieselfde Spanner-tabel bestorm met geen ewekansige terugval nie. Drie minute in Google se onderbreking, verloor Cloudflare se Workers KV – waarvan die bron van waarheid op “’n derdeparty-wolkverskaffer” sit – 90% van versoeke, en Access, WARP, Workers AI, Pages, Stream en Turnstile gaan daarmee saam vir 2 uur 28 minute af. Google se statusbladsy plaas sy eerste opdatering ’n uur laat, omdat dit op Google Cloud loop.
Lees die geskrewe uitgawe (Engels) ↗
Wat hierdie video dek
- ’n Leë veld, ’n nulwyser, elke streek
- Tydlyn: 29 Mei → 17:45 → ineenstortlus → rooi knoppie → 17:52 Cloudflare
- us-central1: die kudde-effek
- Meganisme: kontrole in die versoekpad, globale replikasie, een verskaffer
- git blame — die skeiding
Vrae en antwoorde
Wat het die Google Cloud-onderbreking van 12 Junie 2025 veroorsaak?
'n Kwotabeleidry met leë velde het Service Control, die binêre wat elke Google Cloud API-versoek goedkeur, laat ineenstort. Volgens Google se insidentverslag het die ry 'n kodepad getref sonder 'n nulkontrole en sonder 'n kenmerkvlag, en die binêre het in elke streek in 'n ineenstortingslus gegaan. Eksterne API's het ongeveer drie uur lank 503-foute teruggegee.
Hoekom kan die herstart van dienste 'n wolkonderbreking langer in een streek laat duur?
Baie take wat gelyktydig herbegin, kan dieselfde gedeelde databasis oorlaai. In us-central1 het Google se herstarttake een Spanner-tabel sonder ewekansige terugwaartse vertraging bestorm, so Google het hulle met die hand beperk. Daardie streek het twee uur veertig minute geneem om te herstel, terwyl ander streke teen 19:48 herstel het.
Hoekom het Cloudflare-dienste misluk toe Google Cloud af was?
Cloudflare se Workers KV het sy bron van waarheid op 'n derdeparty-wolkverskaffer gehou. Volgens Cloudflare het Workers KV 90% van versoeke verloor, en Access, WARP, Workers AI, Pages, Stream en Turnstile het daarmee saam 2 uur 28 minute lank afgegaan. Die episode merk op dat Workers KV besig was met 'n migrasie na Cloudflare se eie R2-berging.
Hoe kan spanne verhoed dat 'n slegte konfigurasie-ry 'n diens in elke streek laat ineenstort?
Drie praktyke volg uit hierdie insident. Hou nuwe kode agter 'n kenmerkvlag wat afskakel, kontroleer vir nul waar data binnekom, en faseer kwotadata in plaas daarvan om dit wêreldwyd tegelyk te repliseer. Google se verslag sê 'n vlag sou die fout in die toetsfase gevang het, en sy oplossings sluit in mislukking-oop en eksponensiële terugwaartse vertraging.
Stel die Google Cloud- en Cloudflare-nadoodse ondersoeke van 12 Junie 'n goeie voorbeeld vir insidentverslae?
The Daily Diff se uitspraak was SHIP IT. Beide nadoodse ondersoeke het binne dertig uur geland en beide het hul eie maatskappye geblameer. Google se oplossings was konkreet, naamlik mislukking-oop, vlae by verstek af en eksponensiële terugwaartse vertraging. Die les vir Maandag is om nuwe kode agter 'n vlag wat af begin, te verskeep.
Vertaalde transkripsie
Vertaal uit die oorspronklike Engelse vertelling. Beskikbare klank en onderskrifte word deur YouTube beheer.
’n Leë veld, ’n nulwyser, elke streek
0:00 'n Beleidsry met leë velde tref 'n nulwyser, en Google Cloud stort neer in elke streek tegelyk — en Cloudflare val daarmee saam, en noem dan Google 'n "derdeparty-verskaffer". 12 Junie 2025, 17:49 UTC. Google se verslag: Service Control, die binêre wat elke API-versoek goedkeur, in 'n ineenstortlus vir drie uur. Cloudflare s'n, dieselfde aand: Workers KV, negentig persent misluk, twee uur agt-en-twintig.
0:23 Hoe dit gebeur het, waarom een leë veld binne sekondes globaal gegaan het, en wie die skuld kry. Dit is The Daily Diff, nadoodse ondersoek. 29 Mei. Service Control kry 'n nuwe kwota-kontrole, verskeep streek vir streek met 'n
Tydlyn: 29 Mei → 17:45 → ineenstortlus → rooi knoppie → 17:52 Cloudflare
0:35 rooi knoppie — maar die nuwe kodepaaie loop nooit tydens uitrol nie; niks aktiveer dit nog nie. Geen nulondersoek. Geen kenmerkvlag nie. 17:45. 'n Beleidsverandering met leë velde land in die Spanner-tabel. Kwota is globaal, so die ry repliseer binne sekondes oral. Elke Service Control-binêre lees dit, tref die nulwyser, stort neer, herbegin, lees dit weer. Elke API-oproep: 503.
0:55 Google is vinnig: trias binne twee minute, oorsaak binne tien. Die rooi knoppie is binne veertig uit, en klein streke herstel eerste. Die statusbladsy plaas sy eerste opdatering 'n uur in, omdat dit op Google Cloud loop. 17:52. Cloudflare se WARP-span sien nuwe toestelle wat nie kan registreer nie. Workers KV, die stoorhelfte wat Cloudflare vir konfigurasie en identiteit gebruik, leef op 'n derdeparty-wolk. Access misluk elke aanmelding — volgens ontwerp misluk dit geslote.
1:20 Workers AI misluk elke inferensie. 19:11, Gergely Orosz: twee onafhanklike wolke tegelyk af, nog nooit gesien nie. 19:32, Google-ondersteuning vertel 'n gebruiker daar is geen bekende onderbrekings nie — probeer om jou koekies skoon te maak. Elders herstel alles teen 19:48.
us-central1: die kudde-effek
1:34 us-central1 doen nie: herbegin take bestorm dieselfde Spanner-tabel, geen ewekansige terugval nie, so Google versper hulle met die hand. Twee uur veertig. Een: die beleidskontrole sit binne die versoekpad; wanneer die kontrole sterf,
Meganisme: kontrole in die versoekpad, globale replikasie, een verskaffer
1:46 sterf die API. Twee: kwotadata gaan globaal sonder staging; 'n slegte ry is 'n globale ry. Drie: Cloudflare het geweet. Workers KV was besig met migrasie na sy eie R2, af na een verskaffer — die nadoodse ondersoek noem dit 'n leemte in dekking.
git blame — die skeiding
2:00 git blame. Google, vyf-en-vyftig persent: geen nulondersoek, geen kenmerkvlag nie, geen terugval nie — hul verslag sê 'n vlag sou dit in staging gevang het. Globale replikasie, twintig: een ry, elke streek, sekondes. Cloudflare, twintig: 'n halwe produklyn op een verskaffer se stoor, en 'n nadoodse ondersoek wat nooit Google sê nie. Die statusbladsy, vyf, vir leef op dit waaroor dit verslag doen. Impak radius: sewentig Google Cloud-produkte, tien Workspace-toepassings,
Impak radius
2:23 elke streek. Drie uur. By Cloudflare: Access, WARP, Workers AI, Pages, Stream — twee en 'n half. Hacker News, veertienhonderd punte; topkommentaar: die statusbladsy is groen.
Oordeel + die Maandag-lyn
2:33 Oordeel, nadoodse ondersoek: SHIP IT. Albei nadoodse ondersoeke land binne dertig uur, albei blameer hulself, en Google se oplossings is konkreet: misluk oop, vlae by verstek af, eksponensiële terugval. Die Maandag-lyn: nuwe kode agter 'n vlag wat afskakel, en 'n nulondersoek waar die data inkom. Stuur vir my die insident waaroor jy nog steeds nie mag praat nie, in die kommentaar, of by the daily diff dot dev. En dit is die verskil vir vandag.
2:53 Ek is Niko van Axrisi. Voeg verantwoordelik saam.
Bronne
- Google Cloud Service Health, Incident Report (Jun 13, 2025) + Mini Incident Report (Jun 12)status.cloud.google.com
- Cloudflare, "Cloudflare service outage June 12, 2025" (Jun 12, 2025, 22:00 UTC)blog.cloudflare.com
- Cloudflare Status, "Broad Cloudflare service outages" (18:19–21:31 UTC)www.cloudflarestatus.com
- Gergely Orosz, 19:11 UTC, "Their infra is fully independent AFAIK"x.com
- @Google support, 19:32 UTC, "there aren't any known service disruptions"x.com
- Thomas Kurian (Google Cloud CEO), Jun 13 01:35 UTCx.com
- Hacker News, "GCP Outage" (1,468 points)news.ycombinator.com
- Hacker News, "Cloudflare was down" (341 points)news.ycombinator.com
- Hacker News, "Google Cloud Incident Report – 2025-06-13" (209 points)news.ycombinator.com



