Google Cloud het op 'n leë veld neergestort. Drie ure.
’n Beleidsry met ’n paar leë velde tref ’n nulwyser, en Google Cloud stort gelyktydig in elke streek neer – dan val Cloudflare daarmee saam.
’n Beleidsry met ’n paar leë velde tref ’n nulwyser, en Google Cloud stort gelyktydig in elke streek neer – dan val Cloudflare daarmee saam. 12 Junie 2025, 17:49 UTC: Diensbeheer, die binêre wat elke Google Cloud API-versoek goedkeur, lees ’n kwota-beleidverandering met “onbedoelde leë velde”, tref ’n kodepaaie wat twee weke vroeër verskeep is met geen nulondersoek en geen kenmerkvlag nie, en gaan in 'n ineenstortlus in elke streek – die ry het binne sekondes wêreldwyd gerepliseer. Eksterne API’s gee 503 vir drie uur terug; us-central1 neem 2 uur 40 minute omdat die herbegin take dieselfde Spanner-tabel bestorm met geen ewekansige terugval nie. Drie minute in Google se onderbreking, verloor Cloudflare se Workers KV – waarvan die bron van waarheid op “’n derdeparty-wolkverskaffer” sit – 90% van versoeke, en Access, WARP, Workers AI, Pages, Stream en Turnstile gaan daarmee saam vir 2 uur 28 minute af. Google se statusbladsy plaas sy eerste opdatering ’n uur laat, omdat dit op Google Cloud loop.
Lees die geskrewe uitgawe (Engels) ↗
Wat hierdie video dek
- ’n Leë veld, ’n nulwyser, elke streek
- Tydlyn: 29 Mei → 17:45 → ineenstortlus → rooi knoppie → 17:52 Cloudflare
- us-central1: die kudde-effek
- Meganisme: kontrole in die versoekpad, globale replikasie, een verskaffer
- git blame — die skeiding
Vertaalde transkripsie
Vertaal uit die oorspronklike Engelse vertelling. Beskikbare klank en onderskrifte word deur YouTube beheer.
’n Leë veld, ’n nulwyser, elke streek
0:00 'n Beleidsry met leë velde tref 'n nulwyser, en Google Cloud stort neer in elke streek tegelyk — en Cloudflare val daarmee saam, en noem dan Google 'n "derdeparty-verskaffer". 12 Junie 2025, 17:49 UTC. Google se verslag: Service Control, die binêre wat elke API-versoek goedkeur, in 'n ineenstortlus vir drie uur. Cloudflare s'n, dieselfde aand: Workers KV, negentig persent misluk, twee uur agt-en-twintig.
0:23 Hoe dit gebeur het, waarom een leë veld binne sekondes globaal gegaan het, en wie die skuld kry. Dit is The Daily Diff, nadoodse ondersoek. 29 Mei. Service Control kry 'n nuwe kwota-kontrole, verskeep streek vir streek met 'n
Tydlyn: 29 Mei → 17:45 → ineenstortlus → rooi knoppie → 17:52 Cloudflare
0:35 rooi knoppie — maar die nuwe kodepaaie loop nooit tydens uitrol nie; niks aktiveer dit nog nie. Geen nulondersoek. Geen kenmerkvlag nie. 17:45. 'n Beleidsverandering met leë velde land in die Spanner-tabel. Kwota is globaal, so die ry repliseer binne sekondes oral. Elke Service Control-binêre lees dit, tref die nulwyser, stort neer, herbegin, lees dit weer. Elke API-oproep: 503.
0:55 Google is vinnig: trias binne twee minute, oorsaak binne tien. Die rooi knoppie is binne veertig uit, en klein streke herstel eerste. Die statusbladsy plaas sy eerste opdatering 'n uur in, omdat dit op Google Cloud loop. 17:52. Cloudflare se WARP-span sien nuwe toestelle wat nie kan registreer nie. Workers KV, die stoorhelfte wat Cloudflare vir konfigurasie en identiteit gebruik, leef op 'n derdeparty-wolk. Access misluk elke aanmelding — volgens ontwerp misluk dit geslote.
1:20 Workers AI misluk elke inferensie. 19:11, Gergely Orosz: twee onafhanklike wolke tegelyk af, nog nooit gesien nie. 19:32, Google-ondersteuning vertel 'n gebruiker daar is geen bekende onderbrekings nie — probeer om jou koekies skoon te maak. Elders herstel alles teen 19:48.
us-central1: die kudde-effek
1:34 us-central1 doen nie: herbegin take bestorm dieselfde Spanner-tabel, geen ewekansige terugval nie, so Google versper hulle met die hand. Twee uur veertig. Een: die beleidskontrole sit binne die versoekpad; wanneer die kontrole sterf,
Meganisme: kontrole in die versoekpad, globale replikasie, een verskaffer
1:46 sterf die API. Twee: kwotadata gaan globaal sonder staging; 'n slegte ry is 'n globale ry. Drie: Cloudflare het geweet. Workers KV was besig met migrasie na sy eie R2, af na een verskaffer — die nadoodse ondersoek noem dit 'n leemte in dekking.
git blame — die skeiding
2:00 git blame. Google, vyf-en-vyftig persent: geen nulondersoek, geen kenmerkvlag nie, geen terugval nie — hul verslag sê 'n vlag sou dit in staging gevang het. Globale replikasie, twintig: een ry, elke streek, sekondes. Cloudflare, twintig: 'n halwe produklyn op een verskaffer se stoor, en 'n nadoodse ondersoek wat nooit Google sê nie. Die statusbladsy, vyf, vir leef op dit waaroor dit verslag doen. Impak radius: sewentig Google Cloud-produkte, tien Workspace-toepassings,
Impak radius
2:23 elke streek. Drie uur. By Cloudflare: Access, WARP, Workers AI, Pages, Stream — twee en 'n half. Hacker News, veertienhonderd punte; topkommentaar: die statusbladsy is groen.
Oordeel + die Maandag-lyn
2:33 Oordeel, nadoodse ondersoek: SHIP IT. Albei nadoodse ondersoeke land binne dertig uur, albei blameer hulself, en Google se oplossings is konkreet: misluk oop, vlae by verstek af, eksponensiële terugval. Die Maandag-lyn: nuwe kode agter 'n vlag wat afskakel, en 'n nulondersoek waar die data inkom. Stuur vir my die insident waaroor jy nog steeds nie mag praat nie, in die kommentaar, of by the daily diff dot dev. En dit is die verskil vir vandag.
2:53 Ek is Niko van Axrisi. Voeg verantwoordelik saam.
Bronne
- Google Cloud Service Health, Incident Report (Jun 13, 2025) + Mini Incident Report (Jun 12)status.cloud.google.com
- Cloudflare, "Cloudflare service outage June 12, 2025" (Jun 12, 2025, 22:00 UTC)blog.cloudflare.com
- Cloudflare Status, "Broad Cloudflare service outages" (18:19–21:31 UTC)www.cloudflarestatus.com
- Gergely Orosz, 19:11 UTC, "Their infra is fully independent AFAIK"x.com
- @Google support, 19:32 UTC, "there aren't any known service disruptions"x.com
- Thomas Kurian (Google Cloud CEO), Jun 13 01:35 UTCx.com
- Hacker News, "GCP Outage" (1,468 points)news.ycombinator.com
- Hacker News, "Cloudflare was down" (341 points)news.ycombinator.com
- Hacker News, "Google Cloud Incident Report – 2025-06-13" (209 points)news.ycombinator.com
