+− THE DAILY DIFFdev & AI news
SHIP IT

ਗੂਗਲ ਕਲਾਉਡ ਖਾਲੀ ਖੇਤਰ 'ਤੇ ਕ੍ਰੈਸ਼ ਹੋ ਗਿਆ। ਤਿੰਨ ਘੰਟੇ।

ਕੁਝ ਖਾਲੀ ਖੇਤਰਾਂ ਵਾਲੀ ਇੱਕ ਨੀਤੀ ਕਤਾਰ ਇੱਕ ਨਲ ਪੁਆਇੰਟਰ ਨੂੰ ਹਿੱਟ ਕਰਦੀ ਹੈ, ਅਤੇ ਗੂਗਲ ਕਲਾਉਡ ਇੱਕੋ ਸਮੇਂ ਹਰ ਖੇਤਰ ਵਿੱਚ ਕ੍ਰੈਸ਼ ਹੋ ਜਾਂਦਾ ਹੈ — ਫਿਰ ਕਲਾਉਡਫਲੇਅਰ ਵੀ ਇਸਦੇ ਨਾਲ ਡਿੱਗ ਜਾਂਦਾ ਹੈ।

Want to see our stories first on Google? Add us to your preferred sources — it helps us grow.

ਕੁਝ ਖਾਲੀ ਖੇਤਰਾਂ ਵਾਲੀ ਇੱਕ ਨੀਤੀ ਕਤਾਰ ਇੱਕ ਨਲ ਪੁਆਇੰਟਰ ਨੂੰ ਹਿੱਟ ਕਰਦੀ ਹੈ, ਅਤੇ ਗੂਗਲ ਕਲਾਉਡ ਇੱਕੋ ਸਮੇਂ ਹਰ ਖੇਤਰ ਵਿੱਚ ਕ੍ਰੈਸ਼ ਹੋ ਜਾਂਦਾ ਹੈ — ਫਿਰ ਕਲਾਉਡਫਲੇਅਰ ਵੀ ਇਸਦੇ ਨਾਲ ਡਿੱਗ ਜਾਂਦਾ ਹੈ। 12 ਜੂਨ, 2025, 17:49 UTC: ਸਰਵਿਸ ਕੰਟਰੋਲ, ਉਹ ਬਾਈਨਰੀ ਜੋ ਹਰ ਗੂਗਲ ਕਲਾਉਡ API ਬੇਨਤੀ ਨੂੰ ਮਨਜ਼ੂਰੀ ਦਿੰਦੀ ਹੈ, "ਅਣਇੱਛਤ ਖਾਲੀ ਖੇਤਰਾਂ" ਨਾਲ ਇੱਕ ਕੋਟਾ-ਨੀਤੀ ਤਬਦੀਲੀ ਨੂੰ ਪੜ੍ਹਦੀ ਹੈ, ਇੱਕ ਕੋਡ ਪਾਥ ਨੂੰ ਹਿੱਟ ਕਰਦੀ ਹੈ ਜੋ ਦੋ ਹਫ਼ਤੇ ਪਹਿਲਾਂ ਬਿਨਾਂ ਕਿਸੇ ਨਲ ਚੈਕ ਅਤੇ ਬਿਨਾਂ ਕਿਸੇ ਫੀਚਰ ਫਲੈਗ ਦੇ ਭੇਜਿਆ ਗਿਆ ਸੀ, ਅਤੇ ਹਰ ਖੇਤਰ ਵਿੱਚ ਇੱਕ ਕ੍ਰੈਸ਼ ਲੂਪ ਵਿੱਚ ਚਲੀ ਜਾਂਦੀ ਹੈ — ਕਤਾਰ ਸਕਿੰਟਾਂ ਵਿੱਚ ਵਿਸ਼ਵ ਪੱਧਰ 'ਤੇ ਪ੍ਰਤੀਕ੍ਰਿਤੀ ਹੋ ਗਈ ਸੀ। ਬਾਹਰੀ API ਤਿੰਨ ਘੰਟਿਆਂ ਲਈ 503 ਵਾਪਸ ਕਰਦੇ ਹਨ; us-central1 2 ਘੰਟੇ 40 ਮਿੰਟ ਲੈਂਦਾ ਹੈ ਕਿਉਂਕਿ ਮੁੜ ਚਾਲੂ ਕਰਨ ਵਾਲੇ ਕਾਰਜ ਬਿਨਾਂ ਕਿਸੇ ਬੇਤਰਤੀਬ ਬੈਕਆਫ ਦੇ ਉਸੇ ਸਪੈਨਰ ਟੇਬਲ 'ਤੇ ਹਮਲਾ ਕਰਦੇ ਹਨ। ਗੂਗਲ ਦੇ ਆਊਟੇਜ ਦੇ ਤਿੰਨ ਮਿੰਟਾਂ ਦੇ ਅੰਦਰ, ਕਲਾਉਡਫਲੇਅਰ ਦਾ Workers KV — ਜਿਸਦਾ ਸੱਚ ਦਾ ਸਰੋਤ "ਇੱਕ ਤੀਜੀ-ਧਿਰ ਦੇ ਕਲਾਉਡ ਪ੍ਰਦਾਤਾ" 'ਤੇ ਬੈਠਾ ਹੈ — 90 % ਬੇਨਤੀਆਂ ਗੁਆ ਦਿੰਦਾ ਹੈ, ਅਤੇ Access, WARP, Workers AI, Pages, Stream ਅਤੇ Turnstile ਇਸਦੇ ਨਾਲ 2 ਘੰਟੇ 28 ਮਿੰਟਾਂ ਲਈ ਡਿੱਗ ਜਾਂਦੇ ਹਨ। ਗੂਗਲ ਦਾ ਸਥਿਤੀ ਪੰਨਾ ਆਪਣਾ ਪਹਿਲਾ ਅਪਡੇਟ ਇੱਕ ਘੰਟਾ ਦੇਰੀ ਨਾਲ ਪੋਸਟ ਕਰਦਾ ਹੈ, ਕਿਉਂਕਿ ਇਹ ਗੂਗਲ ਕਲਾਉਡ 'ਤੇ ਚੱਲਦਾ ਹੈ।

ਲਿਖਤੀ ਐਡੀਸ਼ਨ ਪੜ੍ਹੋ (ਅੰਗਰੇਜ਼ੀ) ↗

ਇਹ ਵੀਡੀਓ ਕੀ ਕਵਰ ਕਰਦਾ ਹੈ

  • ਇੱਕ ਖਾਲੀ ਖੇਤਰ, ਇੱਕ ਨਲ ਪੁਆਇੰਟਰ, ਹਰ ਖੇਤਰ
  • ਸਮਾਂਰੇਖਾ: 29 ਮਈ → 17:45 → ਕ੍ਰੈਸ਼ ਲੂਪ → ਲਾਲ ਬਟਨ → 17:52 ਕਲਾਉਡਫਲੇਅਰ
  • us-central1: ਝੁੰਡ ਦਾ ਪ੍ਰਭਾਵ
  • ਵਿਧੀ: ਬੇਨਤੀ ਪਾਥ ਵਿੱਚ ਜਾਂਚ, ਗਲੋਬਲ ਪ੍ਰਤੀਕ੍ਰਿਤੀ, ਇੱਕ ਵਿਕਰੇਤਾ
  • git blame — ਵੰਡ

ਸਵਾਲ ਅਤੇ ਜਵਾਬ

12 ਜੂਨ, 2025 ਨੂੰ ਗੂਗਲ ਕਲਾਉਡ ਆਊਟੇਜ ਦਾ ਕਾਰਨ ਕੀ ਸੀ?

ਖਾਲੀ ਖੇਤਰਾਂ ਵਾਲੀ ਕੋਟਾ-ਨੀਤੀ ਦੀ ਇੱਕ ਕਤਾਰ ਨੇ ਸਰਵਿਸ ਕੰਟਰੋਲ ਨੂੰ ਕ੍ਰੈਸ਼ ਕਰ ਦਿੱਤਾ, ਉਹ ਬਾਈਨਰੀ ਜੋ ਹਰ ਗੂਗਲ ਕਲਾਉਡ API ਬੇਨਤੀ ਨੂੰ ਮਨਜ਼ੂਰੀ ਦਿੰਦੀ ਹੈ। ਗੂਗਲ ਦੀ ਘਟਨਾ ਰਿਪੋਰਟ ਦੇ ਅਨੁਸਾਰ, ਕਤਾਰ ਨੇ ਇੱਕ ਕੋਡ ਪਾਥ ਨੂੰ ਮਾਰਿਆ ਜਿਸ ਵਿੱਚ ਕੋਈ ਨਲ ਜਾਂਚ ਨਹੀਂ ਸੀ ਅਤੇ ਕੋਈ ਫੀਚਰ ਫਲੈਗ ਨਹੀਂ ਸੀ, ਅਤੇ ਬਾਈਨਰੀ ਹਰ ਖੇਤਰ ਵਿੱਚ ਇੱਕ ਕ੍ਰੈਸ਼ ਲੂਪ ਵਿੱਚ ਚਲੀ ਗਈ। ਬਾਹਰੀ API ਨੇ ਲਗਭਗ ਤਿੰਨ ਘੰਟਿਆਂ ਲਈ 503 ਗਲਤੀਆਂ ਵਾਪਸ ਕੀਤੀਆਂ।

ਇਸ ਹਿੱਸੇ ਨੂੰ ਵੇਖੋ 0:32 · status.cloud.google.com

ਸੇਵਾਵਾਂ ਨੂੰ ਮੁੜ ਚਾਲੂ ਕਰਨਾ ਇੱਕ ਕਲਾਉਡ ਆਊਟੇਜ ਨੂੰ ਇੱਕ ਖੇਤਰ ਵਿੱਚ ਕਿਉਂ ਲੰਬਾ ਕਰ ਸਕਦਾ ਹੈ?

ਇੱਕ ਵਾਰ ਵਿੱਚ ਕਈ ਕਾਰਜਾਂ ਨੂੰ ਮੁੜ ਚਾਲੂ ਕਰਨਾ ਉਸੇ ਸਾਂਝੇ ਡਾਟਾਬੇਸ ਨੂੰ ਓਵਰਲੋਡ ਕਰ ਸਕਦਾ ਹੈ। us-central1 ਵਿੱਚ, ਗੂਗਲ ਦੇ ਮੁੜ ਚਾਲੂ ਹੋਣ ਵਾਲੇ ਕਾਰਜਾਂ ਨੇ ਇੱਕ ਸਪੈਨਰ ਟੇਬਲ ਨੂੰ ਬਿਨਾਂ ਕਿਸੇ ਰੈਂਡਮਾਈਜ਼ਡ ਬੈਕਆਫ ਦੇ ਠੋਕਰ ਮਾਰ ਦਿੱਤੀ, ਇਸ ਲਈ ਗੂਗਲ ਨੇ ਉਹਨਾਂ ਨੂੰ ਹੱਥੀਂ ਥ੍ਰੋਟਲ ਕੀਤਾ। ਉਸ ਖੇਤਰ ਨੂੰ ਠੀਕ ਹੋਣ ਵਿੱਚ ਦੋ ਘੰਟੇ ਚਾਲੀ ਮਿੰਟ ਲੱਗੇ, ਜਦੋਂ ਕਿ ਦੂਜੇ ਖੇਤਰ 19:48 ਤੱਕ ਠੀਕ ਹੋ ਗਏ।

ਇਸ ਹਿੱਸੇ ਨੂੰ ਵੇਖੋ 1:32 · status.cloud.google.com

ਜਦੋਂ ਗੂਗਲ ਕਲਾਉਡ ਬੰਦ ਹੋ ਗਿਆ ਤਾਂ ਕਲਾਉਡਫਲੇਅਰ ਸੇਵਾਵਾਂ ਕਿਉਂ ਫੇਲ੍ਹ ਹੋ ਗਈਆਂ?

ਕਲਾਉਡਫਲੇਅਰ ਦੇ ਵਰਕਰਸ KV ਨੇ ਆਪਣੀ ਸੱਚਾਈ ਦਾ ਸਰੋਤ ਇੱਕ ਤੀਜੀ-ਧਿਰ ਕਲਾਉਡ ਪ੍ਰਦਾਤਾ 'ਤੇ ਰੱਖਿਆ। ਕਲਾਉਡਫਲੇਅਰ ਦੇ ਅਨੁਸਾਰ, ਵਰਕਰਸ KV ਨੇ 90% ਬੇਨਤੀਆਂ ਗੁਆ ਦਿੱਤੀਆਂ, ਅਤੇ ਐਕਸੈਸ, WARP, ਵਰਕਰਸ AI, ਪੇਜ, ਸਟ੍ਰੀਮ ਅਤੇ ਟਰਨਸਟਾਈਲ ਇਸਦੇ ਨਾਲ 2 ਘੰਟੇ 28 ਮਿੰਟ ਲਈ ਬੰਦ ਹੋ ਗਏ। ਇਸ ਘਟਨਾ ਵਿੱਚ ਨੋਟ ਕੀਤਾ ਗਿਆ ਹੈ ਕਿ ਵਰਕਰਸ KV ਕਲਾਉਡਫਲੇਅਰ ਦੇ ਆਪਣੇ R2 ਸਟੋਰੇਜ ਵਿੱਚ ਮਾਈਗ੍ਰੇਸ਼ਨ ਦੇ ਅੱਧ ਵਿੱਚ ਸੀ।

ਇਸ ਹਿੱਸੇ ਨੂੰ ਵੇਖੋ 1:43 · blog.cloudflare.com · www.cloudflarestatus.com

ਟੀਮਾਂ ਇੱਕ ਖਰਾਬ ਸੰਰਚਨਾ ਕਤਾਰ ਨੂੰ ਹਰ ਖੇਤਰ ਵਿੱਚ ਇੱਕ ਸੇਵਾ ਨੂੰ ਕ੍ਰੈਸ਼ ਕਰਨ ਤੋਂ ਕਿਵੇਂ ਰੋਕ ਸਕਦੀਆਂ ਹਨ?

ਇਸ ਘਟਨਾ ਤੋਂ ਤਿੰਨ ਅਭਿਆਸ ਨਿਕਲਦੇ ਹਨ। ਨਵੇਂ ਕੋਡ ਨੂੰ ਇੱਕ ਫੀਚਰ ਫਲੈਗ ਦੇ ਪਿੱਛੇ ਰੱਖੋ ਜੋ ਬੰਦ ਹੋ ਜਾਂਦਾ ਹੈ, ਜਿੱਥੇ ਡਾਟਾ ਦਾਖਲ ਹੁੰਦਾ ਹੈ ਉੱਥੇ ਨਲ ਲਈ ਜਾਂਚ ਕਰੋ, ਅਤੇ ਕੋਟਾ ਡਾਟਾ ਨੂੰ ਇੱਕੋ ਵਾਰ ਵਿੱਚ ਵਿਸ਼ਵ ਪੱਧਰ 'ਤੇ ਪ੍ਰਤੀਕ੍ਰਿਤੀ ਕਰਨ ਦੀ ਬਜਾਏ ਸਟੇਜ ਕਰੋ। ਗੂਗਲ ਦੀ ਰਿਪੋਰਟ ਕਹਿੰਦੀ ਹੈ ਕਿ ਇੱਕ ਫਲੈਗ ਨੇ ਸਟੇਜਿੰਗ ਵਿੱਚ ਬੱਗ ਨੂੰ ਫੜ ਲਿਆ ਹੁੰਦਾ, ਅਤੇ ਇਸਦੇ ਫਿਕਸ ਵਿੱਚ ਫੇਲਿੰਗ ਓਪਨ ਅਤੇ ਐਕਸਪੋਨੈਂਸ਼ੀਅਲ ਬੈਕਆਫ ਸ਼ਾਮਲ ਹਨ।

ਇਸ ਹਿੱਸੇ ਨੂੰ ਵੇਖੋ 1:43 · status.cloud.google.com

ਕੀ 12 ਜੂਨ ਤੋਂ ਗੂਗਲ ਕਲਾਉਡ ਅਤੇ ਕਲਾਉਡਫਲੇਅਰ ਦੇ ਪੋਸਟਮਾਰਟਮ ਘਟਨਾ ਰਿਪੋਰਟਾਂ ਲਈ ਇੱਕ ਚੰਗੀ ਉਦਾਹਰਣ ਪੇਸ਼ ਕਰਦੇ ਹਨ?

The Daily Diff ਦਾ ਫੈਸਲਾ SHIP IT ਸੀ। ਦੋਵੇਂ ਪੋਸਟਮਾਰਟਮ ਤੀਹ ਘੰਟਿਆਂ ਦੇ ਅੰਦਰ ਅੰਦਰ ਹੋਏ ਅਤੇ ਦੋਵਾਂ ਨੇ ਆਪਣੀਆਂ ਕੰਪਨੀਆਂ ਨੂੰ ਦੋਸ਼ੀ ਠਹਿਰਾਇਆ। ਗੂਗਲ ਦੇ ਫਿਕਸ ਠੋਸ ਸਨ, ਜਿਵੇਂ ਕਿ ਫੇਲ ਓਪਨ, ਡਿਫਾਲਟ ਰੂਪ ਵਿੱਚ ਫਲੈਗ ਬੰਦ ਅਤੇ ਐਕਸਪੋਨੈਂਸ਼ੀਅਲ ਬੈਕਆਫ। ਸੋਮਵਾਰ ਲਈ ਮੁੱਖ ਗੱਲ ਇਹ ਹੈ ਕਿ ਨਵੇਂ ਕੋਡ ਨੂੰ ਇੱਕ ਫਲੈਗ ਦੇ ਪਿੱਛੇ ਭੇਜੋ ਜੋ ਸ਼ੁਰੂ ਵਿੱਚ ਬੰਦ ਹੋਵੇ।

ਇਸ ਹਿੱਸੇ ਨੂੰ ਵੇਖੋ 2:33 · status.cloud.google.com · blog.cloudflare.com

ਅਨੁਵਾਦਿਤ ਟ੍ਰਾਂਸਕ੍ਰਿਪਟ

ਮੂਲ ਅੰਗਰੇਜ਼ੀ ਬਿਰਤਾਂਤ ਤੋਂ ਅਨੁਵਾਦ ਕੀਤਾ ਗਿਆ। ਉਪਲਬਧ ਆਡੀਓ ਅਤੇ ਕੈਪਸ਼ਨ YouTube ਦੁਆਰਾ ਨਿਯੰਤਰਿਤ ਕੀਤੇ ਜਾਂਦੇ ਹਨ।

ਇੱਕ ਖਾਲੀ ਖੇਤਰ, ਇੱਕ ਨਲ ਪੁਆਇੰਟਰ, ਹਰ ਖੇਤਰ

0:00 ਖਾਲੀ ਖੇਤਰਾਂ ਵਾਲੀ ਇੱਕ ਨੀਤੀ ਕਤਾਰ ਇੱਕ ਨਲ ਪੁਆਇੰਟਰ ਨੂੰ ਹਿੱਟ ਕਰਦੀ ਹੈ, ਅਤੇ ਗੂਗਲ ਕਲਾਉਡ ਕ੍ਰੈਸ਼ ਹੋ ਜਾਂਦਾ ਹੈ ਇੱਕੋ ਸਮੇਂ ਹਰ ਖੇਤਰ ਵਿੱਚ — ਅਤੇ ਕਲਾਉਡਫਲੇਅਰ ਵੀ ਇਸਦੇ ਨਾਲ ਡਿੱਗ ਜਾਂਦਾ ਹੈ, ਫਿਰ ਗੂਗਲ ਨੂੰ "ਇੱਕ ਤੀਜੀ-ਧਿਰ ਪ੍ਰਦਾਤਾ" ਕਹਿੰਦਾ ਹੈ। 12 ਜੂਨ, 2025, 17:49 UTC। ਗੂਗਲ ਦੀ ਰਿਪੋਰਟ: ਸਰਵਿਸ ਕੰਟਰੋਲ, ਉਹ ਬਾਈਨਰੀ ਜੋ ਹਰ API ਬੇਨਤੀ ਨੂੰ ਮਨਜ਼ੂਰੀ ਦਿੰਦੀ ਹੈ, ਤਿੰਨ ਘੰਟਿਆਂ ਲਈ ਕ੍ਰੈਸ਼ ਲੂਪ ਵਿੱਚ। ਕਲਾਉਡਫਲੇਅਰ ਦਾ, ਉਸੇ ਸ਼ਾਮ: Workers KV, ਨੱਬੇ ਪ੍ਰਤੀਸ਼ਤ ਅਸਫਲ, ਦੋ ਘੰਟੇ ਅਠਾਈ ਮਿੰਟ।

0:23 ਇਹ ਕਿਵੇਂ ਹੋਇਆ, ਇੱਕ ਖਾਲੀ ਖੇਤਰ ਸਕਿੰਟਾਂ ਵਿੱਚ ਗਲੋਬਲ ਕਿਉਂ ਹੋ ਗਿਆ, ਅਤੇ ਦੋਸ਼ੀ ਕੌਣ ਹੈ। ਇਹ The Daily Diff, ਪੋਸਟਮਾਰਟਮ ਹੈ। 29 ਮਈ। ਸਰਵਿਸ ਕੰਟਰੋਲ ਨੂੰ ਇੱਕ ਨਵਾਂ ਕੋਟਾ ਚੈਕ ਮਿਲਦਾ ਹੈ, ਜੋ ਇੱਕ

ਸਮਾਂਰੇਖਾ: 29 ਮਈ → 17:45 → ਕ੍ਰੈਸ਼ ਲੂਪ → ਲਾਲ ਬਟਨ → 17:52 ਕਲਾਉਡਫਲੇਅਰ

0:35 ਲਾਲ ਬਟਨ ਦੇ ਨਾਲ ਖੇਤਰ ਦਰ ਖੇਤਰ ਭੇਜਿਆ ਜਾਂਦਾ ਹੈ — ਪਰ ਨਵਾਂ ਕੋਡ ਪਾਥ ਰੋਲਆਊਟ ਦੌਰਾਨ ਕਦੇ ਨਹੀਂ ਚੱਲਦਾ; ਕੁਝ ਵੀ ਇਸਨੂੰ ਅਜੇ ਚਾਲੂ ਨਹੀਂ ਕਰਦਾ। ਕੋਈ ਨਲ ਚੈਕ ਨਹੀਂ। ਕੋਈ ਫੀਚਰ ਫਲੈਗ ਨਹੀਂ। 17:45। ਖਾਲੀ ਖੇਤਰਾਂ ਵਾਲੀ ਇੱਕ ਨੀਤੀ ਤਬਦੀਲੀ ਸਪੈਨਰ ਟੇਬਲ ਵਿੱਚ ਆਉਂਦੀ ਹੈ। ਕੋਟਾ ਗਲੋਬਲ ਹੈ, ਇਸਲਈ ਕਤਾਰ ਸਕਿੰਟਾਂ ਵਿੱਚ ਹਰ ਜਗ੍ਹਾ ਪ੍ਰਤੀਕ੍ਰਿਤੀ ਹੋ ਜਾਂਦੀ ਹੈ। ਹਰ ਸਰਵਿਸ ਕੰਟਰੋਲ ਬਾਈਨਰੀ ਇਸਨੂੰ ਪੜ੍ਹਦਾ ਹੈ, ਨਲ ਪੁਆਇੰਟਰ ਨੂੰ ਹਿੱਟ ਕਰਦਾ ਹੈ, ਕ੍ਰੈਸ਼ ਹੁੰਦਾ ਹੈ, ਮੁੜ ਚਾਲੂ ਹੁੰਦਾ ਹੈ, ਇਸਨੂੰ ਦੁਬਾਰਾ ਪੜ੍ਹਦਾ ਹੈ। ਹਰ API ਕਾਲ: 503।

0:55 ਗੂਗਲ ਤੇਜ਼ ਹੈ: ਦੋ ਮਿੰਟਾਂ ਵਿੱਚ ਛਾਂਟੀ, ਦਸ ਵਿੱਚ ਮੂਲ ਕਾਰਨ। ਲਾਲ ਬਟਨ ਚਾਲੀ ਵਿੱਚ ਬਾਹਰ ਹੈ, ਅਤੇ ਛੋਟੇ ਖੇਤਰ ਪਹਿਲਾਂ ਠੀਕ ਹੋ ਜਾਂਦੇ ਹਨ। ਸਥਿਤੀ ਪੰਨਾ ਇੱਕ ਘੰਟੇ ਬਾਅਦ ਆਪਣਾ ਪਹਿਲਾ ਅਪਡੇਟ ਪੋਸਟ ਕਰਦਾ ਹੈ, ਕਿਉਂਕਿ ਇਹ ਗੂਗਲ ਕਲਾਉਡ 'ਤੇ ਚੱਲਦਾ ਹੈ। 17:52। ਕਲਾਉਡਫਲੇਅਰ ਦੀ WARP ਟੀਮ ਦੇਖਦੀ ਹੈ ਕਿ ਨਵੀਆਂ ਡਿਵਾਈਸਾਂ ਰਜਿਸਟਰ ਕਰਨ ਵਿੱਚ ਅਸਫਲ ਰਹਿੰਦੀਆਂ ਹਨ। Workers KV, ਕਲਾਉਡਫਲੇਅਰ ਦਾ ਅੱਧਾ ਸਟੋਰ ਜੋ ਕੌਂਫਿਗ ਅਤੇ ਪਛਾਣ ਲਈ ਵਰਤਿਆ ਜਾਂਦਾ ਹੈ, ਇੱਕ ਤੀਜੀ-ਧਿਰ ਕਲਾਉਡ 'ਤੇ ਰਹਿੰਦਾ ਹੈ। Access ਹਰ ਲੌਗਇਨ ਵਿੱਚ ਅਸਫਲ ਰਹਿੰਦਾ ਹੈ — ਡਿਜ਼ਾਈਨ ਅਨੁਸਾਰ, ਇਹ ਬੰਦ ਹੋ ਜਾਂਦਾ ਹੈ।

1:20 Workers AI ਹਰ ਅਨੁਮਾਨ ਵਿੱਚ ਅਸਫਲ ਰਹਿੰਦਾ ਹੈ। 19:11, ਗਰਗੇਲੀ ਓਰੋਜ਼: ਦੋ ਸੁਤੰਤਰ ਕਲਾਉਡ ਇੱਕੋ ਸਮੇਂ ਡਾਊਨ, ਪਹਿਲਾਂ ਕਦੇ ਨਹੀਂ ਦੇਖਿਆ। 19:32, ਗੂਗਲ ਸਪੋਰਟ ਇੱਕ ਉਪਭੋਗਤਾ ਨੂੰ ਦੱਸਦਾ ਹੈ ਕਿ ਕੋਈ ਜਾਣੀ-ਪਛਾਣੀ ਰੁਕਾਵਟ ਨਹੀਂ ਹੈ — ਕੂਕੀਜ਼ ਸਾਫ਼ ਕਰਨ ਦੀ ਕੋਸ਼ਿਸ਼ ਕਰੋ। ਹੋਰ ਸਾਰੀਆਂ ਥਾਵਾਂ 19:48 ਤੱਕ ਠੀਕ ਹੋ ਜਾਂਦੀਆਂ ਹਨ।

us-central1: ਝੁੰਡ ਦਾ ਪ੍ਰਭਾਵ

1:34 us-central1 ਨਹੀਂ ਹੁੰਦਾ: ਮੁੜ ਚਾਲੂ ਕਰਨ ਵਾਲੇ ਕਾਰਜ ਉਸੇ ਸਪੈਨਰ ਟੇਬਲ 'ਤੇ ਹਮਲਾ ਕਰਦੇ ਹਨ, ਕੋਈ ਬੇਤਰਤੀਬ ਬੈਕਆਫ ਨਹੀਂ, ਇਸਲਈ ਗੂਗਲ ਉਹਨਾਂ ਨੂੰ ਹੱਥੀਂ ਥ੍ਰੌਟਲ ਕਰਦਾ ਹੈ। ਦੋ ਘੰਟੇ ਚਾਲੀ। ਇੱਕ: ਨੀਤੀ ਜਾਂਚ ਬੇਨਤੀ ਪਾਥ ਦੇ ਅੰਦਰ ਬੈਠਦੀ ਹੈ; ਜਦੋਂ ਜਾਂਚ ਮਰ ਜਾਂਦੀ ਹੈ,

ਵਿਧੀ: ਬੇਨਤੀ ਪਾਥ ਵਿੱਚ ਜਾਂਚ, ਗਲੋਬਲ ਪ੍ਰਤੀਕ੍ਰਿਤੀ, ਇੱਕ ਵਿਕਰੇਤਾ

1:46 API ਮਰ ਜਾਂਦਾ ਹੈ। ਦੋ: ਕੋਟਾ ਡੇਟਾ ਬਿਨਾਂ ਕਿਸੇ ਸਟੇਜਿੰਗ ਦੇ ਗਲੋਬਲ ਹੋ ਜਾਂਦਾ ਹੈ; ਇੱਕ ਬੁਰੀ ਕਤਾਰ ਇੱਕ ਗਲੋਬਲ ਕਤਾਰ ਹੈ। ਤਿੰਨ: ਕਲਾਉਡਫਲੇਅਰ ਨੂੰ ਪਤਾ ਸੀ। Workers KV ਆਪਣੇ R2 ਵਿੱਚ ਮੱਧ-ਮਾਈਗ੍ਰੇਸ਼ਨ ਸੀ, ਇੱਕ ਪ੍ਰਦਾਤਾ ਤੱਕ — ਪੋਸਟਮਾਰਟਮ ਇਸਨੂੰ ਕਵਰੇਜ ਵਿੱਚ ਇੱਕ ਖਾਮੀ ਕਹਿੰਦਾ ਹੈ।

git blame — ਵੰਡ

2:00 git blame। ਗੂਗਲ, ਪੰਜਾਹ-ਪੰਜ ਪ੍ਰਤੀਸ਼ਤ: ਕੋਈ ਨਲ ਚੈਕ ਨਹੀਂ, ਕੋਈ ਫੀਚਰ ਫਲੈਗ ਨਹੀਂ, ਕੋਈ ਬੈਕਆਫ ਨਹੀਂ — ਉਹਨਾਂ ਦੀ ਰਿਪੋਰਟ ਕਹਿੰਦੀ ਹੈ ਕਿ ਇੱਕ ਫਲੈਗ ਇਸਨੂੰ ਸਟੇਜਿੰਗ ਵਿੱਚ ਫੜ ਲੈਂਦਾ। ਗਲੋਬਲ ਪ੍ਰਤੀਕ੍ਰਿਤੀ, ਵੀਹ: ਇੱਕ ਕਤਾਰ, ਹਰ ਖੇਤਰ, ਸਕਿੰਟ। ਕਲਾਉਡਫਲੇਅਰ, ਵੀਹ: ਇੱਕ ਵਿਕਰੇਤਾ ਦੇ ਸਟੋਰ 'ਤੇ ਅੱਧੀ ਉਤਪਾਦ ਲਾਈਨ, ਅਤੇ ਇੱਕ ਪੋਸਟਮਾਰਟਮ ਜੋ ਕਦੇ ਗੂਗਲ ਨਹੀਂ ਕਹਿੰਦਾ। ਸਥਿਤੀ ਪੰਨਾ, ਪੰਜ, ਉਸ 'ਤੇ ਰਹਿਣ ਲਈ ਜਿਸ ਬਾਰੇ ਇਹ ਰਿਪੋਰਟ ਕਰਦਾ ਹੈ। ਵਿਸਫੋਟ ਦਾ ਘੇਰਾ: ਸੱਤਰ ਗੂਗਲ ਕਲਾਉਡ ਉਤਪਾਦ, ਦਸ ਵਰਕਸਪੇਸ ਐਪਸ,

ਵਿਸਫੋਟ ਦਾ ਘੇਰਾ

2:23 ਹਰ ਖੇਤਰ। ਤਿੰਨ ਘੰਟੇ। ਕਲਾਉਡਫਲੇਅਰ 'ਤੇ: Access, WARP, Workers AI, Pages, Stream — ਢਾਈ। Hacker News, ਚੌਦਾਂ ਸੌ ਪੁਆਇੰਟ; ਪ੍ਰਮੁੱਖ ਟਿੱਪਣੀ: ਸਥਿਤੀ ਪੰਨਾ ਹਰਾ ਹੈ।

ਫੈਸਲਾ + ਸੋਮਵਾਰ ਦੀ ਲਾਈਨ

2:33 ਫੈਸਲਾ, ਪੋਸਟਮਾਰਟਮ: SHIP IT। ਦੋਵੇਂ ਪੋਸਟਮਾਰਟਮ ਤੀਹ ਘੰਟਿਆਂ ਦੇ ਅੰਦਰ ਆਉਂਦੇ ਹਨ, ਦੋਵੇਂ ਆਪਣੇ ਆਪ ਨੂੰ ਦੋਸ਼ੀ ਠਹਿਰਾਉਂਦੇ ਹਨ, ਅਤੇ ਗੂਗਲ ਦੇ ਫਿਕਸ ਠੋਸ ਹਨ: ਖੁੱਲ੍ਹੇ ਰਹੋ, ਫਲੈਗ ਡਿਫਾਲਟ ਰੂਪ ਵਿੱਚ ਬੰਦ ਹੋਣ, ਘਾਤਕ ਬੈਕਆਫ। ਸੋਮਵਾਰ ਦੀ ਲਾਈਨ: ਇੱਕ ਫਲੈਗ ਦੇ ਪਿੱਛੇ ਨਵਾਂ ਕੋਡ ਜੋ ਬੰਦ ਭੇਜਿਆ ਜਾਂਦਾ ਹੈ, ਅਤੇ ਇੱਕ ਨਲ ਚੈਕ ਜਿੱਥੇ ਡੇਟਾ ਆਉਂਦਾ ਹੈ। ਮੈਨੂੰ ਉਹ ਘਟਨਾ ਭੇਜੋ ਜਿਸ ਬਾਰੇ ਤੁਹਾਨੂੰ ਅਜੇ ਵੀ ਗੱਲ ਕਰਨ ਦੀ ਇਜਾਜ਼ਤ ਨਹੀਂ ਹੈ, ਟਿੱਪਣੀਆਂ ਵਿੱਚ, ਜਾਂ the daily diff dot dev 'ਤੇ। ਅਤੇ ਅੱਜ ਲਈ ਇਹ ਫਰਕ ਹੈ।

2:53 ਮੈਂ Axrisi ਤੋਂ Niko ਹਾਂ। ਜ਼ਿੰਮੇਵਾਰੀ ਨਾਲ ਮਿਲਾਓ।

ਸਰੋਤ

  1. Google Cloud Service Health, Incident Report (Jun 13, 2025) + Mini Incident Report (Jun 12)status.cloud.google.com
  2. Cloudflare, "Cloudflare service outage June 12, 2025" (Jun 12, 2025, 22:00 UTC)blog.cloudflare.com
  3. Cloudflare Status, "Broad Cloudflare service outages" (18:19–21:31 UTC)www.cloudflarestatus.com
  4. Gergely Orosz, 19:11 UTC, "Their infra is fully independent AFAIK"x.com
  5. @Google support, 19:32 UTC, "there aren't any known service disruptions"x.com
  6. Thomas Kurian (Google Cloud CEO), Jun 13 01:35 UTCx.com
  7. Hacker News, "GCP Outage" (1,468 points)news.ycombinator.com
  8. Hacker News, "Cloudflare was down" (341 points)news.ycombinator.com
  9. Hacker News, "Google Cloud Incident Report – 2025-06-13" (209 points)news.ycombinator.com

Niko from Axrisi

Nikoloz Turazashvili · Vexrail · Axrisi

LinkedIn · dev.to · GitHub · X · Substack

ਸਬੰਧਤ ਵੀਡੀਓ

postmortem · pa · 16 ਸਤੰ 2026

ਫੇਸਬੁੱਕ ਨੇ ਖੁਦ ਨੂੰ ਇੰਟਰਨੈੱਟ ਤੋਂ ਮਿਟਾ ਦਿੱਤਾ। ਛੇ ਘੰਟੇ।

ਫੇਸਬੁੱਕ ਇੰਟਰਨੈੱਟ ਤੋਂ ਆਪਣਾ ਪਤਾ ਹਟਾ ਦਿੰਦਾ ਹੈ, ਅਤੇ ਜਦੋਂ ਇਸਦੇ ਇੰਜੀਨੀਅਰ ਇਸਨੂੰ ਵਾਪਸ ਲਗਾਉਣ ਲਈ ਆਉਂਦੇ ਹਨ, ਤਾਂ ਬੈਜ ਰੀਡਰ ਵੀ ਬੰਦ ਹੋ ਜਾਂਦੇ ਹਨ, ਕਿਉਂਕਿ ਉਹ ਫੇਸਬੁੱਕ 'ਤੇ ਚੱਲਦੇ ਹਨ। 4 ਅਕਤੂਬਰ 2021, 15:40 UTC: ਇੱਕ ਰੁਟੀਨ ਬੈ

3:01 ↗
postmortem · pa · 25 ਸਤੰ 2026

ਇੱਕ ਮਿਲੀਸਕਿੰਟ ਦੇ ਬੱਗ ਨੇ ਯੂਕੇ ਦੇ ਹਵਾਈ ਆਵਾਜਾਈ ਨੂੰ ਰੋਕ ਦਿੱਤਾ। ਛੇ ਘੰਟੇ।

ਮੰਗਲਵਾਰ, 8 ਸਤੰਬਰ ਨੂੰ ਸਵੇਰੇ 10:00 ਵਜੇ, NATS ਦੇ ਨੈਸ਼ਨਲ ਏਅਰਸਪੇਸ ਸਿਸਟਮ (NAS) ਦੇ ਅੰਦਰ ਇੱਕ ਰੂਟੀਨ ਸਕਵਾਕ-ਕੋਡ ਬੇਨਤੀ ਨੂੰ ਇੱਕ ਉੱਚ-ਪ੍ਰਾਥਮਿਕਤਾ ਵਾਲੇ ਸੰਦੇਸ਼ ਦੁਆਰਾ ਰੋਕਿਆ ਜਾਂਦਾ ਹੈ ਜਦੋਂ ਇਹ ਇੱਕ ਮੁੱਲ ਨੂੰ ਅੱਪਡੇਟ ਕਰਨ ਦੇ ਅੱ

3:06 ↗
postmortem · pa · 22 ਸਤੰ 2026

ਇੱਕ ਰੀਬੂਟ ਨੇ ਟੈਲਸਟ੍ਰਾ ਨੂੰ 2006 ਵਿੱਚ ਭੇਜ ਦਿੱਤਾ। ਨੌਂ ਮਿਲੀਅਨ ਫ਼ੋਨ।

ਮੈਲਬੌਰਨ ਵਿੱਚ ਇੱਕ ਇੰਜੀਨੀਅਰ ਸਵੇਰੇ 2:50 ਵਜੇ ਇੱਕ ਟਾਈਮਿੰਗ ਚੈਸੀਸ ਨੂੰ ਦੁਬਾਰਾ ਚਾਲੂ ਕਰਦਾ ਹੈ, ਅਤੇ ਨਾਸ਼ਤੇ ਤੱਕ ਆਸਟ੍ਰੇਲੀਆ ਦਾ ਸਭ ਤੋਂ ਵੱਡਾ ਮੋਬਾਈਲ ਨੈਟਵਰਕ ਸਹਿਮਤ ਹੁੰਦਾ ਹੈ ਕਿ ਇਹ ਨਵੰਬਰ 2006 ਹੈ। 8 ਜੁਲਾਈ, 2026: ਟੈਲਸਟ੍ਰਾ ਦੇ

3:15 ↗
postmortem · pa · 12 ਸਤੰ 2026

ਇੱਕ ਰੈਗੂਲਰ ਐਕਸਪ੍ਰੈਸ਼ਨ ਨੇ ਕਲਾਉਡਫਲੇਅਰ ਨੂੰ ਡਾਊਨ ਕਰ ਦਿੱਤਾ। 27 ਮਿੰਟ।

2 ਜੁਲਾਈ, 2019, 13:42 UTC: ਕਲਾਉਡਫਲੇਅਰ ਦੇ ਵੈੱਬ ਐਪਲੀਕੇਸ਼ਨ ਫਾਇਰਵਾਲ ਲਈ ਇੱਕ ਨਵਾਂ ਨਿਯਮ ਲਗਭਗ ਦੋ ਸਕਿੰਟਾਂ ਵਿੱਚ 180+ ਸ਼ਹਿਰਾਂ ਵਿੱਚ ਲਾਈਵ ਹੋ ਜਾਂਦਾ ਹੈ। ਇਹ ਸਿਮੂਲੇਟ ਮੋਡ ਵਿੱਚ ਇੱਕ XSS ਨਿਯਮ ਹੈ, ਇਸਲਈ ਇਹ ਕੁਝ ਵੀ ਬਲੌਕ ਨਹੀਂ ਕ

3:00 ↗