একটি ফাঁকা ক্ষেত্রে গুগল ক্লাউড ক্র্যাশ করেছে। তিন ঘণ্টা।

এই ভিডিওতে যা আছে

• একটি ফাঁকা ক্ষেত্র, একটি নাল পয়েন্টার, প্রতিটি অঞ্চল
• সময়রেখা: ২৯ মে → ১৭:৪৫ → ক্র্যাশ লুপ → রেড বাটন → ১৭:৫২ ক্লাউডফ্লেয়ার
• us-central1: পালের প্রভাব
• পদ্ধতি: অনুরোধের পথে চেক, বিশ্বব্যাপী প্রতিলিপি, একজন বিক্রেতা
• git blame — বিভাজন

অনুবাদিত প্রতিলিপি

মূল ইংরেজি বর্ণনা থেকে অনূদিত। উপলব্ধ অডিও এবং ক্যাপশন YouTube দ্বারা নিয়ন্ত্রিত।

একটি ফাঁকা ক্ষেত্র, একটি নাল পয়েন্টার, প্রতিটি অঞ্চল

0:00 ফাঁকা ক্ষেত্র সহ একটি নীতি সারি একটি নাল পয়েন্টারকে আঘাত করে, এবং গুগল ক্লাউড ক্র্যাশ করে একসাথে প্রতিটি অঞ্চলে — এবং ক্লাউডফ্লেয়ারও এর সাথে পড়ে যায়, তারপর গুগলকে "একটি তৃতীয় পক্ষের প্রদানকারী" বলে ডাকে। ১২ জুন, ২০২৫, ১৭:৪৯ ইউটিসি। গুগলের প্রতিবেদন: সার্ভিস কন্ট্রোল, প্রতিটি API অনুরোধ অনুমোদনকারী বাইনারি, তিন ঘন্টার জন্য একটি ক্র্যাশ লুপে। ক্লাউডফ্লেয়ারের, একই সন্ধ্যায়: ওয়ার্কার্স KV, নব্বই শতাংশ ব্যর্থ, দুই ঘন্টা আটাশ মিনিট।

0:23 এটি কীভাবে ঘটল, কেন একটি ফাঁকা ক্ষেত্র কয়েক সেকেন্ডের মধ্যে বিশ্বব্যাপী ছড়িয়ে পড়ল, এবং কে দায়ী। এটি The Daily Diff, পোস্টমর্টেম। ২৯ মে। সার্ভিস কন্ট্রোল একটি নতুন কোটা চেক পায়, একটি

সময়রেখা: ২৯ মে → ১৭:৪৫ → ক্র্যাশ লুপ → রেড বাটন → ১৭:৫২ ক্লাউডফ্লেয়ার

0:35 রেড বাটন সহ অঞ্চলভেদে পাঠানো হয় — কিন্তু রোলআউটের সময় নতুন কোড পাথ কখনই চলে না; কিছুই এটিকে এখনও ট্রিগার করে না। কোনো নাল চেক নেই। কোনো ফিচার ফ্ল্যাগ নেই। ১৭:৪৫। ফাঁকা ক্ষেত্র সহ একটি নীতি পরিবর্তন স্প্যানার টেবিলে আসে। কোটা বিশ্বব্যাপী, তাই সারিটি কয়েক সেকেন্ডের মধ্যে সর্বত্র প্রতিলিপি হয়। প্রতিটি সার্ভিস কন্ট্রোল বাইনারি এটি পড়ে, নাল পয়েন্টারকে আঘাত করে, ক্র্যাশ করে, পুনরায় চালু হয়, আবার পড়ে। প্রতিটি API কল: 503।

0:55 গুগল দ্রুত: দুই মিনিটে ট্রাইয়েজ, দশ মিনিটে মূল কারণ। রেড বাটন চল্লিশ মিনিটের মধ্যে বের হয়ে যায় এবং ছোট অঞ্চলগুলি প্রথমে পুনরুদ্ধার করে। স্ট্যাটাস পৃষ্ঠা এক ঘন্টা দেরিতে তার প্রথম আপডেট পোস্ট করে, কারণ এটি গুগল ক্লাউডে চলে। ১৭:৫২। ক্লাউডফ্লেয়ারের WARP দল দেখে যে নতুন ডিভাইসগুলি নিবন্ধন করতে ব্যর্থ হচ্ছে। ওয়ার্কার্স KV, ক্লাউডফ্লেয়ারের কনফিগারেশন এবং পরিচয়ের জন্য ব্যবহৃত স্টোরের অর্ধেক, একটি তৃতীয় পক্ষের ক্লাউডে থাকে। অ্যাক্সেস প্রতিটি লগইন ব্যর্থ করে — নকশা অনুসারে, এটি বন্ধ হয়ে ব্যর্থ হয়।

1:20 ওয়ার্কার্স AI প্রতিটি অনুমান ব্যর্থ করে। ১৯:১১, গার্গেলি ওরোস: একসাথে দুটি স্বাধীন ক্লাউড ডাউন, আগে কখনও দেখা যায়নি। ১৯:৩২, গুগল সমর্থন একজন ব্যবহারকারীকে বলে যে কোনো পরিচিত সমস্যা নেই — কুকিজ সাফ করার চেষ্টা করুন। অন্যান্য সব জায়গা ১৯:৪৮ এর মধ্যে পুনরুদ্ধার করে।

us-central1: পালের প্রভাব

1:34 us-central1 করে না: পুনরায় চালু হওয়া কাজগুলি একই স্প্যানার টেবিলকে তাড়াহুড়ো করে, কোনো র্যান্ডমাইজড ব্যাকঅফ নেই, তাই গুগল তাদের হাতে-কলমে নিয়ন্ত্রিত করে। দুই ঘন্টা চল্লিশ মিনিট। এক: নীতি চেকটি অনুরোধের পথের ভিতরে থাকে; যখন চেকটি মারা যায়,

পদ্ধতি: অনুরোধের পথে চেক, বিশ্বব্যাপী প্রতিলিপি, একজন বিক্রেতা

1:46 API টি মারা যায়। দুই: কোটা ডেটা কোনো স্টেজিং ছাড়াই বিশ্বব্যাপী চলে যায়; একটি খারাপ সারি একটি বিশ্বব্যাপী সারি। তিন: ক্লাউডফ্লেয়ার জানত। ওয়ার্কার্স KV তার নিজস্ব R2-তে স্থানান্তরের মাঝামাঝি ছিল, একজন প্রদানকারী পর্যন্ত — পোস্টমর্টেম এটিকে কভারেজের একটি ফাঁক বলে অভিহিত করে।

git blame — বিভাজন

2:00 git blame। গুগল, পঁয়ষট্টি শতাংশ: কোনো নাল চেক নেই, কোনো ফিচার ফ্ল্যাগ নেই, কোনো ব্যাকঅফ নেই — তাদের রিপোর্টে বলা হয়েছে যে একটি ফ্ল্যাগ স্টেজিংয়ে এটি ধরতে পারত। বিশ্বব্যাপী প্রতিলিপি, বিশ শতাংশ: একটি সারি, প্রতিটি অঞ্চল, সেকেন্ড। ক্লাউডফ্লেয়ার, বিশ শতাংশ: একটি বিক্রেতার স্টোরে অর্ধেক পণ্য লাইন, এবং একটি পোস্টমর্টেম যা কখনই গুগলের নাম নেয় না। স্ট্যাটাস পৃষ্ঠা, পাঁচ শতাংশ, এটি যা রিপোর্ট করে তার উপর নির্ভর করার জন্য। বিস্ফোরণের ব্যাসার্ধ: সত্তরটি গুগল ক্লাউড পণ্য, দশটি ওয়ার্কস্পেস অ্যাপ,

বিস্ফোরণের ব্যাসার্ধ

2:23 প্রতিটি অঞ্চল। তিন ঘন্টা। ক্লাউডফ্লেয়ারে: অ্যাক্সেস, WARP, ওয়ার্কার্স AI, পেজস, স্ট্রিম — আড়াই ঘন্টা। হ্যাকার নিউজ, চৌদ্দশ পয়েন্ট; শীর্ষ মন্তব্য: স্ট্যাটাস পৃষ্ঠা সবুজ।

রায় + সোমবারের লাইন

2:33 রায়, পোস্টমর্টেম: SHIP IT। উভয় পোস্টমর্টেম ত্রিশ ঘন্টার মধ্যে আসে, উভয়ই নিজেদের দায়ী করে, এবং গুগলের সমাধানগুলি সুনির্দিষ্ট: Fail open, ফ্ল্যাগগুলি ডিফল্টরূপে বন্ধ থাকে, এক্সপোনেনশিয়াল ব্যাকঅফ। সোমবারের লাইন: একটি ফ্ল্যাগের পিছনে নতুন কোড যা বন্ধ থাকে, এবং যেখানে ডেটা আসে সেখানে একটি নাল চেক। আপনি যে ঘটনাটি সম্পর্কে এখনও কথা বলতে পারবেন না তা আমাকে পাঠান, কমেন্টে, অথবা the daily diff dot dev এ। এবং এটি আজকের জন্য diff।

2:53 আমি Axrisi থেকে Niko। দায়িত্বের সাথে মার্জ করুন।

উৎস

1. Google Cloud Service Health, Incident Report (Jun 13, 2025) + Mini Incident Report (Jun 12)status.cloud.google.com
2. Cloudflare, "Cloudflare service outage June 12, 2025" (Jun 12, 2025, 22:00 UTC)blog.cloudflare.com
3. Cloudflare Status, "Broad Cloudflare service outages" (18:19–21:31 UTC)www.cloudflarestatus.com
4. Gergely Orosz, 19:11 UTC, "Their infra is fully independent AFAIK"x.com
5. @Google support, 19:32 UTC, "there aren't any known service disruptions"x.com
6. Thomas Kurian (Google Cloud CEO), Jun 13 01:35 UTCx.com
7. Hacker News, "GCP Outage" (1,468 points)news.ycombinator.com
8. Hacker News, "Cloudflare was down" (341 points)news.ycombinator.com
9. Hacker News, "Google Cloud Incident Report – 2025-06-13" (209 points)news.ycombinator.com