ফেচবুকে ইণ্টাৰনেটৰ পৰা নিজকে বিলোপ কৰিলে। ছয় ঘণ্টা।
ফেচবুকে ইণ্টাৰনেটৰ পৰা নিজৰ ঠিকনা আঁতৰাই পেলায়, আৰু যেতিয়া ইয়াৰ অভিযন্তাসকল ইয়াক পুনৰ স্থাপন কৰিবলৈ আহে, তেতিয়া বেজ ৰিডাৰবোৰো অকামিলা হৈ পৰে, কিয়নো সেইবোৰ ফেচবুকত চলে।
ফেচবুকে ইণ্টাৰনেটৰ পৰা নিজৰ ঠিকনা আঁতৰাই পেলায়, আৰু যেতিয়া ইয়াৰ অভিযন্তাসকল ইয়াক পুনৰ স্থাপন কৰিবলৈ আহে, তেতিয়া বেজ ৰিডাৰবোৰো অকামিলা হৈ পৰে, কিয়নো সেইবোৰ ফেচবুকত চলে। ২০২১ চনৰ ৪ অক্টোবৰ, ১৫:৪০ UTC: এক নিয়মীয়া বেকবোন-ৰক্ষণাবেক্ষণ নিৰ্দেশ ফেচবুকৰ ডেটা চেণ্টাৰসমূহৰ মাজৰ প্ৰতিটো সংযোগ বিচ্ছিন্ন কৰি পেলায়; ইয়াক ৰোধ কৰিবলৈ নিৰ্মিত অডিট সঁজুলিটোত এটা ত্ৰুটি আছিল; ফেচবুকৰ নেম চাৰ্ভাৰসমূহে, ডেটা চেণ্টাৰসমূহলৈ যাব নোৱাৰি, ডিজাইন অনুসৰি নিজৰ BGP ৰুটসমূহ বাতিল কৰে — আৰু facebook.com, Instagram, WhatsApp আৰু Messenger প্ৰায় ছয় ঘণ্টাৰ বাবে DNS ৰ পৰা অদৃশ্য হৈ পৰে। আভ্যন্তৰীণ সঁজুলি, আউট-অফ-বেণ্ড প্ৰৱেশ আৰু অফিচৰ বেজসমূহ একেটা নেটৱৰ্কতে চলে, গতিকে মেৰামতিৰ বাবে ৰেকসমূহত লোকৰ প্ৰয়োজন হয়।
এই ভিডিঅ’টোত কি আছে
- ফেচবুকে নিজৰ ঠিকনা আঁতৰাই পেলায়
- ৰছিদসমূহ: Meta Engineering, Cloudflare, Hacker News
- এইটো The Daily Diff, মৰণোত্তৰ পৰীক্ষা
- সময়সীমা: ১৫:৩৯ নিৰ্দেশ → ১৫:৪০ বাতিল → ২১:২০ পুনৰুদ্ধাৰ
- প্ৰণালী: যি স্বাস্থ্য পৰীক্ষাই আপোনাক বিলোপ কৰে, ৩০× DNS ধুমুহা, দুৱাৰসমূহ
প্ৰশ্ন আৰু উত্তৰ
২০২১ চনৰ অক্টোবৰ মাহত ফেচবুক, ইনষ্টাগ্ৰাম আৰু হোৱাটছএপ সেৱা বন্ধ হোৱাৰ কাৰণ কি আছিল?
এক সাধাৰণ বেকবোন মেণ্টেনেন্স কমাণ্ডে ফেচবুকৰ ডাটা চেণ্টাৰসমূহৰ মাজৰ সকলো লিংক বন্ধ কৰি দিছিল, আৰু এনে কমাণ্ড ব্লক কৰিবলৈ থকা অডিট টুলত এটা বিজুতি আছিল। মেটাৰ ইঞ্জিনিয়াৰিং লিখনি অনুসৰি, ই ডাটা চেণ্টাৰসমূহক ইজনে সিজনৰ পৰা বিচ্ছিন্ন কৰি পেলাইছিল। 15:40 UTC বজাত ক্লাউডফ্লেয়াৰে ফেচবুকৰ নাম চাৰ্ভাৰলৈ যোৱা ৰুটসমূহ প্ৰত্যাহাৰ কৰা দেখা পাইছিল, আৰু 21:20 বজাত পুনৰ সমাধান নোহোৱালৈকে facebook.com-এ SERVFAIL ঘূৰাই দিছিল।
ফেচবুকৰ ডিএনএছ চাৰ্ভাৰসমূহে কিয় ইণ্টাৰনেটৰ পৰা নিজকে আঁতৰাই পেলাইছিল?
ডাটা চেণ্টাৰসমূহ পাবলৈ অসমৰ্থ হ'লে নাম চাৰ্ভাৰসমূহক নিজৰ BGP ৰুটসমূহ প্ৰত্যাহাৰ কৰিবলৈ ডিজাইন কৰা হৈছিল। যেতিয়া এটা চাইট ব্যৰ্থ হয় তেতিয়া এই নিয়মটো যুক্তিসংগত। যেতিয়া সমগ্ৰ বেকবোন ব্যৰ্থ হৈছিল, প্ৰতিটো নাম চাৰ্ভাৰে একেলগে নিজকে অসুস্থ বুলি ঘোষণা কৰিছিল আৰু নিজৰ ঠিকনা বিজ্ঞাপন কৰা বন্ধ কৰি দিছিল। চাৰ্ভাৰসমূহ এতিয়াও চলি আছিল, কিন্তু কোনেও সেইবোৰ বিচাৰি পোৱা নাছিল।
ফেচবুকৰ অভিযন্তাসকলে কিয় দূৰৈৰ পৰা সেৱা বন্ধ হোৱাটো ঠিক কৰিব নোৱাৰিলে?
অভ্যন্তৰীণ সঁজুলি, আউট-অফ-বেণ্ড প্ৰৱেশ আৰু অফিচৰ বেজ ৰিডাৰ সকলোবোৰ একে নেটৱৰ্কতে চলিছিল যিটো ব্যৰ্থ হৈছিল। অভিযন্তাসকলে ডাটা চেণ্টাৰসমূহত যাব লগা হৈছিল, য'ত ৰেকসমূহ শাৰীৰিক প্ৰৱেশ থকা যিকোনো ব্যক্তিৰ বিৰুদ্ধে কঠিন কৰা হৈছিল। নিউয়ৰ্ক টাইমছে 18:51 UTC বজাত ডেড বেজ থকা ভৱনসমূহৰ পৰা কৰ্মচাৰীসকলক বাহিৰ কৰি দিয়াৰ খবৰ দিছিল।
ফেচবুক সেৱা বন্ধ হোৱাটোৱে বাকী ইণ্টাৰনেটক কেনেকৈ প্ৰভাৱিত কৰিছিল?
এপসমূহে পুনৰ চেষ্টা কৰিছিল আৰু ব্যৱহাৰকাৰীসকলে পুনৰ লোড কৰিছিল, সেয়েহে ক্লাউডফ্লেয়াৰৰ ৰিজল্ভাৰে নোপোৱা চাইট এটাৰ বাবে সাধাৰণ লোডতকৈ ত্ৰিশ গুণ বেছি দেখিছিল। এই ঘটনাটোৱে প্ৰায় ছয় ঘণ্টা ধৰি তিনি বিলিয়নৰো অধিক ব্যৱহাৰকাৰীৰ ওপৰত প্ৰভাৱ পেলাইছিল। ইয়াৰ উপৰিও এইটোও জনা যায় যে টেলিগ্ৰামে সেইদিনা সত্তৰ নিযুত চাইন-আপৰ দাবী কৰিছিল।
ফেচবুকৰ পোষ্টমৰ্টেমটোৱে সেৱা বন্ধ হোৱাৰ আঁৰৰ মূল সমস্যাসমূহ সমাধান কৰিছিল নে?
দ্য ডেইলি ডিফৰ ৰায় আছিল NEEDS REVIEW। ফেচবুকে একে নিশা এক বিবৃতি জাৰি কৰিছিল, এদিনৰ ভিতৰত এজন নামবিহীন লেখকে এটা পোষ্টমৰ্টেম প্ৰকাশ কৰিছিল আৰু স্পষ্ট ইংৰাজীত অডিট-টুল বিজুতিটো স্বীকাৰ কৰিছিল। ইয়াৰ সমাধান তালিকাত শক্তিশালী পৰীক্ষণ আৰু ড্ৰিলৰ ওপৰত গুৰুত্ব দিয়া হৈছিল আৰু উৎপাদন নেটৱৰ্কৰ পৰা দুৱাৰসমূহ আঁতৰোৱাৰ বিষয়ে একো কোৱা হোৱা নাছিল। ঘটনাটোৱে আপুনি পৰিচালনা নকৰা নেটৱৰ্কত আউট-অফ-বেণ্ড প্ৰৱেশ ৰখাৰ পৰামৰ্শ দিয়ে।
অনূদিত ট্ৰান্সক্ৰিপ্ট
মূল ইংৰাজী বৰ্ণনাৰ পৰা অনুবাদ কৰা হৈছে। উপলব্ধ অডিঅ’ আৰু কেপচন ইউটিউবে নিয়ন্ত্ৰণ কৰে।
ফেচবুকে নিজৰ ঠিকনা আঁতৰাই পেলায়
0:00 ফেচবুকে ইণ্টাৰনেটৰ পৰা নিজৰ ঠিকনা আঁতৰাই পেলায়, আৰু যেতিয়া ইয়াৰ অভিযন্তাসকল ইয়াক পুনৰ স্থাপন কৰিবলৈ আহে, তেতিয়া বেজ ৰিডাৰবোৰো অকামিলা হৈ পৰে, কিয়নো সেইবোৰ ফেচবুকত চলে। মেটাৰ নিজা মৰণোত্তৰ পৰীক্ষা, পিছদিনা: এটা নিয়মীয়া ৰক্ষণাবেক্ষণ নিৰ্দেশে প্ৰতিটো বেকবোন সংযোগ বিচ্ছিন্ন কৰি পেলায়, আৰু তেনে নিৰ্দেশসমূহ ৰোধ কৰিবলৈ নিৰ্মিত সঁজুলিটোত এটা ত্ৰুটি আছিল।
ৰছিদসমূহ: Meta Engineering, Cloudflare, Hacker News
0:16 বাহিৰৰ পৰা Cloudflare: ১৫:৪০ UTC ত ফেচবুকৰ নেম চাৰ্ভাৰসমূহলৈ থকা ৰুটসমূহ অদৃশ্য হৈ পৰে, আৰু dig facebook.com গ্ৰহৰ প্ৰতিটো স্থানত SERVFAIL উভতাই দিয়ে। এইটো কেনেকৈ হয়, কিয় এটা সুৰক্ষা সুবিধাই ইয়াক বেয়া কৰে, আৰু কাক দোষ দিয়া হয়। এইটো The Daily Diff, মৰণোত্তৰ পৰীক্ষা। আবেলিৰ আৰম্ভণি, UTC।
এইটো The Daily Diff, মৰণোত্তৰ পৰীক্ষা
0:34 মুক্ত বেকবোন ক্ষমতা পৰীক্ষা কৰিবলৈ দিয়া এটা নিৰ্দেশে ফেচবুকৰ ডেটা চেণ্টাৰসমূহৰ মাজৰ প্ৰতিটো সংযোগ বিচ্ছিন্ন কৰি পেলায়, আৰু এইটো ধৰা পেলাবলৈ নিৰ্মিত অডিট সঁজুলিটোৱে ইয়াক
সময়সীমা: ১৫:৩৯ নিৰ্দেশ → ১৫:৪০ বাতিল → ২১:২০ পুনৰুদ্ধাৰ
0:41 অনুমতি দিয়ে। ১৫:৪০। Cloudflare ৰ BGP ফিড বাতিলকৰণেৰে ভৰি পৰে; ফেচবুকৰ DNS প্ৰিফিক্সসমূহ ৰাউটিং টেবুল এৰি যায়। এক মিনিটৰ ভিতৰত Cloudflare ৰ অভিযন্তাসকল এটা কোঠাত আছিল আৰু তেওঁলোকে ১.১.১.১ ভঙা নাই বুলি ভাবিছিল। ১৫:৪৫, Hacker News, ছাব্বিশশ পইণ্ট। ১৬:০৭, ফেচবুকৰ মুখপাত্ৰ, Twitter ত আটাইতকৈ বেছি স্থানত: কিছুমান লোকে আমাৰ এপসমূহ প্ৰৱেশ কৰাত সমস্যাৰ সন্মুখীন হৈছে। কিছুমান লোক মানে তিনিশ পঞ্চাশ কোটি।
1:06 ১৮:৫১, New York Times: কৰ্মচাৰীসকলক তেওঁলোকৰ ভৱনৰ পৰা বাহিৰ কৰি দিয়া হৈছে, বেজ অকামিলা। ১৯:৫২, CTO এ ক্ষমা বিচাৰে। ২১:০০, পাঁচ ঘণ্টাৰ পাছত, ৰুটসমূহ উভতি আহে; ২১:২০, facebook.com সমাধান হয়। কিয় এটা বেকবোন ত্ৰুটিয়ে ফেচবুকক ইণ্টাৰনেটৰ পৰা বিলোপ কৰে?
প্ৰণালী: যি স্বাস্থ্য পৰীক্ষাই আপোনাক বিলোপ কৰে, ৩০× DNS ধুমুহা, দুৱাৰসমূহ
1:20 ইয়াৰ নেম চাৰ্ভাৰসমূহৰ এটা নিয়ম আছে: ডেটা চেণ্টাৰসমূহলৈ যাব নোৱাৰে, নিজকে অস্বাস্থ্যকৰ বুলি ঘোষণা কৰা, নিজৰ ঠিকনা বিজ্ঞাপন বন্ধ কৰা। এটা চাইট বেয়া হ'লে ই যুক্তিসংগত। যেতিয়া গোটেই বেকবোনটো যায়, তেতিয়া প্ৰতিটো নেম চাৰ্ভাৰে একেলগে ইয়াক কৰে। চাৰ্ভাৰবোৰ চলি আছে। তেওঁলোকক কোনেও বিচাৰি নাপায়। এটা সুৰক্ষা সুবিধাই নেটৱৰ্কৰ ত্ৰুটিক অস্তিত্বৰ ত্ৰুটিত পৰিণত কৰে। তাৰ পিছত ইণ্টাৰনেটে ভিৰ কৰে: এপবোৰে পুনৰ চেষ্টা কৰে, ব্যৱহাৰকাৰীসকলে পুনৰ লোড কৰে,
1:39 আৰু Cloudflare ৰ ৰিজলভাৰে ইয়াৰ স্বাভাৱিক লোডৰ ত্ৰিশ গুণ বেছি দেখে, এটা চাইটৰ বাবে যি তাত নাই। আৰু দুৱাৰবোৰ। সঁজুলি, আউট-অফ-বেণ্ড প্ৰৱেশ, বেজ: একে নেটৱৰ্ক। অভিযন্তাসকলে ডেটা চেণ্টাৰসমূহলৈ যায়, সোমাব নোৱাৰে, তাৰ পিছত শাৰী শাৰী ৰেকসমূহৰ সন্মুখীন হয় যিবোৰ যিকোনো শাৰীৰিক প্ৰৱেশ থকা ব্যক্তিৰ বিৰুদ্ধে সুৰক্ষিত। এজন আক্ৰমণকাৰীক ধীৰ কৰিবলৈ নিৰ্মিত, ই মালিককো ধীৰ কৰে। বেকবোন উভতি আহে; তেওঁলোকে ট্ৰেফিক লাহে লাহে, উদ্দেশ্যপ্ৰণোদিতভাৱে বৃদ্ধি কৰে।
1:59 প্ৰতিটো ডেটা চেণ্টাৰে দহ মেগাৱাট শক্তি হেৰুৱাইছে, আৰু ইয়াক একেটা খোজত ওভতাই দিয়াটো এটা দ্বিতীয় বিভ্ৰাট।
git blame — বিভাজন
2:05 git blame। ফেচবুক, পঁয়সত্তৰি শতাংশ: নিৰ্দেশটো অডিট কৰা হৈছিল, অডিটোৰটোত এটা ত্ৰুটি আছিল, এটা নিৰ্দেশ প্ৰতিটো ৰাউটাৰত উপনীত হৈছিল। DNS ডিজাইন, পঁচিশ: অনুপাতৰ জ্ঞান নথকা এটা স্বাস্থ্য পৰীক্ষা। এটা নেটৱৰ্ক, পোন্ধৰ: সঁজুলি, আউট-অফ-বেণ্ড, বেজ। ৰেকসমূহ, পাঁচ, নিজৰ কাম কৰাৰ বাবে। বিস্ফোৰণ ব্যাসাৰ্ধ: তিনিশ পঞ্চাশ কোটি ব্যৱহাৰকাৰী, প্ৰায় ছয় ঘণ্টা। ষ্টক পাঁচ শতাংশ হ্ৰাস হৈ বন্ধ হয়, জুকাৰবাৰ্গৰ ছয় বিলিয়ন হ্ৰাস হয়,
বিস্ফোৰণ ব্যাসাৰ্ধ
2:27 কাগজত। Telegram এ সেইদিনা সত্তৰ নিযুত ছাইন-আপ দাবী কৰে। সিদ্ধান্ত, মৰণোত্তৰ পৰীক্ষা: NEEDS REVIEW। একে সন্ধিয়াৰ বিবৃতি, একেদিনাৰ ভিতৰত নামযুক্ত-লেখকৰ মৰণোত্তৰ পৰীক্ষা, অডিট-সঁজুলিৰ ত্ৰুটি সৰল ইংৰাজীত স্বীকাৰ কৰা হৈছে।
সিদ্ধান্ত + সোমবাৰৰ লাইন
2:38 মেৰামতিৰ তালিকা: পৰীক্ষা আৰু ড্ৰিলসমূহ শক্তিশালী কৰা। উৎপাদন নেটৱৰ্কৰ পৰা দুৱাৰসমূহ আঁতৰোৱাৰ বিষয়ে একো নাই। সোমবাৰ: আপোনাৰ আউট-অফ-বেণ্ড প্ৰৱেশ, আৰু আপোনাৰ দুৱাৰ, এটা নেটৱৰ্কত ৰাখক যিটো আপুনি পৰিচালনা নকৰে। আপুনি এতিয়াও কথা পাতিবলৈ অনুমতি নোপোৱা ঘটনাটো মোক পঠিয়াওক, মন্তব্যত, অথবা The Daily Diff dot dev ত। আৰু সেয়াই আজিৰ বাবে The Diff। মই Axrisi ৰ পৰা Niko।
2:58 Merge responsibly।
উৎসসমূহ
- Meta Engineering, "More details about the October 4 outage" (Santosh Janardhan, Oct 5, 2021)engineering.fb.com
- Meta Engineering, "Update about the October 4th outage" (Oct 4, 2021)engineering.fb.com
- Cloudflare, "Understanding how Facebook disappeared from the Internet" (Oct 4, 2021)blog.cloudflare.com
- Mark Zuckerberg, note to employees (Oct 5, 2021)www.facebook.com
- Andy Stone (Facebook), 16:07 UTCtwitter.com
- Sheera Frenkel (NYT), 18:51 UTC, the badgestwitter.com
- Mike Schroepfer (Facebook CTO), 19:52 UTCtwitter.com
- Hacker News (2,589 points)news.ycombinator.com
- The New York Times, "Gone in Minutes, Out for Hours"www.nytimes.com
- Forbes, "Zuckerberg Loses $5.9B in a Day" (estimate)www.forbes.com
- Reuters, Telegram's 70 million sign-ups (Durov's figure)www.reuters.com
- Krebs on Securitykrebsonsecurity.com



