ਫੇਸਬੁੱਕ ਨੇ ਖੁਦ ਨੂੰ ਇੰਟਰਨੈੱਟ ਤੋਂ ਮਿਟਾ ਦਿੱਤਾ। ਛੇ ਘੰਟੇ।

ਇਹ ਵੀਡੀਓ ਕੀ ਕਵਰ ਕਰਦਾ ਹੈ

• ਫੇਸਬੁੱਕ ਆਪਣਾ ਪਤਾ ਹਟਾ ਦਿੰਦਾ ਹੈ
• ਰਸੀਦਾਂ: Meta Engineering, Cloudflare, Hacker News
• ਇਹ The Daily Diff, ਪੋਸਟਮੋਰਟਮ ਹੈ
• ਟਾਈਮਲਾਈਨ: 15:39 ਕਮਾਂਡ → 15:40 ਵਾਪਸ ਲਿਆ ਗਿਆ → 21:20 ਵਾਪਸ
• ਤੰਤਰ: ਸਿਹਤ ਜਾਂਚ ਜੋ ਤੁਹਾਨੂੰ ਮਿਟਾ ਦਿੰਦੀ ਹੈ, 30× DNS ਤੂਫਾਨ, ਦਰਵਾਜ਼ੇ

ਅਨੁਵਾਦਿਤ ਟ੍ਰਾਂਸਕ੍ਰਿਪਟ

ਮੂਲ ਅੰਗਰੇਜ਼ੀ ਬਿਰਤਾਂਤ ਤੋਂ ਅਨੁਵਾਦ ਕੀਤਾ ਗਿਆ। ਉਪਲਬਧ ਆਡੀਓ ਅਤੇ ਕੈਪਸ਼ਨ YouTube ਦੁਆਰਾ ਨਿਯੰਤਰਿਤ ਕੀਤੇ ਜਾਂਦੇ ਹਨ।

ਫੇਸਬੁੱਕ ਆਪਣਾ ਪਤਾ ਹਟਾ ਦਿੰਦਾ ਹੈ

0:00 ਫੇਸਬੁੱਕ ਇੰਟਰਨੈੱਟ ਤੋਂ ਆਪਣਾ ਪਤਾ ਹਟਾ ਦਿੰਦਾ ਹੈ, ਅਤੇ ਜਦੋਂ ਇਸਦੇ ਇੰਜੀਨੀਅਰ ਇਸਨੂੰ ਵਾਪਸ ਲਗਾਉਣ ਲਈ ਆਉਂਦੇ ਹਨ, ਤਾਂ ਬੈਜ ਰੀਡਰ ਵੀ ਬੰਦ ਹੋ ਜਾਂਦੇ ਹਨ, ਕਿਉਂਕਿ ਉਹ ਫੇਸਬੁੱਕ 'ਤੇ ਚੱਲਦੇ ਹਨ। ਮੈਟਾ ਦਾ ਆਪਣਾ ਪੋਸਟਮੋਰਟਮ, ਅਗਲੇ ਦਿਨ: ਇੱਕ ਰੁਟੀਨ ਰੱਖ-ਰਖਾਅ ਕਮਾਂਡ ਹਰ ਬੈਕਬੋਨ ਲਿੰਕ ਨੂੰ ਬੰਦ ਕਰ ਦਿੰਦੀ ਹੈ, ਅਤੇ ਅਜਿਹੀਆਂ ਕਮਾਂਡਾਂ ਨੂੰ ਰੋਕਣ ਲਈ ਬਣਾਏ ਗਏ ਟੂਲ ਵਿੱਚ ਇੱਕ ਬੱਗ ਹੈ।

ਰਸੀਦਾਂ: Meta Engineering, Cloudflare, Hacker News

0:16 ਕਲਾਉਡਫਲੇਅਰ, ਬਾਹਰੋਂ: 15:40 UTC 'ਤੇ ਫੇਸਬੁੱਕ ਦੇ ਨਾਮ ਸਰਵਰਾਂ ਦੇ ਰੂਟ ਗਾਇਬ ਹੋ ਜਾਂਦੇ ਹਨ, ਅਤੇ dig facebook.com ਧਰਤੀ 'ਤੇ ਹਰ ਜਗ੍ਹਾ SERVFAIL ਵਾਪਸ ਕਰਦਾ ਹੈ। ਇਹ ਕਿਵੇਂ ਹੁੰਦਾ ਹੈ, ਇੱਕ ਸੁਰੱਖਿਆ ਵਿਸ਼ੇਸ਼ਤਾ ਇਸਨੂੰ ਕਿਉਂ ਬਦਤਰ ਬਣਾਉਂਦੀ ਹੈ, ਅਤੇ ਕਿਸ ਨੂੰ ਦੋਸ਼ੀ ਠਹਿਰਾਇਆ ਜਾਂਦਾ ਹੈ। ਇਹ The Daily Diff, ਪੋਸਟਮੋਰਟਮ ਹੈ। ਦੁਪਹਿਰ ਦਾ ਸ਼ੁਰੂਆਤੀ ਸਮਾਂ, UTC।

ਇਹ The Daily Diff, ਪੋਸਟਮੋਰਟਮ ਹੈ

0:34 ਇੱਕ ਕਮਾਂਡ ਜੋ ਮੁਫਤ ਬੈਕਬੋਨ ਸਮਰੱਥਾ ਦੀ ਜਾਂਚ ਕਰਨ ਲਈ ਸੀ, ਇਸਦੀ ਬਜਾਏ ਹਰ ਲਿੰਕ ਨੂੰ ਬੰਦ ਕਰ ਦਿੰਦੀ ਹੈ ਫੇਸਬੁੱਕ ਦੇ ਡਾਟਾ ਸੈਂਟਰਾਂ ਵਿਚਕਾਰ, ਅਤੇ ਇਸੇ ਨੂੰ ਫੜਨ ਲਈ ਬਣਾਇਆ ਗਿਆ ਆਡਿਟ ਟੂਲ

ਟਾਈਮਲਾਈਨ: 15:39 ਕਮਾਂਡ → 15:40 ਵਾਪਸ ਲਿਆ ਗਿਆ → 21:20 ਵਾਪਸ

0:41 ਇਸਨੂੰ ਅੱਗੇ ਵਧਾਉਂਦਾ ਹੈ। 15:40। ਕਲਾਉਡਫਲੇਅਰ ਦੀ BGP ਫੀਡ ਵਾਪਸੀ ਨਾਲ ਭਰ ਜਾਂਦੀ ਹੈ; ਫੇਸਬੁੱਕ ਦੇ DNS ਪ੍ਰੀਫਿਕਸ ਰੂਟਿੰਗ ਟੇਬਲ ਛੱਡ ਦਿੰਦੇ ਹਨ। ਇੱਕ ਮਿੰਟ ਦੇ ਅੰਦਰ ਕਲਾਉਡਫਲੇਅਰ ਦੇ ਇੰਜੀਨੀਅਰ ਇੱਕ ਕਮਰੇ ਵਿੱਚ ਹੈਰਾਨ ਹਨ ਕਿ ਕੀ ਉਹਨਾਂ ਨੇ 1.1.1.1 ਤੋੜ ਦਿੱਤਾ। 15:45, Hacker News, ਛੱਬੀ ਸੌ ਅੰਕ। 16:07, ਫੇਸਬੁੱਕ ਦਾ ਬੁਲਾਰਾ, ਟਵਿੱਟਰ 'ਤੇ ਹੀ: ਕੁਝ ਲੋਕਾਂ ਨੂੰ ਸਾਡੇ ਐਪਸ ਤੱਕ ਪਹੁੰਚ ਕਰਨ ਵਿੱਚ ਮੁਸ਼ਕਲ ਹੋ ਰਹੀ ਹੈ। ਕੁਝ ਲੋਕ ਸਾਢੇ ਤਿੰਨ ਅਰਬ ਹਨ।

1:06 18:51, ਨਿਊਯਾਰਕ ਟਾਈਮਜ਼: ਕਰਮਚਾਰੀ ਆਪਣੀਆਂ ਇਮਾਰਤਾਂ ਤੋਂ ਬਾਹਰ ਬੰਦ, ਬੈਜ ਮਰੇ ਹੋਏ। 19:52, CTO ਮੁਆਫੀ ਮੰਗਦਾ ਹੈ। 21:00, ਪੰਜ ਘੰਟੇ ਵਿੱਚ, ਰੂਟ ਵਾਪਸ ਆਉਂਦੇ ਹਨ; 21:20, facebook.com ਹੱਲ ਹੋ ਜਾਂਦਾ ਹੈ। ਇੱਕ ਬੈਕਬੋਨ ਨੁਕਸ ਫੇਸਬੁੱਕ ਨੂੰ ਇੰਟਰਨੈੱਟ ਤੋਂ ਕਿਉਂ ਮਿਟਾ ਦਿੰਦਾ ਹੈ?

ਤੰਤਰ: ਸਿਹਤ ਜਾਂਚ ਜੋ ਤੁਹਾਨੂੰ ਮਿਟਾ ਦਿੰਦੀ ਹੈ, 30× DNS ਤੂਫਾਨ, ਦਰਵਾਜ਼ੇ

1:20 ਇਸਦੇ ਨਾਮ ਸਰਵਰਾਂ ਦਾ ਇੱਕ ਨਿਯਮ ਹੈ: ਡਾਟਾ ਸੈਂਟਰਾਂ ਤੱਕ ਪਹੁੰਚ ਨਹੀਂ ਕਰ ਸਕਦੇ, ਆਪਣੇ ਆਪ ਨੂੰ ਗੈਰ-ਸਿਹਤਮੰਦ ਘੋਸ਼ਿਤ ਕਰੋ, ਆਪਣੇ ਪਤੇ ਦਾ ਇਸ਼ਤਿਹਾਰ ਦੇਣਾ ਬੰਦ ਕਰੋ। ਸਮਝਦਾਰ ਜਦੋਂ ਇੱਕ ਸਾਈਟ ਖਰਾਬ ਹੋ ਜਾਂਦੀ ਹੈ। ਜਦੋਂ ਪੂਰਾ ਬੈਕਬੋਨ ਚਲਾ ਜਾਂਦਾ ਹੈ, ਤਾਂ ਹਰ ਨਾਮ ਸਰਵਰ ਇੱਕੋ ਵਾਰ ਅਜਿਹਾ ਕਰਦਾ ਹੈ। ਸਰਵਰ ਚਾਲੂ ਹਨ। ਕੋਈ ਵੀ ਉਹਨਾਂ ਨੂੰ ਲੱਭ ਨਹੀਂ ਸਕਦਾ। ਇੱਕ ਸੁਰੱਖਿਆ ਵਿਸ਼ੇਸ਼ਤਾ ਇੱਕ ਨੈੱਟਵਰਕ ਨੁਕਸ ਨੂੰ ਇੱਕ ਮੌਜੂਦਗੀ ਨੁਕਸ ਵਿੱਚ ਬਦਲ ਦਿੰਦੀ ਹੈ। ਫਿਰ ਇੰਟਰਨੈੱਟ ਢੇਰ ਹੋ ਜਾਂਦਾ ਹੈ: ਐਪਸ ਦੁਬਾਰਾ ਕੋਸ਼ਿਸ਼ ਕਰਦੇ ਹਨ, ਉਪਭੋਗਤਾ ਦੁਬਾਰਾ ਲੋਡ ਕਰਦੇ ਹਨ,

1:39 ਅਤੇ ਕਲਾਉਡਫਲੇਅਰ ਦਾ ਰੈਜ਼ੋਲਵਰ ਇਸਦੇ ਆਮ ਲੋਡ ਦਾ ਤੀਹ ਗੁਣਾ ਦੇਖਦਾ ਹੈ, ਇੱਕ ਸਾਈਟ ਲਈ ਜੋ ਉੱਥੇ ਨਹੀਂ ਹੈ। ਅਤੇ ਦਰਵਾਜ਼ੇ। ਟੂਲ, ਆਊਟ-ਆਫ-ਬੈਂਡ ਪਹੁੰਚ, ਬੈਜ: ਇੱਕੋ ਨੈੱਟਵਰਕ। ਇੰਜੀਨੀਅਰ ਡਾਟਾ ਸੈਂਟਰਾਂ ਵੱਲ ਜਾਂਦੇ ਹਨ, ਅੰਦਰ ਨਹੀਂ ਜਾ ਸਕਦੇ, ਫਿਰ ਕਠੋਰ ਰੈਕਾਂ ਨੂੰ ਮਿਲਦੇ ਹਨ ਕਿਸੇ ਵੀ ਭੌਤਿਕ ਪਹੁੰਚ ਵਾਲੇ ਵਿਅਕਤੀ ਦੇ ਵਿਰੁੱਧ। ਇੱਕ ਹਮਲਾਵਰ ਨੂੰ ਹੌਲੀ ਕਰਨ ਲਈ ਬਣਾਇਆ ਗਿਆ, ਇਹ ਮਾਲਕ ਨੂੰ ਵੀ ਹੌਲੀ ਕਰਦਾ ਹੈ। ਬੈਕਬੋਨ ਵਾਪਸ ਆਉਂਦਾ ਹੈ; ਉਹ ਜਾਣਬੁੱਝ ਕੇ ਹੌਲੀ ਹੌਲੀ ਟ੍ਰੈਫਿਕ ਵਧਾਉਂਦੇ ਹਨ।

1:59 ਹਰ ਡਾਟਾ ਸੈਂਟਰ ਨੇ ਦਸਾਂ ਮੈਗਾਵਾਟ ਛੱਡ ਦਿੱਤੇ ਹਨ, ਅਤੇ ਇਸਨੂੰ ਇੱਕ ਕਦਮ ਵਿੱਚ ਉਲਟਾਉਣਾ ਇੱਕ ਦੂਜੀ ਰੁਕਾਵਟ ਹੈ।

git blame — ਵੰਡ

2:05 git blame। ਫੇਸਬੁੱਕ, ਪੰਜਾਹ ਪ੍ਰਤੀਸ਼ਤ: ਕਮਾਂਡ ਦੀ ਜਾਂਚ ਕੀਤੀ ਗਈ ਸੀ, ਆਡਿਟਰ ਵਿੱਚ ਬੱਗ ਸੀ, ਇੱਕ ਕਮਾਂਡ ਹਰ ਰਾਊਟਰ ਤੱਕ ਪਹੁੰਚ ਗਈ। DNS ਡਿਜ਼ਾਈਨ, ਪੰਝੀ: ਅਨੁਪਾਤ ਦੀ ਭਾਵਨਾ ਤੋਂ ਬਿਨਾਂ ਇੱਕ ਸਿਹਤ ਜਾਂਚ। ਇੱਕ ਨੈੱਟਵਰਕ, ਪੰਦਰਾਂ: ਟੂਲ, ਆਊਟ-ਆਫ-ਬੈਂਡ, ਬੈਜ। ਰੈਕ, ਪੰਜ, ਆਪਣਾ ਕੰਮ ਕਰਨ ਲਈ। ਬਲਾਸਟ ਘੇਰਾ: ਸਾਢੇ ਤਿੰਨ ਅਰਬ ਉਪਭੋਗਤਾ, ਲਗਭਗ ਛੇ ਘੰਟੇ। ਸਟਾਕ ਪੰਜ ਪ੍ਰਤੀਸ਼ਤ ਘੱਟ ਬੰਦ ਹੋਇਆ, ਜ਼ੁਕਰਬਰਗ ਤੋਂ ਛੇ ਅਰਬ ਘੱਟ,

ਬਲਾਸਟ ਘੇਰਾ

2:27 ਕਾਗਜ਼ 'ਤੇ। ਟੈਲੀਗ੍ਰਾਮ ਉਸ ਦਿਨ ਸੱਤਰ ਮਿਲੀਅਨ ਸਾਈਨ-ਅੱਪ ਦਾ ਦਾਅਵਾ ਕਰਦਾ ਹੈ। ਫੈਸਲਾ, ਪੋਸਟਮੋਰਟਮ: NEEDS REVIEW। ਉਸੇ ਸ਼ਾਮ ਦਾ ਬਿਆਨ, ਇੱਕ ਦਿਨ ਦੇ ਅੰਦਰ ਨਾਮਜ਼ਦ-ਲੇਖਕ ਪੋਸਟਮੋਰਟਮ, ਆਡਿਟ-ਟੂਲ ਬੱਗ ਸਪੱਸ਼ਟ ਅੰਗਰੇਜ਼ੀ ਵਿੱਚ ਮੰਨਿਆ ਗਿਆ।

ਫੈਸਲਾ + ਸੋਮਵਾਰ ਲਾਈਨ

2:38 ਫਿਕਸ ਸੂਚੀ: ਟੈਸਟਿੰਗ ਅਤੇ ਡ੍ਰਿਲਸ ਨੂੰ ਮਜ਼ਬੂਤ ​​ਕਰੋ। ਉਤਪਾਦਨ ਨੈੱਟਵਰਕ ਤੋਂ ਦਰਵਾਜ਼ੇ ਹਟਾਉਣ ਬਾਰੇ ਕੁਝ ਨਹੀਂ। ਸੋਮਵਾਰ: ਆਪਣੀ ਆਊਟ-ਆਫ-ਬੈਂਡ ਪਹੁੰਚ, ਅਤੇ ਆਪਣਾ ਦਰਵਾਜ਼ਾ, ਇੱਕ ਨੈੱਟਵਰਕ 'ਤੇ ਰੱਖੋ ਜੋ ਤੁਸੀਂ ਨਹੀਂ ਚਲਾਉਂਦੇ। ਮੈਨੂੰ ਉਹ ਘਟਨਾ ਭੇਜੋ ਜਿਸ ਬਾਰੇ ਤੁਹਾਨੂੰ ਅਜੇ ਵੀ ਗੱਲ ਕਰਨ ਦੀ ਇਜਾਜ਼ਤ ਨਹੀਂ ਹੈ, ਟਿੱਪਣੀਆਂ ਵਿੱਚ, ਜਾਂ the daily diff dot dev 'ਤੇ। ਅਤੇ ਇਹ ਅੱਜ ਲਈ diff ਹੈ। ਮੈਂ Axrisi ਤੋਂ Niko ਹਾਂ।

2:58 Merge responsibly।

ਸਰੋਤ

1. Meta Engineering, "More details about the October 4 outage" (Santosh Janardhan, Oct 5, 2021)engineering.fb.com
2. Meta Engineering, "Update about the October 4th outage" (Oct 4, 2021)engineering.fb.com
3. Cloudflare, "Understanding how Facebook disappeared from the Internet" (Oct 4, 2021)blog.cloudflare.com
4. Mark Zuckerberg, note to employees (Oct 5, 2021)www.facebook.com
5. Andy Stone (Facebook), 16:07 UTCtwitter.com
6. Sheera Frenkel (NYT), 18:51 UTC, the badgestwitter.com
7. Mike Schroepfer (Facebook CTO), 19:52 UTCtwitter.com
8. Hacker News (2,589 points)news.ycombinator.com
9. The New York Times, "Gone in Minutes, Out for Hours"www.nytimes.com
10. Forbes, "Zuckerberg Loses $5.9B in a Day" (estimate)www.forbes.com
11. Reuters, Telegram's 70 million sign-ups (Durov's figure)www.reuters.com
12. Krebs on Securitykrebsonsecurity.com