+− THE DAILY DIFFdev & AI news
SHIP IT

Qayta yuklash Telstrani 2006 yilga qaytardi. To‘qqiz million telefon.

Melburndagi muhandis ertalab soat 2:50 da vaqt shassini yoqadi va nonushta paytigacha Avstraliyaning eng yirik mobil tarmog‘i 2006 yil noyabr ekanligiga rozi bo‘ladi.

Melburndagi muhandis ertalab soat 2:50 da vaqt shassini yoqadi va nonushta paytigacha Avstraliyaning eng yirik mobil tarmog‘i 2006 yil noyabr ekanligiga rozi bo‘ladi. 2026 yil 8 iyul: Telstra’ning NTP shassisidagi GPS kartasi quvvat manbaini ta’mirlash vaqtida qayta yuklanadi, uning proshivkasida GPS haftasi o‘tish yangilanishi hech qachon bo‘lmagan, shuning uchun u eski davrni tanlaydi va 1024 hafta oldinga tushadi. 2025 yil oktyabr oyidagi vaqtinchalik yechim ushbu kartani tarmoqning yagona stratum-1 manbai qilganligi sababli – va 2020 yilda NTP biriktirishga o‘tish har bir boshqa manbani uning pastki oqimida qoldirganligi sababli – noto‘g‘ri sana ovoz berishda g‘alaba qozonadi. O‘tkazish tugunlari soat ertalab 4 dan boshlab qayta tiklanadi, barcha qo‘ng‘iroqlar va ma’lumotlar seanslarining 45 foizi ta’sirlanadi, deyarli 9 million mijoz qo‘ng‘iroqlar, SMS yoki ma’lumotlarni yo‘qotadi, 604 ta "Triple Zero" qo‘ng‘iroqlari xatoga uchraydi, Viktoriyaning mintaqaviy poyezdlari to‘xtaydi va ko‘pgina xizmatlar 12:12 da qaytadi. Telstra’ning o‘z signallari ish soatlarida tekshiriladigan platformada joylashgan edi; kompaniya mijozlar "Telstra uzilishi" deb Google’da qidirayotganliklari sababli payqadi.

Yozma nashrini oʻqing (inglizcha) ↗

Bu video nimani qamrab oladi

  • GPS kartasi 2006 yil noyabrda uyg‘onadi
  • Vaqt jadvali: 2010 dizayn → 2020 shassi → 2025 yil oktyabr GPS kartasi → 02:50
  • Ertalab: 04:00 MME qayta tiklanadi → 04:20 signal bo‘roni → 12:12 tiklanadi
  • Mexanizm: NTP ishonchlilik bo‘yicha emas, kelishuv bo‘yicha ovoz beradi
  • git blame — Telstra 55 · biriktirish 25 · proshivka 15 · quvvat manbai 5

Tarjima qilingan transkript

Asl inglizcha hikoyadan tarjima qilingan. Mavjud audio va subtitrlar YouTube tomonidan boshqariladi.

GPS kartasi 2006 yil noyabrda uyg‘onadi

0:00 Melburndagi muhandis ertalab o‘n uchdan o‘n minut o‘tganda vaqt shassini qayta yoqadi, va nonushtagacha Avstraliyaning eng yirik mobil tarmog‘i ikki ming oltinchi yil noyabr ekanligiga rozi bo‘ladi. ikki ming olti noyabr. Telstra’ning tashqi hisobotida sanani bitta GPS kartasi qoldirgan va butun tarmoq unga ovoz berganligi aytiladi. Deyarli to‘qqiz million mijoz qo‘ng‘iroqlar, SMS yoki ma’lumotlarni yo‘qotadi, va Viktoriyaning mintaqaviy poyezdlari shu kun uchun to‘xtaydi. Qanday sodir bo‘ldi, nima uchun bitta karta milliy soatdan ustun turdi,

0:23 va kim aybdor. Bu The Daily Diff, postmortem.

Vaqt jadvali: 2010 dizayn → 2020 shassi → 2025 yil oktyabr GPS kartasi → 02:50

0:28 Ikki ming o‘ninchi yil. Dizayn darslikdagi kabi. Uchta milliy vaqt manbai ikkita serverni oziqlantiradi, ular uchta pastdagilarni oziqlantiradi, va har bir tugun vaqtni faqat yuqoridan oladi. Auditorlar buni maqsadga muvofiq deb atashadi. Ikki ming yigirmanchi yil. Yangi shassi. U o‘zining pastki serverini oziqlantira olmaydi, shuning uchun Sidney va Melburn o‘zaro ulanadi va har bir sayt bitta ma’lumotnoma manbaiga tushadi. Keyin hamma narsa biriktirishga o‘tadi, bu yerda har qanday server topgan har qanday serverdan vaqt olishi mumkin.

0:50 serverdan vaqt olishi mumkin. “Vaqt sikli” so‘zlari hech bir hujjatda uchramaydi. Ikki ming yigirma beshinchi yil oktyabr. Melburn Sidney bilan aloqani yo‘qotishda davom etadi va uning signallari stratum besh deb aytadi, ya’ni u o‘z mijozlaridan vaqt oladi degani. Hech kim chipta ochmaydi. Buning o‘rniga muhandislar besh yildan beri bo‘sh turgan GPS kartasini yoqishadi. Signallar to‘xtaydi.

1:07 Melburn endi stratum bir, milliy institut darajasi, va hech kim uni ko‘rib chiqmaydi. Sakkizinchi iyul, ertalab soat ikkidan ellik daqiqa o‘tgan. Quvvat manbaini almashtirish kerak, shuning uchun shassi qayta yuklanadi, va GPS kartasi ham u bilan birga. Uning proshivkasi hech qachon yangilanmagan, shuning uchun u eski davrni tanlaydi va ming yigirma to‘rt hafta oldinga tushadi. yigirma to‘rt hafta oldinga tushadi. Melburn daraxtning tepasida turadi va pastki oqim moslashishni boshlaydi.

Ertalab: 04:00 MME qayta tiklanadi → 04:20 signal bo‘roni → 12:12 tiklanadi

1:26 Ertalab soat to‘rtda uzatish tugunlari qayta tiklanishni boshlaydi. To‘rt yigirmada signal bo‘roni, signallari ish soatlarida o‘qiladigan platformada. soatlar. To‘rt yigirma to‘qqizda Telstra payqaydi, chunki mijozlar “Telstra uzilishi” deb Google’da qidirmoqda. Telstra uzilishi. O‘zgartirish kiritgan muhandislar majburiy dam olishda, va sanani topish soatlar talab qiladi. O‘n ikkidan o‘n ikki o‘tganda aksariyat mijozlar qaytadi.

Mexanizm: NTP ishonchlilik bo‘yicha emas, kelishuv bo‘yicha ovoz beradi

1:47 Nima uchun bu mumkin bo‘ldi? NTP’da ikkita himoya mavjud. Pastki stratum g‘alaba qozonadi va chetki elementlar ovozdan chiqariladi. GPS kartasi buzilgan manbani eng yuqori darajaga olib chiqdi, va norozi bo‘lishi mumkin bo‘lgan har bir manba pastki oqimda joylashgan edi, uni takrorlab. NTP hech qachon sana ishonchlimi deb so‘ramaydi, faqat boshqalar rozi bo‘ladimi. Protokol ishladi.

2:06 Arxitektura esa ishlamadi.

git blame — Telstra 55 · biriktirish 25 · proshivka 15 · quvvat manbai 5

2:07 git blame. Telstra, ellik besh foiz. Hech kim soatga egalik qilmagan, shuning uchun hech kim o‘zgartirishni ko‘rib chiqmagan, va bu aniq xato haqidagi ikkita sotuvchi xabarnomasi o‘qilmagan. Biriktirish rejimi, yigirma besh, serverlarga o‘z aks-sadolari bilan ovoz berishga ruxsat bergani uchun. Proshivka, o‘n besh, nashr etilgan va hech qachon o‘rnatilmagan. Quvvat manbaiga besh foiz, chorshanba kuni uchdan o‘n daqiqa kam vaqtni tanlagani uchun. Portlash radiusi. O‘sha kuni barcha qo‘ng‘iroqlar va ma’lumotlar seanslarining qirq besh foizi,

Portlash radiusi: seanslarning 45%, 30 ming dollarlik quti uchun 30 million dollarlik jarima

2:30 Bosh direktor Senatga aytadi. Stoldagi jarima o‘ttiz million dollar, o‘ttiz ming dollarlik qutidan bepul yangilanish yo‘qligi uchun. o‘ttiz ming dollarlik qutidan. Karta ikki ming o‘n to‘qqizinchi yilda haqiqiy o‘tishni hech kim o‘chirmagani uchun omon qolgan edi. uni o‘chirmagan. Ta’mirlash uni ishdan chiqardi. Hukm, postmortem: SHIP IT, javob bo‘yicha.

Hukm + Dushanba qatori: uchta shlyapa kiygan bir soat

2:46 Telstra tashqi auditorlarni yollaydi, hisobotni tahrirsiz nashr etadi, unda vaqtni hech qachon muhim deb hisoblamaganligi yozilgan, va u qo‘nganicha barcha uchta saytni eski serverlardan ko‘chiradi. Dushanba qatori: NTP izini ishga tushiring va qancha vaqt manbalaringiz bitta soat uchta shlyapa kiyganini sanang. Hali ham gapirishga ruxsat berilmagan hodisani menga yuboring, izohlarda yoki thedailydiff.dev manzilida. Va bugungi farq shundan iborat.

3:10 Men Axrisi’dan Niko’man. Mas’uliyat bilan birlashtiring.

Manbalar

  1. Technology Audit Partners, "Findings Report on the July 8th Telstra Outage" (published by Telstra, Sep 2, 2026)www.telstra.com.au
  2. Vicki Brady (Telstra CEO), "What we've learned from the external investigation of our July outage" (Sep 2, 2026)www.telstra.com.au
  3. Netnod, Sven-Christian Ebenhag, "Telstra outage: The night a network decided the year was 2006" (Sep 17, 2026)www.netnod.se
  4. Hacker News on the Netnod post (93 points)news.ycombinator.com
  5. The Guardian, Senate inquiry: 45 % of sessions, ~9M customers, 604 Triple Zero errors (Jul 17, 2026)www.theguardian.com
  6. ABC News, "Telstra recently warned about timing issue linked to national outage" (Jul 10, 2026)www.abc.net.au
  7. The Register, the day itself (Jul 8, 2026)www.theregister.com
  8. ACS Information Age, the $30,000 box and the $30M fine (Jul 14, 2026)ia.acs.org.au

Tegishli videolar