# Қайта жүктеу Telstra-ны 2006 жылға жіберді. Тоғыз миллион телефон.

Published: 2026-09-22

Мельбурндегі инженер таңғы сағат 2:50-де тайминг шассиін қайта қосады, содан кейін таңғы асқа дейін Австралияның ең ірі мобильді желісі 2006 жылдың қарашасы деп келіседі. 2026 жылдың 8 шілдесі: Telstra-ның NTP шассиіндегі GPS картасы қуат көзін жөндеу кезінде қайта жүктеледі, оның микробағдарламасы GPS апталық айналым жаңартуын ешқашан алмаған, сондықтан ол ескі дәуірді таңдап, 1024 апта бұрынғы уақытқа оралады. Себебі 2025 жылдың қазанындағы уақытша шешім бұл картаны желінің жалғыз 1-қабат көзіне айналдырған болатын — және 2020 жылы NTP теңдестіруге көшу одан кейінгі барлық басқа көздерді қалдырғандықтан — қате күн дауыс беруде жеңеді. Таңғы сағат 4-тен бастап хендовер түйіндері қайта орнатылады, барлық қоңыраулар мен деректер сеанстарының 45%-ы зардап шегеді, 9 миллионға жуық тұтынушы қоңыраулар, хабарламалар немесе деректерді жоғалтады, 604 үш нөлдік қоңырау қателік жібереді, Викторияның аймақтық пойыздары тоқтайды және көптеген қызметтер сағат 12:12-де қалпына келеді. Telstra-ның өз дабылдары жұмыс уақытында тексерілетін платформада болды; компания мұны тұтынушылар «Telstra істен шығуы» деп іздегендіктен байқады.

Canonical: https://thedailydiff.dev/kk/video/2026-09-22-telstra-2006/

## Бұл бейне не туралы

- GPS картасы 2006 жылдың қарашасында оянады
- Уақыт кестесі: 2010 дизайн → 2020 шасси → 2025 қазан GPS картасы → 02:50
- Таңертең: 04:00 MME қалпына келтіру → 04:20 дабыл дауылы → 12:12 қалпына келтірілді
- Механизм: NTP мүмкіндікті емес, келісімді дауысқа салады
- git blame — Telstra 55 · теңдестіру 25 · микробағдарлама 15 · қуат көзі 5

## Тараулар

- 0:00 GPS картасы 2006 жылдың қарашасында оянады
- 0:28 Уақыт кестесі: 2010 дизайн → 2020 шасси → 2025 қазан GPS картасы → 02:50
- 1:26 Таңертең: 04:00 MME қалпына келтіру → 04:20 дабыл дауылы → 12:12 қалпына келтірілді
- 1:47 Механизм: NTP мүмкіндікті емес, келісімді дауысқа салады
- 2:07 git blame — Telstra 55 · теңдестіру 25 · микробағдарлама 15 · қуат көзі 5
- 2:27 Жарылыс радиусы: сеанстардың 45%-ы, $30K қорап үшін $30M айыппұл
- 2:44 Үкім + дүйсенбі жолы: үш қалпақ киген бір сағат

## Аударылған транскрипция

Бастапқы ағылшын тіліндегі баяндамадан аударылған. Қолжетімді аудио және субтитрлерді YouTube басқарады.

### GPS картасы 2006 жылдың қарашасында оянады

0:00 Мельбурндегі инженер таңғы сағат үштен он минут кеткенде тайминг шассиін қайта қосады, содан кейін таңғы асқа дейін Австралияның ең ірі мобильді желісі бұл екі мың алтыншы жылдың қарашасы деп келіседі. Telstra-ның сыртқы есебінде бұл күн бір GPS картасынан шыққаны және бүкіл желі оған дауыс бергені айтылған. Тоғыз миллионға жуық тұтынушы қоңыраулар, хабарламалар немесе деректерді жоғалтады, және Викторияның аймақтық пойыздары сол күні тоқтайды. Бұл қалай болды, неге бір карта ұлттық сағаттан басым болды,

0:23 және кім кінәлі. Бұл The Daily Diff, постмортем.

### Уақыт кестесі: 2010 дизайн → 2020 шасси → 2025 қазан GPS картасы → 02:50

0:28 Екі мың оныншы жыл. Дизайн оқулықтағыдай. Үш ұлттық уақыт көзі екі серверге, олар төмендегі үшеуіне жібереді, және әрбір түйін уақытты тек жоғарыдан алады. Аудиторлар оны мақсатына сай деп атайды. Екі мың жиырма. Жаңа шасси. Ол өзінің төменгі серверін қоректендіре алмайды, сондықтан Сидней мен Мельбурн айқаспалы сымдармен қосылады және әрбір сайт бір сілтемеге түседі. Содан кейін барлығы теңдестіруге ауыстырылады, мұнда кез келген сервер кез келген

0:50 табылған серверден уақыт ала алады. Уақыт циклі деген сөз ешбір құжатта кездеспейді. Екі мың жиырма бесінші жылдың қазан айы. Мельбурн Сиднейді жоғалта береді, және оның дабылдары бесінші қабатты көрсетеді, яғни ол өз тұтынушыларынан уақыт алады. Ешкім билет бермейді. Оның орнына инженерлер бес жыл бойы бос тұрған GPS картасын қосады. Дабылдар тоқтайды.

1:07 Мельбурн енді бірінші қабат, ұлттық институттың дәрежесі, және оны ешкім қарамайды. Сегізінші шілде, таңғы екі жарым. Қуат көзін ауыстыру керек, сондықтан шасси қайта жүктеледі, және онымен бірге GPS картасы да. Оның микробағдарламасы ешқашан жаңартылмаған, сондықтан ол ескі дәуірді таңдап, бір мың жиырма төрт апта бұрынғы уақытқа оралады. Мельбурн ағаштың шыңында, және одан кейінгілері келісе бастайды.

### Таңертең: 04:00 MME қалпына келтіру → 04:20 дабыл дауылы → 12:12 қалпына келтірілді

1:26 Таңғы төрт, хендовер түйіндері қайта орнатыла бастайды. Төрт жиырма, дабыл дауылы, дабылдары жұмыс уақытында оқылатын платформада. Төрт жиырма тоғыз, Telstra байқайды, себебі тұтынушылар «Telstra істен шығуы» деп іздейді. Өзгеріс жасаған инженерлер міндетті демалыста, және күнді табуға сағаттар кетеді. Сағат он екі он екіге қарай көптеген тұтынушылар қалпына келеді.

### Механизм: NTP мүмкіндікті емес, келісімді дауысқа салады

1:47 Неге бұл мүмкін болды? NTP-да екі қорғаныс бар. Төменгі қабат жеңеді, және ерекше жағдайлар дауыс беру арқылы жойылады. GPS картасы бұзылған көзді ең жоғары дәрежеге айналдырды, және келіспейтін барлық көздер төменде отырды, оны қайталады. NTP ешқашан күннің мүмкін екенін сұрамайды, тек басқалар келісе ме деп сұрайды. Протокол жұмыс істеді.

2:06 Архитектура жұмыс істемеді.

### git blame — Telstra 55 · теңдестіру 25 · микробағдарлама 15 · қуат көзі 5

2:07 git blame. Telstra, елу бес пайыз. Ешкім сағатқа иелік етпеді, сондықтан ешкім өзгерісті қарамайды, және осы нақты қате туралы екі сатушы бюллетені оқылмай қалды. Теңдестіру режимі, жиырма бес, серверлерге өз дауыстарын қайталауға рұқсат бергені үшін. Микробағдарлама, он бес, жарияланған, бірақ ешқашан орнатылмаған. Қуат көзіне бес пайыз, сәрсенбі күні таңғы үштен он минут кеткен уақытты таңдағаны үшін. Жарылыс радиусы. Сол күнгі барлық қоңыраулар мен деректер сеанстарының қырық бес пайызы,

### Жарылыс радиусы: сеанстардың 45%-ы, $30K қорап үшін $30M айыппұл

2:30 деп айтады бас директор Сенатқа. Үстелдегі айыппұл отыз миллион доллар, отыз мың долларлық қораптан жоқ тегін жаңарту үшін. Карта екі мың он тоғызыншы жылы болған нақты айналымнан аман қалған, себебі ешкім оны өшірмеген. Жөндеу оны өлтірді. Үкім, постмортем: SHIP IT, жауапқа.

### Үкім + дүйсенбі жолы: үш қалпақ киген бір сағат

2:46 Telstra сыртқы аудиторларды жалдайды, есепті өңделмеген күйде жариялайды, уақытты ешқашан маңызды деп санамаған деген жолмен, және ол қонғанға дейін барлық үш сайтты ескі серверлерден ауыстырады. Дүйсенбі жолы: NTP трассировкасын іске қосыңыз және уақыт көздеріңіздің қаншасының үш қалпақ киген бір сағат екенін санаңыз. Маған әлі де айтуға рұқсат етілмеген оқиғаны жіберіңіз, пікірлерде, немесе thedailydiff.dev мекенжайы бойынша. Ал бүгінгі айырмашылық осы.

3:10 Мен Axrisi-ден Нико. Жауапкершілікпен біріктіріңіз.

## Дереккөздер

- [Technology Audit Partners, "Findings Report on the July 8th Telstra Outage" (published by Telstra, Sep 2, 2026)](https://www.telstra.com.au/content/dam/tcom/dynamic-media-projects/luke-campbell/TAP-Findings-for-Telstra-Outage.pdf) — www.telstra.com.au
- [Vicki Brady (Telstra CEO), "What we've learned from the external investigation of our July outage" (Sep 2, 2026)](https://www.telstra.com.au/exchange/what-we-ve-learned-from-the-external-investigation-of-our-july-o) — www.telstra.com.au
- [Netnod, Sven-Christian Ebenhag, "Telstra outage: The night a network decided the year was 2006" (Sep 17, 2026)](https://www.netnod.se/blog/telstra-outage-night-network-decided-year-was-2006) — www.netnod.se
- [Hacker News on the Netnod post (93 points)](https://news.ycombinator.com/item?id=49748957) — news.ycombinator.com
- [The Guardian, Senate inquiry: 45 % of sessions, ~9M customers, 604 Triple Zero errors (Jul 17, 2026)](https://www.theguardian.com/business/2026/jul/17/telstra-missing-software-update-undocumented-design-change-outage) — www.theguardian.com
- [ABC News, "Telstra recently warned about timing issue linked to national outage" (Jul 10, 2026)](https://www.abc.net.au/news/2026-07-10/telstra-warned-about-vulnerability-before-national-outage/106896906) — www.abc.net.au
- [The Register, the day itself (Jul 8, 2026)](https://www.theregister.com/networks/2026/07/08/telstra-outage-downs-000-calls-trains-payment-systems/5268265) — www.theregister.com
- [ACS Information Age, the $30,000 box and the $30M fine (Jul 14, 2026)](https://ia.acs.org.au/article/2026/telstra-outage-blamed-on-known-bug-in-obsolete-server.html) — ia.acs.org.au