+− THE DAILY DIFFdev & AI news
SHIP IT

’n Herlaai het Telstra na 2006 gestuur. Nege miljoen fone.

’n Ingenieur in Melbourne skakel ’n tydsberekeningsonderstel om 02:50 weer aan, en teen ontbyt stem Australië se grootste mobiele netwerk saam dat dit November 2006 is.

’n Ingenieur in Melbourne skakel ’n tydsberekeningsonderstel om 02:50 weer aan, en teen ontbyt stem Australië se grootste mobiele netwerk saam dat dit November 2006 is. 8 Julie 2026: ’n GPS-kaart in Telstra se NTP-onderstel herlaai tydens ’n kragtoevoerherstel, sy firmware het nog nooit die GPS-week-oorskakeling-opdatering gehad nie, so dit kies die ou epog en land 1 024 weke in die verlede. Omdat ’n Oktober 2025-oplossing daardie kaart die netwerk se enigste stratum-1 bron gemaak het – en ’n 2020-oorskakeling na NTP-koppeling elke ander bron stroomaf daarvan gelaat het – wen die verkeerde datum die stem. Oordragnodusse stel vanaf 04:00 terug, 45% van alle oproepe en datasessies word geaffekteer, byna 9 miljoen klante verloor oproepe, tekste of data, 604 Triple Zero-oproepe fout, Victoria se streekstreine stop, en die meeste dienste kom om 12:12 terug. Telstra se eie alarms het op ’n platform gesit wat gedurende besigheidsure nagegaan is; die maatskappy het dit opgemerk omdat klante “Telstra-onderbreking” gegoogle het.

Lees die geskrewe uitgawe (Engels) ↗

Wat hierdie video dek

  • ’n GPS-kaart word in November 2006 wakker
  • Tydlyn: 2010 ontwerp → 2020 onderstel → Okt 2025 GPS-kaart → 02:50
  • Die oggend: 04:00 MME stel terug → 04:20 alarmstorm → 12:12 herstel
  • Meganisme: NTP stem oor ooreenstemming, nie aannemelikheid nie
  • git blame — Telstra 55 · koppeling 25 · firmware 15 · die kragtoevoer 5

Vertaalde transkripsie

Vertaal uit die oorspronklike Engelse vertelling. Beskikbare klank en onderskrifte word deur YouTube beheer.

’n GPS-kaart word in November 2006 wakker

0:00 ’n Ingenieur in Melbourne skakel ’n tydsberekeningsonderstel om tien voor drie in die oggend weer aan, en teen ontbyt stem Australië se grootste mobiele netwerk saam dat dit November tweeduisend en ses is. Telstra se buiteverslag sê die datum het een GPS-kaart gelaat en die hele netwerk het daarvoor gestem. Byna nege miljoen klante verloor oproepe, tekste of data, en Victoria se streekstreine stop vir die dag. Hoe dit gebeur het, waarom een kaart die nasionale horlosie oortref het,

0:23 en wie die skuld kry. Hierdie is The Daily Diff, nadoodse ondersoek.

Tydlyn: 2010 ontwerp → 2020 onderstel → Okt 2025 GPS-kaart → 02:50

0:28 Tweeduisend en tien. Die ontwerp is handboek. Drie nasionale tydbronne voed twee bedieners, dié voed drie hieronder, en elke nodus neem slegs tyd van bo af. Die ouditeure noem dit geskik vir doel. Tweeduisend en twintig. Nuwe onderstel. Dit kan nie sy eie laer bediener voed nie, so Sydney en Melbourne word dwarsbedraad en elke terrein val terug op een verwysing. Dan word alles na koppeling oorgeskakel, waar enige bediener tyd kan neem van enige

0:50 bediener wat dit vind. Die woorde tydsberekeningslus verskyn in geen dokument nie. Oktober tweeduisend vyf-en-twintig. Melbourne verloor steeds Sydney, en sy alarms sê stratum vyf, wat beteken dit neem tyd van sy eie klante. Niemand dien ’n kaartjie in nie. In plaas daarvan skakel die ingenieurs ’n GPS-kaart aan wat vyf jaar lank ledig was. Die alarms stop.

1:07 Melbourne is nou stratum een, die rang van die nasionale instituut, en niemand hersien dit nie. Agste Julie, twee-vyftig in die oggend. ’n Kragtoevoer moet vervang word, so die onderstel herlaai, en die GPS-kaart daarmee saam. Sy firmware is nooit opgedateer nie, so dit kies die ou epog en land duisend vier-en-twintig weke in die verlede. Melbourne is bo-aan die boom, en stroomaf begin saamstem.

Die oggend: 04:00 MME stel terug → 04:20 alarmstorm → 12:12 herstel

1:26 Vieruur, die oordragnodusse begin terugstel. Vier-twintig, ’n alarmstorm, op ’n platform waarvan die alarms gedurende besigheidsure gelees word. Vier-nege-en-twintig, Telstra merk dit op, omdat klante “Telstra-onderbreking” google. Die ingenieurs wat die verandering aangebring het, is op verpligte rus, en dit neem ure om die datum te vind. Teen twaalf-twaalf is die meeste klante terug.

Meganisme: NTP stem oor ooreenstemming, nie aannemelikheid nie

1:47 Waarom was dit moontlik? NTP het twee verdedigingsmeganismes. Laer stratum wen, en uitskieters word uitgestem. Die GPS-kaart het die gebroke bron die hoogste rang gegee, en elke bron wat kon verskil het stroomaf gesit, en dit herhaal. NTP vra nooit of ’n datum aannemelik is nie, slegs of die ander saamstem. Die protokol het gewerk.

2:06 Die argitektuur het nie.

git blame — Telstra 55 · koppeling 25 · firmware 15 · die kragtoevoer 5

2:07 git blame. Telstra, vyf-en-vyftig persent. Niemand het die horlosie besit nie, so niemand het die verandering hersien nie, en twee verskaffersbulletins oor hierdie presiese fout is ongelees gelaat. Koppelingsmodus, vyf-en-twintig, vir die toelaat van bedieners om met hul eie eggo te stem. Die firmware, vyftien, gepubliseer en nooit geïnstalleer nie. Vyf persent aan die kragtoevoer, vir die keuse van tien voor drie op ’n Woensdag. Impakradius. Vyf-en-veertig persent van alle oproepe en datasessies daardie dag,

Impakradius: 45% van sessies, ’n boete van $30M vir ’n boks van $30K

2:30 vertel die HUB die Senaat. Die boete op die tafel is dertig miljoen dollar, vir ’n gratis opdatering wat ontbreek van ’n dertigduisend dollar boks. Die kaart het die regte oorskakeling in tweeduisend en negentien oorleef omdat niemand dit afgeskakel het nie. Die herstelwerk het dit doodgemaak. Uitspraak, nadoodse ondersoek: SHIP IT, oor die reaksie.

Uitspraak + die Maandaglyn: een horlosie wat drie hoede dra

2:46 Telstra huur eksterne ouditeure, publiseer die verslag ongeredigeer, met die stelling dat dit nooit tyd as krities behandel het nie, en skuif al drie terreine van die ou bedieners af voordat dit landing vind. Maandaglyn: voer ’n NTP-spoor uit en tel hoeveel van jou tydbronne een horlosie is wat drie hoede dra. Stuur vir my die insident waaroor jy nog steeds nie mag praat nie, in die kommentaar, of by thedailydiff.dev. En dit is die verskil vir vandag.

3:10 Ek is Niko van Axrisi. Voeg verantwoordelik saam.

Bronne

  1. Technology Audit Partners, "Findings Report on the July 8th Telstra Outage" (published by Telstra, Sep 2, 2026)www.telstra.com.au
  2. Vicki Brady (Telstra CEO), "What we've learned from the external investigation of our July outage" (Sep 2, 2026)www.telstra.com.au
  3. Netnod, Sven-Christian Ebenhag, "Telstra outage: The night a network decided the year was 2006" (Sep 17, 2026)www.netnod.se
  4. Hacker News on the Netnod post (93 points)news.ycombinator.com
  5. The Guardian, Senate inquiry: 45 % of sessions, ~9M customers, 604 Triple Zero errors (Jul 17, 2026)www.theguardian.com
  6. ABC News, "Telstra recently warned about timing issue linked to national outage" (Jul 10, 2026)www.abc.net.au
  7. The Register, the day itself (Jul 8, 2026)www.theregister.com
  8. ACS Information Age, the $30,000 box and the $30M fine (Jul 14, 2026)ia.acs.org.au

Verwante video's