+− THE DAILY DIFFdev & AI news
SHIP IT

Un reinicio envió a Telstra a 2006. Nueve millones de teléfonos.

Un ingeniero en Melbourne vuelve a encender un chasis de sincronización a las 2:50 a.m., y para el desayuno, la red móvil más grande de Australia concuerda en que es noviembre de 2006.

Want to see our stories first on Google? Add us to your preferred sources — it helps us grow.

Un ingeniero en Melbourne vuelve a encender un chasis de sincronización a las 2:50 a.m., y para el desayuno, la red móvil más grande de Australia concuerda en que es noviembre de 2006. 8 de julio de 2026: una tarjeta GPS en el chasis NTP de Telstra se reinicia durante una reparación de la fuente de alimentación, su firmware nunca ha tenido la actualización de la semana de reinicio del GPS, por lo que elige la época antigua y aterriza 1,024 semanas en el pasado. Debido a que una solución provisional de octubre de 2025 había convertido esa tarjeta en la única fuente de estrato 1 de la red, y un cambio en 2020 a la interconexión NTP había dejado todas las demás fuentes río abajo, la fecha incorrecta gana la votación. Los nodos de transferencia se reinician a partir de las 4 a.m., el 45 % de todas las llamadas y sesiones de datos se ven afectadas, casi 9 millones de clientes pierden llamadas, mensajes de texto o datos, 604 llamadas al Triple Zero dan error, los trenes regionales de Victoria se detienen y la mayoría de los servicios regresan a las 12:12. Las propias alarmas de Telstra estaban en una plataforma revisada en horario laboral; la compañía se dio cuenta porque los clientes estaban buscando en Google "Telstra outage".

Leer la edición escrita (inglés) ↗

Lo que cubre este video

  • Una tarjeta GPS se despierta en noviembre de 2006
  • Cronología: diseño de 2010 → chasis de 2020 → tarjeta GPS de oct 2025 → 02:50
  • La mañana: reinicios de MME a las 04:00 → tormenta de alarmas a las 04:20 → restaurado a las 12:12
  • Mecanismo: NTP vota por acuerdo, no por plausibilidad
  • git blame — Telstra 55 · peering 25 · firmware 15 · la fuente de alimentación 5

Preguntas y respuestas

¡Qué causó el apagón de la red móvil de Telstra el 8 de julio de 2026?

Una tarjeta GPS en el chasis de temporización NTP de Telstra se reinició durante una reparación de la fuente de alimentación a las 2:50 a.m. Según el informe de auditoría, su firmware nunca tuvo la actualización de reversión de semana de GPS, por lo que la tarjeta seleccionó la época antigua y se estableció 1,024 semanas en el pasado. La red entonces acordó que la fecha era noviembre de 2006.

Ver esta parte 0:28 · www.telstra.com.au · www.netnod.se

¿Por qué los servidores de tiempo de una red aceptaron una fecha que era claramente incorrecta?

NTP verifica si las fuentes están de acuerdo y nunca pregunta si una fecha es plausible. La solución provisional de Telstra de octubre de 2025 hizo que la tarjeta GPS fuera la única fuente de estrato 1, y un cambio en 2020 al emparejamiento NTP dejó todas las demás fuentes río abajo de ella. Por lo tanto, la fuente rota superó al resto y su fecha ganó la votación.

Ver esta parte 1:47 · www.telstra.com.au · www.netnod.se

¿Cómo se desarrolló el apagón de Telstra y cómo se enteró la empresa?

Los nodos de traspaso comenzaron a reiniciarse a las 04:00, seguidos por una tormenta de alarmas a las 04:20 en una plataforma cuyas alarmas se leían en horario comercial. Telstra se dio cuenta alrededor de veintinueve minutos después de las cuatro porque los clientes estaban buscando 'Telstra outage' en Google. Los ingenieros que hicieron el cambio estaban en descanso obligatorio, encontrar la fecha tomó horas y la mayoría de los clientes regresaron a las 12:12.

Ver esta parte 1:26 · www.telstra.com.au · www.netnod.se

¿A cuántas personas y servicios afectó el apagón de Telstra?

El CEO de Telstra le dijo al Senado que el 45% de todas las llamadas y sesiones de datos de ese día se vieron afectadas, según The Guardian. Casi 9 millones de clientes perdieron llamadas, mensajes de texto o datos, 604 llamadas al Triple Cero tuvieron errores y los trenes regionales de Victoria se detuvieron. Estaba sobre la mesa una multa de treinta millones de dólares.

Ver esta parte 2:27 · www.theguardian.com · ia.acs.org.au

¿Manejo bien Telstra el apagón del reloj de 2006, y qué deberían verificar otros equipos?

El veredicto de The Daily Diff fue SHIP IT, sobre la respuesta. Telstra contrató a auditores externos y publicó su informe sin editar, incluyendo el hallazgo de que nunca trató el tiempo como crítico. La línea del lunes para otros equipos es ejecutar un rastreo NTP y contar cuántas de sus fuentes de tiempo son un reloj con tres sombreros.

Ver esta parte 2:44 · www.telstra.com.au · www.telstra.com.au

Transcripción traducida

Traducido de la narración original en inglés. El audio y los subtítulos disponibles son controlados por YouTube.

Una tarjeta GPS se despierta en noviembre de 2006

0:00 Un ingeniero en Melbourne vuelve a encender un chasis de sincronización a las dos cincuenta de la mañana, y para el desayuno, la red móvil más grande de Australia concuerda en que es noviembre de dos mil seis. El informe externo de Telstra dice que la fecha dejó una tarjeta GPS y toda la red votó por ella. Casi nueve millones de clientes pierden llamadas, mensajes de texto o datos, y los trenes regionales de Victoria se detienen por el día. Cómo sucedió, por qué una tarjeta superó al reloj nacional,

0:23 y quién tiene la culpa. Esto es The Daily Diff, postmortem.

Cronología: diseño de 2010 → chasis de 2020 → tarjeta GPS de oct 2025 → 02:50

0:28 Dos mil diez. El diseño es de libro. Tres fuentes de tiempo nacionales alimentan dos servidores, estos alimentan a tres abajo, y cada nodo toma tiempo solo de arriba. Los auditores lo consideran apto para su propósito. Dos mil veinte. Chasis nuevo. No puede alimentar su propio servidor inferior, por lo que Sídney y Melbourne se cruzan y cada sitio se reduce a una referencia. Luego todo se cambia a "peering", donde cualquier servidor puede tomar tiempo de cualquier

0:50 servidor que encuentre. Las palabras "bucle de sincronización" no aparecen en ningún documento. Octubre de dos mil veinticinco. Melbourne sigue perdiendo Sídney, y sus alarmas dicen estrato cinco, lo que significa que toma tiempo de sus propios clientes. Nadie presenta un ticket. En su lugar, los ingenieros encienden una tarjeta GPS que ha estado inactiva durante cinco años. Las alarmas se detienen.

1:07 Melbourne es ahora estrato uno, el rango del instituto nacional, y nadie lo revisa. Ocho de julio, dos cincuenta de la mañana. Es necesario reemplazar una fuente de alimentación, por lo que el chasis se reinicia, y la tarjeta GPS con él. Su firmware nunca fue actualizado, por lo que elige la época antigua y aterriza mil veinticuatro semanas en el pasado. Melbourne es la cima del árbol, y el flujo descendente comienza a ponerse de acuerdo.

La mañana: reinicios de MME a las 04:00 → tormenta de alarmas a las 04:20 → restaurado a las 12:12

1:26 Cuatro a.m., los nodos de transferencia comienzan a reiniciarse. Cuatro veinte, una tormenta de alarmas, en una plataforma cuyas alarmas se leen en horario laboral. Cuatro veintinueve, Telstra se da cuenta, porque los clientes están buscando en Google Telstra outage. Los ingenieros que hicieron el cambio están en descanso obligatorio, y encontrar la fecha lleva horas. Para las doce doce, la mayoría de los clientes han vuelto.

Mecanismo: NTP vota por acuerdo, no por plausibilidad

1:47 ¿Por qué fue posible? NTP tiene dos defensas. El estrato inferior gana, y los valores atípicos son descartados por votación. La tarjeta GPS hizo que la fuente rota fuera el rango más alto, y cada fuente que podía discrepar se sentó río abajo, repitiéndola. NTP nunca pregunta si una fecha es plausible, solo si las demás están de acuerdo. El protocolo funcionó.

2:06 La arquitectura no.

git blame — Telstra 55 · peering 25 · firmware 15 · la fuente de alimentación 5

2:07 git blame. Telstra, cincuenta y cinco por ciento. Nadie era dueño del reloj, así que nadie revisó el cambio, y dos boletines de proveedores sobre este error exacto quedaron sin leer. Modo de "peering", veinticinco, por permitir que los servidores voten con su propio eco. El firmware, quince, publicado y nunca instalado. Cinco por ciento para la fuente de alimentación, por elegir las diez para las tres de un miércoles. Radio de impacto. Cuarenta y cinco por ciento de todas las llamadas y sesiones de datos ese día,

Radio de impacto: 45 % de las sesiones, una multa de $30M por una caja de $30K

2:30 le dice el CEO al Senado. La multa en la mesa es de treinta millones de dólares, por una actualización gratuita que falta en una caja de treinta mil dólares. La tarjeta había sobrevivido al verdadero "rollover" en dos mil diecinueve porque nadie la apagó. La reparación la mató. Veredicto, postmortem: SHIP IT, en la respuesta.

Veredicto + la línea del lunes: un reloj con tres funciones

2:46 Telstra contrata auditores externos, publica el informe sin editar, con la línea de que nunca trató el tiempo como crítico, y mueve los tres sitios fuera de los servidores antiguos antes de que aterrice. Línea del lunes: ejecute un rastreo NTP y cuente cuántas de sus fuentes de tiempo son un reloj con tres funciones. Envíenme el incidente del que todavía no se les permite hablar, en los comentarios, o en thedailydiff.dev. Y esa es la diferencia de hoy.

3:10 Soy Niko de Axrisi. Fusione responsablemente.

Fuentes

  1. Technology Audit Partners, "Findings Report on the July 8th Telstra Outage" (published by Telstra, Sep 2, 2026)www.telstra.com.au
  2. Vicki Brady (Telstra CEO), "What we've learned from the external investigation of our July outage" (Sep 2, 2026)www.telstra.com.au
  3. Netnod, Sven-Christian Ebenhag, "Telstra outage: The night a network decided the year was 2006" (Sep 17, 2026)www.netnod.se
  4. Hacker News on the Netnod post (93 points)news.ycombinator.com
  5. The Guardian, Senate inquiry: 45 % of sessions, ~9M customers, 604 Triple Zero errors (Jul 17, 2026)www.theguardian.com
  6. ABC News, "Telstra recently warned about timing issue linked to national outage" (Jul 10, 2026)www.abc.net.au
  7. The Register, the day itself (Jul 8, 2026)www.theregister.com
  8. ACS Information Age, the $30,000 box and the $30M fine (Jul 14, 2026)ia.acs.org.au

Niko from Axrisi

Nikoloz Turazashvili · Vexrail · Axrisi

LinkedIn · dev.to · GitHub · X · Substack

Videos relacionados