# Дахин ачаалах үйлдэл Telstra-г 2006 он руу буцаажээ. Есөн сая утас.

Published: 2026-09-22

Мельбурны нэг инженер өглөөний 2:50 цагт цаг хэмжигч төхөөрөмжийг асаахад өглөөний цайны үеэр Австралийн хамгийн том үүрэн холбооны сүлжээ 2006 оны арваннэгдүгээр сар болсон гэдэгт санал нийлжээ. 2026 оны 7-р сарын 8: Telstra-ийн NTP төхөөрөмжид суурилуулсан GPS карт тэжээлийн хангамжийг засах үед дахин ачаалагдсан байна. Түүний програм хангамж нь GPS-ийн долоо хоногийн эргэлтийн шинэчлэлтийг хэзээ ч хийж байгаагүй тул хуучин үеийг сонгон 1,024 долоо хоногийн өмнөх үе рүү буцсан байна. 2025 оны аравдугаар сард хийсэн түр зуурын шийдэл нь тухайн картыг сүлжээний цорын ганц stratum-1 эх үүсвэр болгосон бөгөөд 2020 оны NTP peering руу шилжих үйлдэл нь бусад бүх эх үүсвэрийг түүний доод түвшинд орхисон байсан тул буруу огноо нь ялжээ. 04:00 цагаас эхлэн хүлээлгэн өгөх зангилаанууд дахин тохируулагдаж, нийт дуудлага, дата холболтын 45% нь нөлөөлж, бараг 9 сая хэрэглэгч дуудлага, мессеж, датагаа алдаж, 604 Triple Zero дуудлага алдаа гарч, Виктория мужийн бүс нутгийн галт тэрэг зогсож, ихэнх үйлчилгээ 12:12 цагт сэргэжээ. Telstra-ийн өөрийн сэрүүлгүүд нь ажлын цагаар шалгагддаг платформ дээр байсан; компани нь хэрэглэгчид "Telstra-ийн тасалдал" гэж Google-ээр хайж байсан тул үүнийг анзаарсан байна.

Canonical: https://thedailydiff.dev/mn/video/2026-09-22-telstra-2006/

## Энэ видео юуг хамардаг

- GPS карт 2006 оны арваннэгдүгээр сард сэржээ
- Хугацаа: 2010 оны загвар → 2020 оны төхөөрөмж → 2025 оны 10-р сарын GPS карт → 02:50
- Өглөө: 04:00 MME дахин тохируулагдсан → 04:20 сэрүүлгийн шуурга → 12:12 сэргээгдсэн
- Механизм: NTP боломжтой байдлыг биш, харин тохиролцлыг санал хураалгасан
- git blame — Telstra 55 · peering 25 · firmware 15 · тэжээлийн хангамж 5

## Бүлгүүд

- 0:00 GPS карт 2006 оны арваннэгдүгээр сард сэржээ
- 0:28 Хугацаа: 2010 оны загвар → 2020 оны төхөөрөмж → 2025 оны 10-р сарын GPS карт → 02:50
- 1:26 Өглөө: 04:00 MME дахин тохируулагдсан → 04:20 сэрүүлгийн шуурга → 12:12 сэргээгдсэн
- 1:47 Механизм: NTP боломжтой байдлыг биш, харин тохиролцлыг санал хураалгасан
- 2:07 git blame — Telstra 55 · peering 25 · firmware 15 · тэжээлийн хангамж 5
- 2:27 Нөлөөллийн хүрээ: Холболтын 45%, 30K долларын хайрцагны төлөө 30 сая долларын торгууль
- 2:44 Шийдвэр + Даваа гарагийн мөр: нэг цаг гурван малгай өмссөн нь

## Орчуулсан бичлэг

Англи хэл дээрх эх хувилбараас орчуулсан. Боломжтой дуу болон хадмал орчуулгыг YouTube хянадаг.

### GPS карт 2006 оны арваннэгдүгээр сард сэржээ

0:00 Мельбурны нэг инженер өглөөний 2:50 цагт цаг хэмжигч төхөөрөмжийг дахин асаажээ өглөө, өглөөний цайны үеэр Австралийн хамгийн том үүрэн холбооны сүлжээ хоёр мянга зургаан оны арваннэгдүгээр сар болсон гэдэгт санал нийлжээ. Telstra-ийн гадаад тайланд нэг GPS карт болон бүх сүлжээ үүнийг санал хураалгасан гэжээ. Бараг есөн сая хэрэглэгч дуудлага, мессеж эсвэл датагаа алдсан мөн Виктория мужийн бүс нутгийн галт тэрэг өдөртөө зогссон. Хэрхэн болсон, яагаад нэг карт үндэсний цагийг давж гарсан

0:23 мөн хэн буруутай. Энэ бол The Daily Diff, постмортэм.

### Хугацаа: 2010 оны загвар → 2020 оны төхөөрөмж → 2025 оны 10-р сарын GPS карт → 02:50

0:28 Хорин арван. Загвар нь сурах бичгийнх. Гурван үндэсний цагийн эх үүсвэр хоёр серверт өгөгдөл дамжуулж, тэдгээр нь доорх гуравт мөн зангилаа бүр зөвхөн дээрээс цагийг авдаг. Аудиторууд үүнийг зориулалтад нь нийцсэн гэж үздэг. Хорин хорин. Шинэ төхөөрөмж. Энэ нь өөрийн доод серверээ тэжээж чадахгүй тул Сидней болон Мельбурн хоорондоо холбогдож сайт бүр нэг лавлагаа руу шилждэг. Дараа нь бүх зүйл peering руу шилждэг бөгөөд сервер бүр дурын

0:50 олсон серверээс цагийг авч болно. Цагийн давталт гэсэн үг ямар ч баримт бичигт байхгүй. Хорин хорин таван оны аравдугаар сар. Мельбурн Сиднейг байнга алдаж, түүний сэрүүлгүүд stratum five гэж заадаг, энэ нь өөрийн хэрэглэгчдээс цаг авдаг гэсэн үг. Хэн ч тасалбар нээгээгүй. Оронд нь инженүүд таван жил ажилгүй байсан GPS картыг асаажээ. Сэрүүлэг зогссон.

1:07 Мельбурн одоо үндэсний институтын зэрэг болох stratum one болсон, мөн хэн ч үүнийг хянаагүй. Долдугаар сарын найман, өглөөний хоёр тавин. Тэжээлийн хангамжийг солих шаардлагатай тул төхөөрөмж дахин ачаалагдсан, мөн GPS карттайгаа хамт. Түүний програм хангамжийг хэзээ ч шинэчлээгүй тул хуучин үеийг сонгон нэг мянга хорин дөрвөн долоо хоногийн өмнөх үе рүү буцсан. Мельбурн модны оройд байрлаж, доод түвшин санал нийлж эхэлсэн.

### Өглөө: 04:00 MME дахин тохируулагдсан → 04:20 сэрүүлгийн шуурга → 12:12 сэргээгдсэн

1:26 Өглөөний дөрвөн цагт, хүлээлгэн өгөх зангилаанууд дахин тохируулагдаж эхэлсэн. Дөрвөн хорин, сэрүүлгийн шуурга, сэрүүлгүүдийг ажлын цагаар уншдаг платформ дээр. Дөрвөн хорин ес, Telstra анзаарсан, учир нь хэрэглэгчид "Telstra-ийн тасалдал" гэж Google-ээр хайж байсан. Өөрчлөлтийг хийсэн инженүүд заавал амрах ёстой байсан, мөн огноог олоход хэдэн цаг зарцуулсан. Арван хоёр арван хоёр гэхэд ихэнх хэрэглэгчид сэргэсэн.

### Механизм: NTP боломжтой байдлыг биш, харин тохиролцлыг санал хураалгасан

1:47 Яагаад энэ боломжтой байсан бэ? NTP хоёр хамгаалалттай. Бага stratum ялдаг, мөн онцгой тохиолдлууд санал хураалтаар хасагддаг. GPS карт эвдэрсэн эх үүсвэрийг хамгийн өндөр зэрэг болгосон, мөн санал нийлэхгүй байж болох бүх эх үүсвэр доод түвшинд байсан, үүнийг давтаж байсан. NTP хэзээ ч огноо боломжтой эсэхийг асуудаггүй, зөвхөн бусад нь санал нийлж байгаа эсэхийг л асуудаг. Протокол ажилласан.

2:06 Архитектур ажиллаагүй.

### git blame — Telstra 55 · peering 25 · firmware 15 · тэжээлийн хангамж 5

2:07 git blame. Telstra, тавин таван хувь. Хэн ч цагийг эзэмшдэггүй байсан тул хэн ч өөрчлөлтийг хянаагүй, мөн энэ алдааны талаарх хоёр вендорын мэдэгдэл уншигдаагүй өнгөрсөн. Peering mode, хорин тав, серверүүдэд өөрсдийн цуурайгаар санал хураах боломж олгосон. Програм хангамж, арван тав, хэвлэгдсэн боловч хэзээ ч суулгаагүй. Тэжээлийн хангамжид таван хувь, Лхагва гарагийн өглөөний 2:50-ийг сонгосон. Нөлөөллийн хүрээ. Тухайн өдрийн бүх дуудлага, дата холболтын дөчин таван хувь,

### Нөлөөллийн хүрээ: Холболтын 45%, 30K долларын хайрцагны төлөө 30 сая долларын торгууль

2:30 гэж гүйцэтгэх захирал Сенатад мэдэгдсэн. Ширээн дээр байгаа торгууль нь гучин сая доллар, гучин мянган долларын хайрцгаас алга болсон үнэгүй шинэчлэлтийн төлөө. Карт нь хорин арван есөн онд жинхэнэ эргэлтийг давж гарсан, учир нь хэн ч түүнийг унтраагаагүй. Засвар үүнийг устгасан. Шийдвэр, постмортэм: SHIP IT, хариу үйлдлийн талаар.

### Шийдвэр + Даваа гарагийн мөр: нэг цаг гурван малгай өмссөн нь

2:46 Telstra гадны аудиторууд хөлсөлж, тайланг засваргүйгээр нийтэлсэн, цагийг хэзээ ч чухал гэж үзээгүй гэсэн мөртэйгээр, мөн гурван сайтыг хуучин серверээс шилжүүлсэн. Даваа гарагийн мөр: NTP trace хийж, таны цагийн эх үүсвэрийн хэд нь нэг цаг гурван малгай өмссөн болохыг тоол. Таны ярихыг зөвшөөрөөгүй байгаа үйл явдлыг надад илгээнэ үү, комментар хэсэгт, эсвэл thedailydiff.dev хаягаар. Тэгээд өнөөдрийн ялгаа энэ байна.

3:10 Би Axrisi-ийн Нико. Хариуцлагатай нэгтгээрэй.

## Эх сурвалжууд

- [Technology Audit Partners, "Findings Report on the July 8th Telstra Outage" (published by Telstra, Sep 2, 2026)](https://www.telstra.com.au/content/dam/tcom/dynamic-media-projects/luke-campbell/TAP-Findings-for-Telstra-Outage.pdf) — www.telstra.com.au
- [Vicki Brady (Telstra CEO), "What we've learned from the external investigation of our July outage" (Sep 2, 2026)](https://www.telstra.com.au/exchange/what-we-ve-learned-from-the-external-investigation-of-our-july-o) — www.telstra.com.au
- [Netnod, Sven-Christian Ebenhag, "Telstra outage: The night a network decided the year was 2006" (Sep 17, 2026)](https://www.netnod.se/blog/telstra-outage-night-network-decided-year-was-2006) — www.netnod.se
- [Hacker News on the Netnod post (93 points)](https://news.ycombinator.com/item?id=49748957) — news.ycombinator.com
- [The Guardian, Senate inquiry: 45 % of sessions, ~9M customers, 604 Triple Zero errors (Jul 17, 2026)](https://www.theguardian.com/business/2026/jul/17/telstra-missing-software-update-undocumented-design-change-outage) — www.theguardian.com
- [ABC News, "Telstra recently warned about timing issue linked to national outage" (Jul 10, 2026)](https://www.abc.net.au/news/2026-07-10/telstra-warned-about-vulnerability-before-national-outage/106896906) — www.abc.net.au
- [The Register, the day itself (Jul 8, 2026)](https://www.theregister.com/networks/2026/07/08/telstra-outage-downs-000-calls-trains-payment-systems/5268265) — www.theregister.com
- [ACS Information Age, the $30,000 box and the $30M fine (Jul 14, 2026)](https://ia.acs.org.au/article/2026/telstra-outage-blamed-on-known-bug-in-obsolete-server.html) — ia.acs.org.au