Endurræsing sendi Telstra til 2006. Níu milljónir síma.

Það sem þetta myndband fjallar um

• GPS-kort vaknar í nóvember 2006
• Tímalína: Hönnun 2010 → Undirvagn 2020 → GPS-kort okt 2025 → 02:50
• Morguninn: 04:00 MME endurstillir sig → 04:20 viðvörunarstormur → 12:12 endurheimt
• Kerfi: NTP kýs um samkomulag, ekki sennileika
• git blame — Telstra 55 · peering 25 · vélbúnaður 15 · aflgjafinn 5

Þýtt afrit

Þýtt úr upprunalegri enskri frásögn. Tiltækt hljóð og textar eru stjórnaðir af YouTube.

GPS-kort vaknar í nóvember 2006

0:00 Verkfræðingur í Melbourne ræsir tímasetningartæki aftur tíu mínútur í þrjú að morgni, og fyrir morgunmat er stærsta farsímakerfi Ástralíu sammála um að það sé nóvember tvö þúsund og sex. Ytri skýrsla Telstra segir að dagsetningin hafi komið frá einu GPS-korti og allt netkerfið hafi kosið hana. Næstum níu milljónir viðskiptavina missa símtöl, textaskilaboð eða gögn, og svæðisbundnar lestir í Victoria stöðvast fyrir daginn. Hvernig það gerðist, hvers vegna eitt kort var hærra sett en landsklukka,

0:23 og hverjum er um að kenna. Þetta er The Daily Diff, eftirfylgni.

Tímalína: Hönnun 2010 → Undirvagn 2020 → GPS-kort okt 2025 → 02:50

0:28 Tvö þúsund og tíu. Hönnunin er samkvæmt kennslubókum. Þrír þjóðlegir tímagjafar veita tveimur netþjónum, þeir veita þremur fyrir neðan, og hver hnútur tekur aðeins tíma ofan frá. Endurskoðendur telja það hæft tilgangi sínum. Tvö þúsund og tuttugu. Nýr undirvagn. Hann getur ekki gefið eigin neðri netþjóni, svo Sydney og Melbourne eru krosstengd og hver staður fellur niður í eina tilvísun. Síðan er öllu skipt yfir í peering, þar sem hver netþjónn getur tekið tíma frá hvaða

0:50 netþjóni sem hann finnur. Orðin tímasetningarlykkja koma ekki fram í neinu skjali. Október tvö þúsund og tuttugu og fimm. Melbourne heldur áfram að missa Sydney, og viðvaranir segja stratum fimm, sem þýðir að hann tekur tíma frá eigin viðskiptavinum sínum. Enginn sendir inn beiðni. Í staðinn virkja verkfræðingarnir GPS-kort sem hefur verið óvirkt í fimm ár. Viðvaranirnar hætta.

1:07 Melbourne er nú stratum eitt, staða landstofnunarinnar, og enginn fer yfir það. Áttundi júlí, tíu mínútur í þrjú um morguninn. Aflgjafa þarf að skipta út, svo undirvagninn endurræsir sig, og GPS-kortið með honum. Vélbúnaðurinn var aldrei uppfærður, svo hann velur gamla tímabilið og lendir þúsund tuttugu og fjórar vikur aftur í tímann. Melbourne er efst í trénu, og neðri straumur byrjar að samþykkja.

Morguninn: 04:00 MME endurstillir sig → 04:20 viðvörunarstormur → 12:12 endurheimt

1:26 Klukkan fjögur að morgni byrja afhendingartækin að endurstillast. Fjórir tuttugu, viðvörunarstormur, á kerfi þar sem viðvaranir eru lesnar á vinnutíma. Fjórir tuttugu og níu, Telstra tekur eftir því, því viðskiptavinir eru að gúgla Telstra outage. Verkfræðingarnir sem gerðu breytinguna eru í lögbundinni hvíld, og það tekur klukkustundir að finna dagsetninguna. Fyrir tólf tólf eru flestir viðskiptavinir komnir aftur.

Kerfi: NTP kýs um samkomulag, ekki sennileika

1:47 Hvers vegna var það mögulegt? NTP hefur tvenns konar varnir. Lægra stratum vinnur, og frávik eru felld úr gildi. GPS-kortið gerði brotna uppsprettuna að hæsta stigi, og hver uppspretta sem gæti verið ósammála sat neðar, endurtók það. NTP spyr aldrei hvort dagsetning sé sennileg, aðeins hvort hinir séu sammála. Samskiptareglan virkaði.

2:06 Arkitektúrinn gerði það ekki.

git blame — Telstra 55 · peering 25 · vélbúnaður 15 · aflgjafinn 5

2:07 git blame. Telstra, fimmtíu og fimm prósent. Enginn átti klukkuna, svo enginn fór yfir breytinguna, og tvær tilkynningar frá söluaðilum um nákvæmlega þennan galla lágu ólesnar. Peering mode, tuttugu og fimm, fyrir að leyfa netþjónum að kjósa með eigin bergmáli. Vélbúnaðurinn, fimmtán, gefinn út og aldrei uppsettur. Fimm prósent til aflgjafans, fyrir að velja tíu mínútur í þrjú á miðvikudegi. Áhrifasvæði. Fjörutíu og fimm prósent af öllum símtölum og gagnatengingum þann dag,

Áhrifasvæði: 45% af tengingum, 30 milljón dollara sekt fyrir 30 þúsund dollara kassa

2:30 segir forstjórinn við þingið. Sektin sem er á borðinu er þrjátíu milljónir dollara, fyrir ókeypis uppfærslu sem vantaði úr þrjátíu þúsund dollara kassa. Kortið hafði lifað af raunverulega yfirfærslu árið tvö þúsund og nítján vegna þess að enginn slökkti á því. Viðgerðin drap það. Dómur, eftirfylgni: SHIP IT, varðandi viðbrögðin.

Dómur + lína mánudagsins: ein klukka í þremur hlutverkum

2:46 Telstra ræður utanaðkomandi endurskoðendur, gefur út skýrsluna óbreytta, með þeirri línu að það hafi aldrei litið á tíma sem mikilvægan, og færir alla þrjá staðina af gömlu netþjónunum áður en það lendir. Lína mánudagsins: keyrðu NTP trace og teldu hversu margir af tímagjöfum þínum eru ein klukka í þremur hlutverkum. Sendu mér atvikið sem þú mátt enn ekki tala um, í athugasemdum, eða á thedailydiff.dev. Og það er The Daily Diff fyrir í dag.

3:10 Ég er Niko frá Axrisi. Samþykkja á ábyrgan hátt.

Heimildir

1. Technology Audit Partners, "Findings Report on the July 8th Telstra Outage" (published by Telstra, Sep 2, 2026)www.telstra.com.au
2. Vicki Brady (Telstra CEO), "What we've learned from the external investigation of our July outage" (Sep 2, 2026)www.telstra.com.au
3. Netnod, Sven-Christian Ebenhag, "Telstra outage: The night a network decided the year was 2006" (Sep 17, 2026)www.netnod.se
4. Hacker News on the Netnod post (93 points)news.ycombinator.com
5. The Guardian, Senate inquiry: 45 % of sessions, ~9M customers, 604 Triple Zero errors (Jul 17, 2026)www.theguardian.com
6. ABC News, "Telstra recently warned about timing issue linked to national outage" (Jul 10, 2026)www.abc.net.au
7. The Register, the day itself (Jul 8, 2026)www.theregister.com
8. ACS Information Age, the $30,000 box and the $30M fine (Jul 14, 2026)ia.acs.org.au