Një rindezje e dërgoi Telstra-n në vitin 2006. Nëntë milionë telefona.

Çfarë mbulon kjo video

• Një kartë GPS zgjohet në Nëntor 2006
• Kronologjia: Dizajni i vitit 2010 → Shasia e vitit 2020 → Karta GPS e Tetorit 2025 → 02:50
• Mëngjesi: 04:00 MME rindizen → 04:20 stuhi alarmi → 12:12 rikthyer
• Mekanizmi: NTP voton për marrëveshjen, jo për besueshmërinë
• git blame — Telstra 55 · peering 25 · firmware 15 · furnizimi me energji 5

Transkript i përkthyer

Përkthyer nga tregimi origjinal në anglisht. Audio dhe titrat e disponueshme kontrollohen nga YouTube.

Një kartë GPS zgjohet në Nëntor 2006

0:00 Një inxhinier në Melburn rindez një shasi me orar në dhjetë pa tre në mëngjes, dhe në mëngjesin tjetër rrjeti më i madh celular i Australisë bie dakord se është Nëntor dymijë e gjashtë. Raporti i jashtëm i Telstra-s thotë se data la një kartë GPS dhe i gjithë rrjeti votoi për të. Pothuajse nëntë milionë klientë humbasin thirrje, mesazhe ose të dhëna, dhe trenat rajonalë të Viktorias ndalojnë për ditën. Si ndodhi, pse një kartë e kaloi orën kombëtare,

0:23 dhe kush merr fajin. Ky është The Daily Diff, postmortem.

Kronologjia: Dizajni i vitit 2010 → Shasia e vitit 2020 → Karta GPS e Tetorit 2025 → 02:50

0:28 Dymijë e dhjetë. Dizajni është sipas librit. Tre burime kohore kombëtare ushqejnë dy servera, ata ushqejnë tre më poshtë, dhe çdo nyje merr kohën vetëm nga lart. Audituesit e quajnë të përshtatshëm për qëllimin. Dymijë e njëzet. Shasi e re. Nuk mund të ushqejë serverin e vet më të ulët, kështu që Sidnei dhe Melburni lidhen në kryq dhe çdo vend bie në një referencë. Pastaj gjithçka kalon në peering, ku çdo server mund të marrë kohën nga çdo

0:50 server që gjen. Fjalët loop kohor nuk shfaqen në asnjë dokument. Tetor dymijë e njëzet e pesë. Melburni vazhdon të humbasë Sidnein, dhe alarmet e tij thonë stratum pesë, që do të thotë se merr kohën nga klientët e vet. Askush nuk hap një biletë. Në vend të kësaj, inxhinierët ndezin një kartë GPS që kishte qëndruar e papunë për pesë vjet. Alarmet ndalojnë.

1:07 Melburni është tani stratum një, rangu i institutit kombëtar, dhe askush nuk e rishikon. Tetë Korrik, dy e pesëdhjetë në mëngjes. Një furnizim me energji ka nevojë për zëvendësim, kështu që shasia rindizet, dhe karta GPS me të. Firmware-i i saj nuk u azhurnua kurrë, kështu që zgjedh epokën e vjetër dhe kthehet një mijë e njëzet e katër javë në të kaluarën. Melburni është në krye të pemës, dhe rrjedha e poshtme fillon të bjerë dakord.

Mëngjesi: 04:00 MME rindizen → 04:20 stuhi alarmi → 12:12 rikthyer

1:26 Katër e mëngjesit, nyjet e dorëzimit fillojnë të rindizen. Katër e njëzet, një stuhi alarmi, në një platformë ku alarmet lexohen gjatë orarit të punës. Katër e njëzet e nëntë, Telstra e vëren, sepse klientët po kërkojnë në Google ndërprerje Telstra. Inxhinierët që bënë ndryshimin janë në pushim të detyrueshëm, dhe gjetja e datës merr orë. Deri në dymbëdhjetë e dymbëdhjetë shumica e klientëve janë kthyer.

Mekanizmi: NTP voton për marrëveshjen, jo për besueshmërinë

1:47 Pse ishte e mundur? NTP ka dy mbrojtje. Stratumi më i ulët fiton, dhe jashtëzakonshmit votohen jashtë. Karta GPS e bëri burimin e dëmtuar rangun më të lartë, dhe çdo burim që mund të mos binte dakord ndodhej më poshtë, duke e përsëritur. NTP nuk pyet kurrë nëse një datë është e besueshme, vetëm nëse të tjerët bien dakord. Protokolli funksionoi.

2:06 Arkitektura jo.

git blame — Telstra 55 · peering 25 · firmware 15 · furnizimi me energji 5

2:07 git blame. Telstra, pesëdhjetë e pesë për qind. Askush nuk zotëronte orën, kështu që askush nuk e rishikoi ndryshimin, dhe dy buletine të shitësve rreth këtij gabimi të saktë mbetën të palexuara. Modaliteti i peering, njëzet e pesë, për të lejuar serverat të votojnë me jehonën e tyre. Firmware-i, pesëmbëdhjetë, i publikuar dhe i instaluar kurrë. Pesë për qind furnizimit me energji, për zgjedhjen e dhjetë pa tre të mërkurën. Rrezja e shpërthimit. Dyzet e pesë për qind e të gjitha thirrjeve dhe sesioneve të të dhënave atë ditë,

Rrezja e shpërthimit: 45% e sesioneve, një gjobë 30 milionë dollarë për një kuti 30 mijë dollarëshe

2:30 CEO i thotë Senatit. Gjoba në tryezë është tridhjetë milionë dollarë, për një azhurnim falas që mungon nga një kuti tridhjetë mijë dollarëshe. Karta kishte mbijetuar kalimin e vërtetë në dymijë e nëntëmbëdhjetë sepse askush nuk e fiku atë. Riparimi e shkatërroi. Vendimi, postmortem: SHIP IT, për përgjigjen.

Vendimi + rreshti i së hënës: një orë që mban tre kapele

2:46 Telstra punëson auditues të jashtëm, publikon raportin të paedituar, me rreshtin se ajo kurrë nuk e trajtoi kohën si kritike, dhe i zhvendos të gjitha tre vendet nga serverët e vjetër para se të mbërrijë. Rreshti i së hënës: ekzekutoni një gjurmë NTP dhe numëroni sa nga burimet tuaja të kohës janë një orë që mban tre kapele. Më dërgoni incidentin për të cilin nuk ju lejohet ende të flisni, në komente, ose te thedailydiff.dev. Dhe ky është ndryshimi për sot.

3:10 Unë jam Niko nga Axrisi. Ndërthurni me përgjegjësi.

Burimet

1. Technology Audit Partners, "Findings Report on the July 8th Telstra Outage" (published by Telstra, Sep 2, 2026)www.telstra.com.au
2. Vicki Brady (Telstra CEO), "What we've learned from the external investigation of our July outage" (Sep 2, 2026)www.telstra.com.au
3. Netnod, Sven-Christian Ebenhag, "Telstra outage: The night a network decided the year was 2006" (Sep 17, 2026)www.netnod.se
4. Hacker News on the Netnod post (93 points)news.ycombinator.com
5. The Guardian, Senate inquiry: 45 % of sessions, ~9M customers, 604 Triple Zero errors (Jul 17, 2026)www.theguardian.com
6. ABC News, "Telstra recently warned about timing issue linked to national outage" (Jul 10, 2026)www.abc.net.au
7. The Register, the day itself (Jul 8, 2026)www.theregister.com
8. ACS Information Age, the $30,000 box and the $30M fine (Jul 14, 2026)ia.acs.org.au