ଏକ ରିବୁଟ୍ ଟେଲଷ୍ଟ୍ରାକୁ 2006 କୁ ପଠାଇଲା। ନଅ ନିୟୁତ ଫୋନ୍।
ମେଲବର୍ଣ୍ଣରେ ଜଣେ ଇଞ୍ଜିନିୟର ସକାଳ 2:50 ରେ ଏକ ଟାଇମିଂ ଚାସିସକୁ ପୁନର୍ବାର ଚାଲୁ କରନ୍ତି, ଏବଂ ଜଳଖିଆ ବେଳକୁ ଅଷ୍ଟ୍ରେଲିଆର ସବୁଠାରୁ ବଡ ମୋବାଇଲ୍ ନେଟୱର୍କ ସହମତ ହୁଏ ଯେ ଏହା ନଭେମ୍ବର 2006।
ମେଲବର୍ଣ୍ଣରେ ଜଣେ ଇଞ୍ଜିନିୟର ସକାଳ 2:50 ରେ ଏକ ଟାଇମିଂ ଚାସିସକୁ ପୁନର୍ବାର ଚାଲୁ କରନ୍ତି, ଏବଂ ଜଳଖିଆ ବେଳକୁ ଅଷ୍ଟ୍ରେଲିଆର ସବୁଠାରୁ ବଡ ମୋବାଇଲ୍ ନେଟୱର୍କ ସହମତ ହୁଏ ଯେ ଏହା ନଭେମ୍ବର 2006। ଜୁଲାଇ 8, 2026: ଟେଲଷ୍ଟ୍ରାର NTP ଚାସିସରେ ଏକ GPS କାର୍ଡ ପାୱାର-ସପ୍ଲାଏ ମରାମତି ସମୟରେ ରିବୁଟ୍ ହୁଏ, ଏହାର ଫାର୍ମୱେରରେ କେବେହେଲେ GPS ସପ୍ତାହ-ରୋଲଓଭର ଅପଡେଟ୍ ହୋଇନଥିଲା, ତେଣୁ ଏହା ପୁରୁଣା ଇପୋଚ୍ ବାଛିଥାଏ ଏବଂ 1,024 ସପ୍ତାହ ପୂର୍ବକୁ ଚାଲିଯାଏ। କାରଣ ଅକ୍ଟୋବର 2025 ର ଏକ ୱାର୍କଅରାଉଣ୍ଡ ସେହି କାର୍ଡକୁ ନେଟୱର୍କର ଏକମାତ୍ର ଷ୍ଟ୍ରାଟମ୍-1 ଉତ୍ସ କରିଥିଲା — ଏବଂ 2020 ରେ NTP ପିଅରିଙ୍ଗକୁ ସୁଇଚ୍ କରିବା ଅନ୍ୟ ସମସ୍ତ ଉତ୍ସକୁ ତା’ର ଡାଉନଷ୍ଟ୍ରିମ୍ ରେ ଛାଡିଥିଲା — ଭୁଲ ତାରିଖ ଭୋଟ୍ ଜିତେ। ହ୍ୟାଣ୍ଡଓଭର ନୋଡ୍ ଗୁଡିକ ସକାଳ 4 ଟାରୁ ରିସେଟ୍ ହୁଏ, ସମସ୍ତ କଲ୍ ଏବଂ ଡାଟା ସେସନ୍ ର 45% ପ୍ରଭାବିତ ହୁଏ, ପ୍ରାୟ 9 ନିୟୁତ ଗ୍ରାହକ କଲ୍, ଟେକ୍ସଟ୍ କିମ୍ବା ଡାଟା ହରାନ୍ତି, 604 ଟ୍ରିପଲ୍ ଜିରୋ କଲ୍ ରେ ତ୍ରୁଟି ହୁଏ, ଭିକ୍ଟୋରିଆର ଆଞ୍ଚଳିକ ଟ୍ରେନ୍ ଗୁଡିକ ଅଟକିଯାଏ, ଏବଂ ଅଧିକାଂଶ ସେବା 12:12 ରେ ଫେରିଆସେ। ଟେଲଷ୍ଟ୍ରାର ନିଜସ୍ୱ ଆଲାର୍ମ ଗୁଡିକ ବ୍ୟବସାୟ ସମୟରେ ଯାଞ୍ଚ କରାଯାଉଥିବା ଏକ ପ୍ଲାଟଫର୍ମରେ ଥିଲା; କମ୍ପାନୀ ଏହା ଜାଣିବାକୁ ପାଇଲା କାରଣ ଗ୍ରାହକମାନେ "Telstra outage" ଗୁଗୁଲ୍ କରୁଥିଲେ।
ଲିଖିତ ସଂସ୍କରଣ ପଢ଼ନ୍ତୁ (English) ↗
ଏହି ଭିଡିଓରେ କ'ଣ ଅଛି
- ଏକ GPS କାର୍ଡ ନଭେମ୍ବର 2006 ରେ ଜାଗ୍ରତ ହୁଏ
- ସମୟରେଖା: 2010 ଡିଜାଇନ୍ → 2020 ଚାସିସ୍ → ଅକ୍ଟୋବର 2025 GPS କାର୍ଡ → 02:50
- ସକାଳ: 04:00 MME ରିସେଟ୍ → 04:20 ଆଲାର୍ମ ଷ୍ଟର୍ମ → 12:12 ପୁନରୁଦ୍ଧାର
- ଯନ୍ତ୍ରକୌଶଳ: NTP ସହମତି ଉପରେ ଭୋଟ୍ ଦିଏ, ସମ୍ଭାବ୍ୟତା ଉପରେ ନୁହେଁ
- git blame — Telstra 55 · peering 25 · firmware 15 · the power supply 5
ଅନୁବାଦିତ ଟ୍ରାନ୍ସକ୍ରିପ୍ଟ
ମୂଳ ଇଂରାଜୀ ବର୍ଣ୍ଣନାରୁ ଅନୁବାଦିତ। ଉପଲବ୍ଧ ଅଡିଓ ଏବଂ କ୍ୟାପ୍ସନ୍ଗୁଡ଼ିକ YouTube ଦ୍ୱାରା ନିୟନ୍ତ୍ରିତ।
ଏକ GPS କାର୍ଡ ନଭେମ୍ବର 2006 ରେ ଜାଗ୍ରତ ହୁଏ
0:00 ମେଲବର୍ଣ୍ଣରେ ଜଣେ ଇଞ୍ଜିନିୟର ସକାଳ ପ୍ରାୟ ତିନୋଟିକୁ ଦଶ ମିନିଟ୍ ଥିବାବେଳେ ଏକ ଟାଇମିଂ ଚାସିସକୁ ପୁନର୍ବାର ଚାଲୁ କରନ୍ତି, ଏବଂ ଜଳଖିଆ ବେଳକୁ ଅଷ୍ଟ୍ରେଲିଆର ସବୁଠାରୁ ବଡ ମୋବାଇଲ୍ ନେଟୱର୍କ ସହମତ ହୁଏ ଯେ ଏହା ନଭେମ୍ବର ଦୁଇ ହଜାର ଛଅ। ଟେଲଷ୍ଟ୍ରାର ବାହ୍ୟ ରିପୋର୍ଟ କହୁଛି ଯେ ତାରିଖ ଗୋଟିଏ GPS କାର୍ଡ ଛାଡିଛି ଏବଂ ସମଗ୍ର ନେଟୱର୍କ ଏଥିପାଇଁ ଭୋଟ୍ ଦେଇଛି। ପ୍ରାୟ ନଅ ନିୟୁତ ଗ୍ରାହକ କଲ୍, ଟେକ୍ସଟ୍ କିମ୍ବା ଡାଟା ହରାନ୍ତି, ଏବଂ ଭିକ୍ଟୋରିଆର ଆଞ୍ଚଳିକ ଟ୍ରେନ୍ ଗୁଡିକ ଦିନ ପାଇଁ ଅଟକିଯାଏ। ଏହା କିପରି ଘଟିଲା, କାହିଁକି ଗୋଟିଏ କାର୍ଡ ଜାତୀୟ ଘଣ୍ଟାଠାରୁ ଅଧିକ ଗୁରୁତ୍ୱପୂର୍ଣ୍ଣ ହେଲା,
0:23 ଏବଂ କାହାକୁ ଦୋଷ ଦିଆଯିବ। ଏହା ହେଉଛି The Daily Diff, ପୋଷ୍ଟମର୍ଟମ୍।
ସମୟରେଖା: 2010 ଡିଜାଇନ୍ → 2020 ଚାସିସ୍ → ଅକ୍ଟୋବର 2025 GPS କାର୍ଡ → 02:50
0:28 ଦୁଇ ହଜାର ଦଶ। ଡିଜାଇନ୍ ହେଉଛି ପାଠ୍ୟପୁସ୍ତକ। ତିନୋଟି ଜାତୀୟ ସମୟ ଉତ୍ସ ଦୁଇଟି ସର୍ଭରକୁ ଫିଡ୍ କରନ୍ତି, ସେଗୁଡ଼ିକ ତିନୋଟି ତଳକୁ ଫିଡ୍ କରନ୍ତି, ଏବଂ ପ୍ରତ୍ୟେକ ନୋଡ୍ କେବଳ ଉପରୁ ସମୟ ନିଏ। ଅଡିଟରମାନେ ଏହାକୁ ଉପଯୁକ୍ତ ବୋଲି କହନ୍ତି। ଦୁଇ ହଜାର କୋଡିଏ। ନୂଆ ଚାସିସ୍। ଏହା ନିଜର ତଳ ସର୍ଭରକୁ ଫିଡ୍ କରିପାରିବ ନାହିଁ, ତେଣୁ ସିଡନୀ ଏବଂ ମେଲବର୍ଣ୍ଣ କ୍ରସ୍-ୱାୟାର୍ଡ ହୁଅନ୍ତି ଏବଂ ପ୍ରତ୍ୟେକ ସାଇଟ୍ ଗୋଟିଏ ରେଫରେନ୍ସକୁ ଖସିଯାଏ। ତା'ପରେ ସବୁକିଛି ପିଅରିଙ୍ଗକୁ ସୁଇଚ୍ କରାଯାଏ, ଯେଉଁଠାରେ ଯେକୌଣସି ସର୍ଭର ଯେକୌଣସି
0:50 ସର୍ଭରରୁ ସମୟ ନେଇପାରେ ଯାହାକୁ ଏହା ପାଏ। ଟାଇମିଂ ଲୁପ୍ ଶବ୍ଦ କୌଣସି ଡକ୍ୟୁମେଣ୍ଟରେ ଦେଖାଯାଏ ନାହିଁ। ଅକ୍ଟୋବର ଦୁଇ ହଜାର ପଚିଶ। ମେଲବର୍ଣ୍ଣ ସିଡନୀକୁ ହରାଇ ଚାଲିଛି, ଏବଂ ଏହାର ଆଲାର୍ମ କହୁଛି ଷ୍ଟ୍ରାଟମ୍ ଫାଇଭ୍, ଅର୍ଥାତ୍ ଏହା ନିଜ ଗ୍ରାହକଙ୍କଠାରୁ ସମୟ ନିଏ। କେହି ଟିକେଟ୍ ଫାଇଲ୍ କରନ୍ତି ନାହିଁ। ବରଂ ଇଞ୍ଜିନିୟରମାନେ ଏକ GPS କାର୍ଡ ଚାଲୁ କରନ୍ତି ଯାହା ପାଞ୍ଚ ବର୍ଷ ଧରି ନିଷ୍କ୍ରିୟ ଥିଲା। ଆଲାର୍ମ ବନ୍ଦ ହୁଏ।
1:07 ମେଲବର୍ଣ୍ଣ ବର୍ତ୍ତମାନ ଷ୍ଟ୍ରାଟମ୍ ୱାନ୍, ଜାତୀୟ ଅନୁଷ୍ଠାନର ପାହ୍ୟା, ଏବଂ କେହି ଏହାକୁ ସମୀକ୍ଷା କରନ୍ତି ନାହିଁ। ଜୁଲାଇ ଆଠ, ସକାଳ ଦୁଇ ପଚାଶ। ଏକ ପାୱାର ସପ୍ଲାଏ ବଦଳାଇବାକୁ ପଡେ, ତେଣୁ ଚାସିସ୍ ରିବୁଟ୍ ହୁଏ, ଏବଂ GPS କାର୍ଡ ମଧ୍ୟ। ଏହାର ଫାର୍ମୱେର କେବେହେଲେ ଅପଡେଟ୍ ହୋଇନଥିଲା, ତେଣୁ ଏହା ପୁରୁଣା ଇପୋଚ୍ ବାଛିଥାଏ ଏବଂ ଏକ ହଜାର ଚବିଶ ସପ୍ତାହ ପୂର୍ବକୁ ଚାଲିଯାଏ। ମେଲବର୍ଣ୍ଣ ହେଉଛି ଗଛର ଶୀର୍ଷ, ଏବଂ ଡାଉନଷ୍ଟ୍ରିମ୍ ସହମତ ହେବା ଆରମ୍ଭ କରେ।
ସକାଳ: 04:00 MME ରିସେଟ୍ → 04:20 ଆଲାର୍ମ ଷ୍ଟର୍ମ → 12:12 ପୁନରୁଦ୍ଧାର
1:26 ସକାଳ ଚାରିଟା, ହ୍ୟାଣ୍ଡଓଭର ନୋଡ୍ ଗୁଡିକ ରିସେଟ୍ ହେବାକୁ ଆରମ୍ଭ କରନ୍ତି। ଚାରି କୋଡିଏ, ଏକ ଆଲାର୍ମ ଷ୍ଟର୍ମ, ଏକ ପ୍ଲାଟଫର୍ମରେ ଯାହାର ଆଲାର୍ମ ବ୍ୟବସାୟ ସମୟରେ ପଢାଯାଏ। ଚାରି କୋଡିଏ-ନଅ, ଟେଲଷ୍ଟ୍ରା ଜାଣିବାକୁ ପାଏ, କାରଣ ଗ୍ରାହକମାନେ ଗୁଗୁଲ୍ କରୁଛନ୍ତି Telstra outage। ପରିବର୍ତ୍ତନ କରିଥିବା ଇଞ୍ଜିନିୟରମାନେ ବାଧ୍ୟତାମୂଳକ ବିଶ୍ରାମରେ ଅଛନ୍ତି, ଏବଂ ତାରିଖ ଖୋଜିବାକୁ ଘଣ୍ଟା ଘଣ୍ଟା ଲାଗେ। ବାର ବାରଟା ବାର ମିନିଟ୍ ସୁଦ୍ଧା ଅଧିକାଂଶ ଗ୍ରାହକ ଫେରିଆସିଛନ୍ତି।
ଯନ୍ତ୍ରକୌଶଳ: NTP ସହମତି ଉପରେ ଭୋଟ୍ ଦିଏ, ସମ୍ଭାବ୍ୟତା ଉପରେ ନୁହେଁ
1:47 ଏହା କାହିଁକି ସମ୍ଭବ ହେଲା? NTP ର ଦୁଇଟି ପ୍ରତିରକ୍ଷା ଅଛି। ନିମ୍ନ ଷ୍ଟ୍ରାଟମ୍ ଜିତେ, ଏବଂ ଆଉଟଲାଇର୍ ଗୁଡିକ ଭୋଟ୍ ଦ୍ୱାରା ବାହାର କରାଯାଏ। GPS କାର୍ଡ ଭଙ୍ଗା ଉତ୍ସକୁ ସର୍ବୋଚ୍ଚ ପାହ୍ୟା କରିଥିଲା, ଏବଂ ପ୍ରତ୍ୟେକ ଉତ୍ସ ଯାହା ଅସହମତ ହୋଇପାରିଥାନ୍ତା ଡାଉନଷ୍ଟ୍ରିମ୍ ରେ ଥିଲା, ଏହାକୁ ପୁନରାବୃତ୍ତି କରୁଥିଲା। NTP କେବେହେଲେ ପଚାରେ ନାହିଁ ଯେ ଏକ ତାରିଖ ସମ୍ଭବ କି ନୁହେଁ, କେବଳ ଅନ୍ୟମାନେ ସହମତ ଅଛନ୍ତି କି ନାହିଁ। ପ୍ରୋଟୋକଲ୍ କାମ କଲା।
2:06 ଆର୍କିଟେକ୍ଚର ନୁହେଁ।
git blame — Telstra 55 · peering 25 · firmware 15 · the power supply 5
2:07 git blame। ଟେଲଷ୍ଟ୍ରା, ପଚାଶ-ପାଞ୍ଚ ପ୍ରତିଶତ। କେହି ଘଣ୍ଟାର ମାଲିକ ନଥିଲେ, ତେଣୁ କେହି ପରିବର୍ତ୍ତନକୁ ସମୀକ୍ଷା କଲେ ନାହିଁ, ଏବଂ ଏହି ନିର୍ଦ୍ଦିଷ୍ଟ ବଗ୍ ବିଷୟରେ ଦୁଇଟି ବିକ୍ରେତା ବୁଲେଟିନ୍ ଅପଠିତ ରହିଲା। ପିଅରିଙ୍ଗ୍ ମୋଡ୍, ପଚିଶ, ସର୍ଭରଗୁଡ଼ିକୁ ସେମାନଙ୍କ ନିଜ ପ୍ରତିଧ୍ୱନି ସହିତ ଭୋଟ୍ ଦେବାକୁ ଦେଇଥିବାରୁ। ଫାର୍ମୱେର, ପନ୍ଦର, ପ୍ରକାଶିତ ଏବଂ କେବେହେଲେ ସ୍ଥାପନ କରାଯାଇ ନାହିଁ। ପାୱାର ସପ୍ଲାଏକୁ ପାଞ୍ଚ ପ୍ରତିଶତ, ବୁଧବାର ଦିନ ତିନିଟାକୁ ଦଶ ମିନିଟ୍ ବାଛିଥିବାରୁ। ବିସ୍ଫୋରଣ ବ୍ୟାସାର୍ଦ୍ଧ। ସେହି ଦିନର ସମସ୍ତ କଲ୍ ଏବଂ ଡାଟା ସେସନର ଚାଳିଶ-ପାଞ୍ଚ ପ୍ରତିଶତ,
ବିସ୍ଫୋରଣ ବ୍ୟାସାର୍ଦ୍ଧ: 45 % ଅଧିବେଶନ, ଏକ $30M ଜରିମାନା ଏକ $30K ବାକ୍ସ ପାଇଁ
2:30 ସିଇଓ ସିନେଟକୁ କହିଛନ୍ତି। ଟେବୁଲରେ ଥିବା ଜରିମାନା ହେଉଛି ତିରିଶ ନିୟୁତ ଡଲାର, ଏକ ମାଗଣା ଅପଡେଟ୍ ପାଇଁ ଯାହା ତିରିଶ ହଜାର ଡଲାରର ବାକ୍ସରୁ ନଥିଲା। କାର୍ଡ ଦୁଇ ହଜାର ଉନେଇଶରେ ପ୍ରକୃତ ରୋଲଓଭରରୁ ବଞ୍ଚି ଯାଇଥିଲା କାରଣ କେହି ଏହାକୁ ବନ୍ଦ କରିନଥିଲେ। ମରାମତି ଏହାକୁ ନଷ୍ଟ କରିଦେଲା। ରାୟ, ପୋଷ୍ଟମର୍ଟମ୍: SHIP IT, ପ୍ରତିକ୍ରିୟା ଉପରେ।
ରାୟ + ସୋମବାର ଧାଡି: ଗୋଟିଏ ଘଣ୍ଟା ତିନୋଟି ଟୋପି ପିନ୍ଧିଛି
2:46 ଟେଲଷ୍ଟ୍ରା ବାହାର ଅଡିଟର ନିଯୁକ୍ତ କରେ, ରିପୋର୍ଟକୁ ଅସମ୍ପାଦିତ ପ୍ରକାଶ କରେ, ଏହି ଧାଡି ସହିତ ଯେ ଏହା ସମୟକୁ କେବେହେଲେ ଗୁରୁତ୍ୱପୂର୍ଣ୍ଣ ଭାବରେ ବିବେଚନା କରିନଥିଲା, ଏବଂ ଏହା ଅବତରଣ କରିବା ପୂର୍ବରୁ ସମସ୍ତ ତିନୋଟି ସାଇଟକୁ ପୁରୁଣା ସର୍ଭରରୁ ସ୍ଥାନାନ୍ତର କରେ। ସୋମବାର ଧାଡି: ଏକ NTP ଟ୍ରେସ୍ ଚଲାନ୍ତୁ ଏବଂ ଗଣନ୍ତୁ ଯେ ଆପଣଙ୍କର କେତେ ସମୟ ଉତ୍ସ ଗୋଟିଏ ଘଣ୍ଟା ତିନୋଟି ଟୋପି ପିନ୍ଧିଛି। ମୋତେ ସେହି ଘଟଣା ପଠାନ୍ତୁ ଯାହା ବିଷୟରେ ଆପଣ ଏପର୍ଯ୍ୟନ୍ତ କହିବାକୁ ଅନୁମତିପ୍ରାପ୍ତ ନୁହଁନ୍ତି, ମନ୍ତବ୍ୟରେ, କିମ୍ବା thedailydiff.dev ରେ। ଏବଂ ତାହା ଆଜି ପାଇଁ ଡିଫ୍।
3:10 ମୁଁ Axrisi ରୁ ନିକୋ। ଦାୟିତ୍ୱର ସହିତ ମିଶାନ୍ତୁ।
ଉତ୍ସଗୁଡ଼ିକ
- Technology Audit Partners, "Findings Report on the July 8th Telstra Outage" (published by Telstra, Sep 2, 2026)www.telstra.com.au
- Vicki Brady (Telstra CEO), "What we've learned from the external investigation of our July outage" (Sep 2, 2026)www.telstra.com.au
- Netnod, Sven-Christian Ebenhag, "Telstra outage: The night a network decided the year was 2006" (Sep 17, 2026)www.netnod.se
- Hacker News on the Netnod post (93 points)news.ycombinator.com
- The Guardian, Senate inquiry: 45 % of sessions, ~9M customers, 604 Triple Zero errors (Jul 17, 2026)www.theguardian.com
- ABC News, "Telstra recently warned about timing issue linked to national outage" (Jul 10, 2026)www.abc.net.au
- The Register, the day itself (Jul 8, 2026)www.theregister.com
- ACS Information Age, the $30,000 box and the $30M fine (Jul 14, 2026)ia.acs.org.au
