ଏକ ଖାଲି କ୍ଷେତ୍ରରେ ଗୁଗୁଲ୍ କ୍ଲାଉଡ୍ କ୍ରାସ୍ ହୋଇଗଲା। ତିନି ଘଣ୍ଟା।
କିଛି ଖାଲି କ୍ଷେତ୍ର ଥିବା ଏକ ନୀତି ଧାଡ଼ି ଏକ ନଲ୍ ପଏଣ୍ଟରକୁ ହିଟ୍ କରେ, ଏବଂ ଗୁଗୁଲ୍ କ୍ଲାଉଡ୍ ଏକାଥରକେ ପ୍ରତ୍ୟେକ ଅଞ୍ଚଳରେ କ୍ରାସ୍ ହୁଏ — ତା’ପରେ କ୍ଲାଉଡ୍ଫ୍ଲେର୍ ମଧ୍ୟ ତା’ ସହିତ ତଳକୁ ଖସିଯାଏ।
କିଛି ଖାଲି କ୍ଷେତ୍ର ଥିବା ଏକ ନୀତି ଧାଡ଼ି ଏକ ନଲ୍ ପଏଣ୍ଟରକୁ ହିଟ୍ କରେ, ଏବଂ ଗୁଗୁଲ୍ କ୍ଲାଉଡ୍ ଏକାଥରକେ ପ୍ରତ୍ୟେକ ଅଞ୍ଚଳରେ କ୍ରାସ୍ ହୁଏ — ତା’ପରେ କ୍ଲାଉଡ୍ଫ୍ଲେର୍ ମଧ୍ୟ ତା’ ସହିତ ତଳକୁ ଖସିଯାଏ। ଜୁନ୍ 12, 2025, 17:49 UTC: ସର୍ଭିସ୍ କଣ୍ଟ୍ରୋଲ୍, ଯାହା ପ୍ରତ୍ୟେକ ଗୁଗୁଲ୍ କ୍ଲାଉଡ୍ API ଅନୁରୋଧକୁ ଅନୁମୋଦନ କରୁଥିବା ବାଇନାରୀ, "ଅନିଚ୍ଛାକୃତ ଖାଲି କ୍ଷେତ୍ର" ସହିତ ଏକ କୋଟା-ନୀତି ପରିବର୍ତ୍ତନ ପଢ଼େ, ଦୁଇ ସପ୍ତାହ ପୂର୍ବରୁ କୌଣସି ନଲ୍ ଯାଞ୍ଚ ଏବଂ କୌଣସି ଫିଚର୍ ଫ୍ଲାଗ୍ ବିନା ପ୍ରେରଣ କରାଯାଇଥିବା ଏକ କୋଡ୍ ପଥକୁ ହିଟ୍ କରେ, ଏବଂ ପ୍ରତ୍ୟେକ ଅଞ୍ଚଳରେ ଏକ କ୍ରାସ୍ ଲୁପ୍ରେ ଯାଏ — ଧାଡ଼ିଟି କିଛି ସେକେଣ୍ଡ ମଧ୍ୟରେ ବିଶ୍ୱସ୍ତରରେ ପ୍ରତିକୃତି ହୋଇସାରିଥିଲା। ବାହ୍ୟ API ଗୁଡ଼ିକ ତିନି ଘଣ୍ଟା ପାଇଁ 503 ଫେରସ୍ତ କରନ୍ତି; us-central1 2 ଘଣ୍ଟା 40 ମିନିଟ୍ ନିଏ କାରଣ ପୁନଃ-ଆରମ୍ଭ ହେଉଥିବା କାର୍ଯ୍ୟଗୁଡ଼ିକ କୌଣସି ରାଣ୍ଡମାଇଜଡ୍ ବ୍ୟାକଅଫ୍ ବିନା ସମାନ Spanner ଟେବୁଲକୁ ଆକ୍ରମଣ କରନ୍ତି। ଗୁଗୁଲ୍ର ବନ୍ଦ ହେବାର ତିନି ମିନିଟ୍ ମଧ୍ୟରେ, କ୍ଲାଉଡ୍ଫ୍ଲେର୍ର Workers KV — ଯାହାର ସତ୍ୟର ଉତ୍ସ "ଏକ ତୃତୀୟ-ପକ୍ଷ କ୍ଲାଉଡ୍ ପ୍ରଦାନକାରୀ" ଉପରେ ରହିଛି — 90% ଅନୁରୋଧ ହରାଏ, ଏବଂ Access, WARP, Workers AI, Pages, Stream ଏବଂ Turnstile ତା’ ସହିତ 2 ଘଣ୍ଟା 28 ମିନିଟ୍ ପାଇଁ ତଳକୁ ଖସିଯାଏ। ଗୁଗୁଲ୍ର ସ୍ଥିତି ପୃଷ୍ଠା ଏକ ଘଣ୍ଟା ବିଳମ୍ବରେ ଏହାର ପ୍ରଥମ ଅପଡେଟ୍ ପୋଷ୍ଟ କରେ, କାରଣ ଏହା ଗୁଗୁଲ୍ କ୍ଲାଉଡ୍ ଉପରେ ଚାଲେ।
ଲିଖିତ ସଂସ୍କରଣ ପଢ଼ନ୍ତୁ (English) ↗
ଏହି ଭିଡିଓରେ କ'ଣ ଅଛି
- ଏକ ଖାଲି କ୍ଷେତ୍ର, ଏକ ନଲ୍ ପଏଣ୍ଟର, ପ୍ରତ୍ୟେକ ଅଞ୍ଚଳ
- ସମୟରେଖା: ମେ 29 → 17:45 → କ୍ରାସ୍ ଲୁପ୍ → ରେଡ୍ ବଟନ୍ → 17:52 କ୍ଲାଉଡ୍ଫ୍ଲେର୍
- us-central1: ଗୋଠ ପ୍ରଭାବ
- ଯନ୍ତ୍ରଣା: ଅନୁରୋଧ ପଥରେ ଯାଞ୍ଚ, ବିଶ୍ୱସ୍ତରୀୟ ପ୍ରତିକୃତି, ଗୋଟିଏ ବିକ୍ରେତା
- git blame — ବିଭାଜନ
ଅନୁବାଦିତ ଟ୍ରାନ୍ସକ୍ରିପ୍ଟ
ମୂଳ ଇଂରାଜୀ ବର୍ଣ୍ଣନାରୁ ଅନୁବାଦିତ। ଉପଲବ୍ଧ ଅଡିଓ ଏବଂ କ୍ୟାପ୍ସନ୍ଗୁଡ଼ିକ YouTube ଦ୍ୱାରା ନିୟନ୍ତ୍ରିତ।
ଏକ ଖାଲି କ୍ଷେତ୍ର, ଏକ ନଲ୍ ପଏଣ୍ଟର, ପ୍ରତ୍ୟେକ ଅଞ୍ଚଳ
0:00 ଖାଲି ଫିଲ୍ଡ ଥିବା ଏକ ପଲିସି ରୋ ଏକ ନଲ୍ ପଏଣ୍ଟରକୁ ହିଟ୍ କରେ, ଏବଂ ଗୁଗୁଲ୍ କ୍ଲାଉଡ୍ କ୍ରାସ୍ ହୁଏ ଏକାଥରକେ ପ୍ରତ୍ୟେକ ଅଞ୍ଚଳରେ — ଏବଂ କ୍ଲାଉଡ୍ଫ୍ଲେର୍ ମଧ୍ୟ ତା’ ସହିତ ତଳକୁ ଖସିଯାଏ, ତା’ପରେ ଗୁଗୁଲ୍କୁ "ତୃତୀୟ-ପକ୍ଷ ପ୍ରଦାନକାରୀ" ବୋଲି କୁହେ। ଜୁନ୍ 12, 2025, 17:49 UTC। ଗୁଗୁଲ୍ର ରିପୋର୍ଟ: ସର୍ଭିସ୍ କଣ୍ଟ୍ରୋଲ୍, ପ୍ରତ୍ୟେକ API ଅନୁରୋଧକୁ ଅନୁମୋଦନ କରୁଥିବା ବାଇନାରୀ, ତିନି ଘଣ୍ଟା ପାଇଁ ଏକ କ୍ରାସ୍ ଲୁପ୍ରେ। କ୍ଲାଉଡ୍ଫ୍ଲେର୍ର, ସେହି ସନ୍ଧ୍ୟାରେ: Workers KV, ନବେ ପ୍ରତିଶତ ବିଫଳ ହେଉଛି, ଦୁଇ ଘଣ୍ଟା ଅଠେଇଶି।
0:23 କିପରି ହେଲା, କାହିଁକି ଗୋଟିଏ ଖାଲି କ୍ଷେତ୍ର କିଛି ସେକେଣ୍ଡରେ ବିଶ୍ୱସ୍ତରୀୟ ହୋଇଗଲା, ଏବଂ ଦୋଷ କାହାକୁ ଯାଏ। ଏହା ହେଉଛି The Daily Diff, ପୋଷ୍ଟମର୍ଟମ୍। ମେ 29। ସର୍ଭିସ୍ କଣ୍ଟ୍ରୋଲ୍ ଏକ ନୂତନ କୋଟା ଯାଞ୍ଚ ପାଏ, ଯାହା ଏକ
ସମୟରେଖା: ମେ 29 → 17:45 → କ୍ରାସ୍ ଲୁପ୍ → ରେଡ୍ ବଟନ୍ → 17:52 କ୍ଲାଉଡ୍ଫ୍ଲେର୍
0:35 ରେଡ୍ ବଟନ୍ ସହିତ ଅଞ୍ଚଳ ଅନୁଯାୟୀ ପ୍ରେରଣ କରାଯାଏ — କିନ୍ତୁ ନୂତନ କୋଡ୍ ପଥ ରୋଲ୍ଆଉଟ୍ ସମୟରେ କେବେବି ଚାଲେ ନାହିଁ; କିଛି ବି ଆରମ୍ଭ କରେ ନାହିଁ ଏପର୍ଯ୍ୟନ୍ତ। କୌଣସି ନଲ୍ ଯାଞ୍ଚ ନାହିଁ। କୌଣସି ଫିଚର୍ ଫ୍ଲାଗ୍ ନାହିଁ। 17:45। ଖାଲି କ୍ଷେତ୍ର ଥିବା ଏକ ନୀତି ପରିବର୍ତ୍ତନ Spanner ଟେବୁଲରେ ପଡ଼େ। କୋଟା ବିଶ୍ୱସ୍ତରୀୟ, ତେଣୁ ଧାଡ଼ିଟି କିଛି ସେକେଣ୍ଡ ମଧ୍ୟରେ ସବୁଆଡେ ପ୍ରତିକୃତି ହୁଏ। ପ୍ରତ୍ୟେକ ସର୍ଭିସ୍ କଣ୍ଟ୍ରୋଲ୍ ବାଇନାରୀ ଏହାକୁ ପଢ଼େ, ନଲ୍ ପଏଣ୍ଟରକୁ ହିଟ୍ କରେ, କ୍ରାସ୍ ହୁଏ, ପୁନଃ-ଆରମ୍ଭ ହୁଏ, ଏହାକୁ ପୁଣି ପଢ଼େ। ପ୍ରତ୍ୟେକ API କଲ୍: 503।
0:55 ଗୁଗୁଲ୍ ଦ୍ରୁତ ଅଟେ: ଦୁଇ ମିନିଟ୍ରେ ଟ୍ରାଇଏଜ୍, ଦଶରେ ମୂଳ କାରଣ। ରେଡ୍ ବଟନ୍ ଚାଳିଶରେ ବାହାରେ, ଏବଂ ଛୋଟ ଅଞ୍ଚଳଗୁଡ଼ିକ ପ୍ରଥମେ ସୁସ୍ଥ ହୁଅନ୍ତି। ସ୍ଥିତି ପୃଷ୍ଠା ଏକ ଘଣ୍ଟା ପରେ ଏହାର ପ୍ରଥମ ଅପଡେଟ୍ ପୋଷ୍ଟ କରେ, କାରଣ ଏହା ଗୁଗୁଲ୍ କ୍ଲାଉଡ୍ ଉପରେ ଚାଲେ। 17:52। କ୍ଲାଉଡ୍ଫ୍ଲେର୍ର WARP ଟିମ୍ ନୂତନ ଡିଭାଇସ୍ଗୁଡ଼ିକୁ ପଞ୍ଜୀକରଣ କରିବାରେ ବିଫଳ ହେଉଥିବା ଦେଖେ। Workers KV, କ୍ଲାଉଡ୍ଫ୍ଲେର୍ର ଅଧା ଯାହା କନଫିଗ୍ ଏବଂ ପରିଚୟ ପାଇଁ ବ୍ୟବହାର କରେ, ଏକ ତୃତୀୟ-ପକ୍ଷ କ୍ଲାଉଡ୍ ଉପରେ ରହିଥାଏ। Access ପ୍ରତ୍ୟେକ ଲଗ୍ଇନ୍ରେ ବିଫଳ ହୁଏ — ଡିଜାଇନ୍ ଅନୁଯାୟୀ, ଏହା ବନ୍ଦ ହୋଇଯାଏ।
1:20 Workers AI ପ୍ରତ୍ୟେକ ଅନୁମାନରେ ବିଫଳ ହୁଏ। 19:11, ଗର୍ଗେଲି ଓରୋଜ: ଦୁଇଟି ସ୍ୱାଧୀନ କ୍ଲାଉଡ୍ ଏକାଥରକେ ଡାଉନ୍, ପୂର୍ବରୁ କେବେ ଦେଖାଯାଇ ନାହିଁ। 19:32, ଗୁଗୁଲ୍ ସପୋର୍ଟ ଜଣେ ଉପଭୋକ୍ତାଙ୍କୁ କହୁଛି ଯେ କୌଣସି ଜଣାଶୁଣା ବାଧା ନାହିଁ — କୁକିଜ୍ ସଫା କରିବାକୁ ଚେଷ୍ଟା କରନ୍ତୁ, ଆପଣଙ୍କ କୁକିଜ୍। ଅନ୍ୟ ସବୁଆଡେ 19:48 ସୁଦ୍ଧା ସୁସ୍ଥ ହୋଇଯାଏ।
us-central1: ଗୋଠ ପ୍ରଭାବ
1:34 us-central1 କରେ ନାହିଁ: ପୁନଃ-ଆରମ୍ଭ ହେଉଥିବା କାର୍ଯ୍ୟଗୁଡ଼ିକ ସମାନ Spanner ଟେବୁଲକୁ ଆକ୍ରମଣ କରନ୍ତି, କୌଣସି ରାଣ୍ଡମାଇଜଡ୍ ବ୍ୟାକଅଫ୍ ନାହିଁ, ତେଣୁ ଗୁଗୁଲ୍ ସେମାନଙ୍କୁ ହାତରେ ଥ୍ରୋଟଲ୍ କରେ। ଦୁଇ ଘଣ୍ଟା ଚାଳିଶ। ଏକ: ନୀତି ଯାଞ୍ଚ ଅନୁରୋଧ ପଥ ଭିତରେ ରହିଥାଏ; ଯେତେବେଳେ ଯାଞ୍ଚ ମରିଯାଏ,
ଯନ୍ତ୍ରଣା: ଅନୁରୋଧ ପଥରେ ଯାଞ୍ଚ, ବିଶ୍ୱସ୍ତରୀୟ ପ୍ରତିକୃତି, ଗୋଟିଏ ବିକ୍ରେତା
1:46 API ମରିଯାଏ। ଦୁଇ: କୋଟା ଡାଟା କୌଣସି ଷ୍ଟେଜିଂ ବିନା ବିଶ୍ୱସ୍ତରୀୟ ହୁଏ; ଏକ ଖରାପ ଧାଡ଼ି ଏକ ବିଶ୍ୱସ୍ତରୀୟ ଧାଡ଼ି। ତିନି: କ୍ଲାଉଡ୍ଫ୍ଲେର୍ ଜାଣିଥିଲା। Workers KV ନିଜର R2 କୁ ମଧ୍ୟ-ମାଇଗ୍ରେସନରେ ଥିଲା, ଗୋଟିଏ ପ୍ରଦାନକାରୀଙ୍କୁ ହ୍ରାସ କରାଯାଉଥିଲା — ପୋଷ୍ଟମର୍ଟମ୍ ଏହାକୁ କଭରେଜ୍ରେ ଏକ ଫାଙ୍କ ବୋଲି କହେ।
git blame — ବିଭାଜନ
2:00 git blame। ଗୁଗୁଲ୍, ପଞ୍ଚାବନ ପ୍ରତିଶତ: କୌଣସି ନଲ୍ ଯାଞ୍ଚ ନାହିଁ, କୌଣସି ଫିଚର୍ ଫ୍ଲାଗ୍ ନାହିଁ, କୌଣସି ବ୍ୟାକଅଫ୍ ନାହିଁ — ସେମାନଙ୍କ ରିପୋର୍ଟ କହୁଛି ଯେ ଏକ ଫ୍ଲାଗ୍ ଏହାକୁ ଷ୍ଟେଜିଂରେ ଧରିଥାନ୍ତା। ବିଶ୍ୱସ୍ତରୀୟ ପ୍ରତିକୃତି, କୋଡିଏ: ଗୋଟିଏ ଧାଡ଼ି, ପ୍ରତ୍ୟେକ ଅଞ୍ଚଳ, ସେକେଣ୍ଡ। କ୍ଲାଉଡ୍ଫ୍ଲେର୍, କୋଡିଏ: ଏକ ବିକ୍ରେତାଙ୍କ ଷ୍ଟୋର୍ ଉପରେ ଏକ ଉତ୍ପାଦ ଲାଇନ୍ର ଅଧା, ଏବଂ ଏକ ପୋଷ୍ଟମର୍ଟମ୍ ଯାହା କେବେବି ଗୁଗୁଲ୍ କୁହେ ନାହିଁ। ସ୍ଥିତି ପୃଷ୍ଠା, ପାଞ୍ଚ, ଏହା ରିପୋର୍ଟ କରୁଥିବା ବିଷୟରେ ରହିଥିବାରୁ। ବିସ୍ଫୋରଣ ବ୍ୟାସାର୍ଦ୍ଧ: ସତୁରି ଗୁଗୁଲ୍ କ୍ଲାଉଡ୍ ଉତ୍ପାଦ, ଦଶଟି Workspace ଆପ୍ସ,
ବିସ୍ଫୋରଣ ବ୍ୟାସାର୍ଦ୍ଧ
2:23 ପ୍ରତ୍ୟେକ ଅଞ୍ଚଳ। ତିନି ଘଣ୍ଟା। କ୍ଲାଉଡ୍ଫ୍ଲେର୍ରେ: Access, WARP, Workers AI, Pages, Stream — ଅଢ଼େଇ। Hacker News, ଚଉଦ ଶହ ପଏଣ୍ଟ; ଶୀର୍ଷ ମନ୍ତବ୍ୟ: ସ୍ଥିତି ପୃଷ୍ଠା ସବୁଜ ଅଛି।
ରାୟ + ସୋମବାର ଲାଇନ
2:33 ରାୟ, ପୋଷ୍ଟମର୍ଟମ୍: SHIP IT। ଉଭୟ ପୋଷ୍ଟମର୍ଟମ୍ ତିରିଶ ଘଣ୍ଟା ମଧ୍ୟରେ ଆସେ, ଉଭୟ ନିଜକୁ ଦୋଷ ଦିଅନ୍ତି, ଏବଂ ଗୁଗୁଲ୍ର ଫିକ୍ସଗୁଡ଼ିକ କଂକ୍ରିଟ୍: ଖୋଲା ବିଫଳ ହୁଏ, ଫ୍ଲାଗ୍ଗୁଡ଼ିକ ଡିଫଲ୍ଟ ଭାବରେ ବନ୍ଦ ଥାଏ, ଘାତାଙ୍କ ବ୍ୟାକଅଫ୍। ସୋମବାର ଲାଇନ: ଏକ ଫ୍ଲାଗ୍ ପଛରେ ନୂତନ କୋଡ୍ ଯାହା ବନ୍ଦ ହୋଇଯାଏ, ଏବଂ ଡାଟା ଆସୁଥିବା ସ୍ଥାନରେ ଏକ ନଲ୍ ଯାଞ୍ଚ। ମୋତେ ସେହି ଘଟଣା ପଠାନ୍ତୁ ଯାହା ବିଷୟରେ ଆପଣ ଏପର୍ଯ୍ୟନ୍ତ କହିବାକୁ ଅନୁମତିପ୍ରାପ୍ତ ନୁହଁନ୍ତି, ମନ୍ତବ୍ୟରେ, କିମ୍ବା daily diff dot dev ରେ। ଏବଂ ଆଜି ପାଇଁ ଏତିକି ଡିଫ୍।
2:53 ମୁଁ Axrisi ରୁ ନିକୋ ଅଛି। ଦାୟିତ୍ୱର ସହିତ ମର୍ଜ କରନ୍ତୁ।
ଉତ୍ସଗୁଡ଼ିକ
- Google Cloud Service Health, Incident Report (Jun 13, 2025) + Mini Incident Report (Jun 12)status.cloud.google.com
- Cloudflare, "Cloudflare service outage June 12, 2025" (Jun 12, 2025, 22:00 UTC)blog.cloudflare.com
- Cloudflare Status, "Broad Cloudflare service outages" (18:19–21:31 UTC)www.cloudflarestatus.com
- Gergely Orosz, 19:11 UTC, "Their infra is fully independent AFAIK"x.com
- @Google support, 19:32 UTC, "there aren't any known service disruptions"x.com
- Thomas Kurian (Google Cloud CEO), Jun 13 01:35 UTCx.com
- Hacker News, "GCP Outage" (1,468 points)news.ycombinator.com
- Hacker News, "Cloudflare was down" (341 points)news.ycombinator.com
- Hacker News, "Google Cloud Incident Report – 2025-06-13" (209 points)news.ycombinator.com



