ଏକ ରେଗେକ୍ସ କ୍ଲାଉଡ୍ଫ୍ଲେର୍କୁ ଡାଉନ୍ କରିଦେଲା। 27 ମିନିଟ୍।
ଜୁଲାଇ 2, 2019, 13:42 UTC: କ୍ଲାଉଡ୍ଫ୍ଲେର୍ର ୱେବ୍ ଆପ୍ଲିକେସନ୍ ଫାୟାରୱାଲ୍ ପାଇଁ ଗୋଟିଏ ନୂଆ ନିୟମ ପ୍ରାୟ ଦୁଇ ସେକେଣ୍ଡରେ 180+ ସହରରେ ଲାଇଭ୍ ହୁଏ।
ଜୁଲାଇ 2, 2019, 13:42 UTC: କ୍ଲାଉଡ୍ଫ୍ଲେର୍ର ୱେବ୍ ଆପ୍ଲିକେସନ୍ ଫାୟାରୱାଲ୍ ପାଇଁ ଗୋଟିଏ ନୂଆ ନିୟମ ପ୍ରାୟ ଦୁଇ ସେକେଣ୍ଡରେ 180+ ସହରରେ ଲାଇଭ୍ ହୁଏ। ଏହା ସିମୁଲେଟ୍ ମୋଡ୍ରେ ଥିବା ଏକ XSS ନିୟମ, ତେଣୁ ଏହା କିଛି ବି ବ୍ଲକ୍ କରେ ନାହିଁ, କିନ୍ତୁ ଏହା ପ୍ରତ୍ୟେକ ଅନୁରୋଧରେ ଚାଲେ, ଏବଂ ଏହା .*(?:.*=.*). ରେ ଶେଷ ହୁଏ। PCRE ବ୍ୟାକ୍ଟ୍ରାକ୍ କରେ, HTTP ପ୍ରଦାନ କରୁଥିବା ପ୍ରତ୍ୟେକ CPU କୋର୍ 100 % ରେ ପହଞ୍ଚେ, ଏବଂ ପ୍ରତ୍ୟେକ କ୍ଲାଉଡ୍ଫ୍ଲେର୍-ପ୍ରକ୍ସିଡ୍ ସାଇଟ୍ 27 ମିନିଟ୍ ପାଇଁ 502 ଫେରାଇଥାଏ; ଟ୍ରାଫିକ୍ 82 % କମିଯାଏ। କିଲ୍ ସୁଇଚ୍ କ୍ଲାଉଡ୍ଫ୍ଲେର୍ ଆକ୍ସେସ୍ ପଛରେ ଅଛି, ଯାହା କ୍ଲାଉଡ୍ଫ୍ଲେର୍ ପଛରେ ଅଛି। କ୍ଲାଉଡ୍ଫ୍ଲେର୍ର ନିଜସ୍ୱ ଲେଖାରୁ ପୋଷ୍ଟମର୍ଟମ୍: CPU ସଞ୍ଚୟ କରିବା ପାଇଁ ଅର୍ଥ କରୁଥିବା ଏକ ରିଫାକ୍ଟରରେ କିଛି ସପ୍ତାହ ପୂର୍ବରୁ CPU ଗାର୍ଡ ହଟାଯାଇଥିଲା, ପ୍ରତ୍ୟେକ ନିୟମକୁ ଷ୍ଟେଜିଂ ଛାଡିବାକୁ ଅନୁମତି ଦେଇଥିବା ପ୍ରଣାଳୀ, କୌଣସି ଜଟିଳତା ଗ୍ୟାରେଣ୍ଟି ନଥିବା ଇଞ୍ଜିନ୍, 11 ଟି କାରଣ ଏବଂ 7 ଟି ସମାଧାନ। ସମାଧାନ ଉପରେ ରାୟ: SHIP IT।
ଲିଖିତ ସଂସ୍କରଣ ପଢ଼ନ୍ତୁ (English) ↗
ଏହି ଭିଡିଓରେ କ'ଣ ଅଛି
- 13:31–13:42 UTC: PR ମର୍ଜ ହେଲା, CI ସବୁଜ (କୌଣସି CPU ଟେଷ୍ଟ ନାହିଁ), Quicksilver 180+ ସହରରେ ନିୟମ ପ୍ରୟୋଗ କରେ; WAF ନିୟମ DOG → PIG → Canary ଷ୍ଟେଜ୍ ଛାଡିଥାଏ
- 13:45–14:07: ପ୍ରଥମ ପୃଷ୍ଠା; ବିଶ୍ୱବ୍ୟାପୀ CPU 100 %, ଟ୍ରାଫିକ୍ −82 %, ସର୍ବତ୍ର 502s; ଆଭ୍ୟନ୍ତରୀଣ ନିୟନ୍ତ୍ରଣ ପ୍ୟାନେଲ୍ କ୍ଲାଉଡ୍ଫ୍ଲେର୍ ଆକ୍ସେସ୍ ପଛରେ ଅଛି, ଯାହା ଡାଉନ୍ ଅଛି; କିଛି ପ୍ରମାଣପତ୍ରର ଅବଧି ଶେଷ ହୋଇଛି; ଏକ କ୍ୱଚିତ୍ ବ୍ୟବହୃତ ବାଇପାସ୍
- 14:07–14:09: ବିଶ୍ୱବ୍ୟାପୀ WAF ବନ୍ଦ; 27 ମିନିଟ୍ ପରେ ଟ୍ରାଫିକ୍ ଏବଂ CPU ସ୍ୱାଭାବିକ; 14:52 WAF ନିୟମ ବିନା ଫେରି ଆସେ
- ଜୁଲାଇ 2 (15:50 UTC) ଏବଂ ଜୁଲାଇ 12: କ୍ଲାଉଡ୍ଫ୍ଲେର୍ ସେହି ଦିନର ନୋଟ୍ ଏବଂ ସମ୍ପୂର୍ଣ୍ଣ ପୋଷ୍ଟମର୍ଟମ୍ ପ୍ରକାଶ କରେ; CPU ଗାର୍ଡ ପୁନଃ ଯୋଗ କରାଯାଇଛି, 3,868 ନିୟମ ପୁନଃ ପଠାଯାଇଛି, ଷ୍ଟେଜ୍ଡ୍ ରୋଲଆଉଟ୍, ଲିନିଅର୍-ଟାଇମ୍ ରେଗେକ୍ସ ଇଞ୍ଜିନକୁ ସ୍ଥାନାନ୍ତର
ଅନୁବାଦିତ ଟ୍ରାନ୍ସକ୍ରିପ୍ଟ
ମୂଳ ଇଂରାଜୀ ବର୍ଣ୍ଣନାରୁ ଅନୁବାଦିତ। ଉପଲବ୍ଧ ଅଡିଓ ଏବଂ କ୍ୟାପ୍ସନ୍ଗୁଡ଼ିକ YouTube ଦ୍ୱାରା ନିୟନ୍ତ୍ରିତ।
0:00 ଗୋଟିଏ ନିୟମିତ ଅଭିବ୍ୟକ୍ତି ଏକାଥରକେ ପ୍ରତ୍ୟେକ କ୍ଲାଉଡ୍ଫ୍ଲେର୍ ସର୍ଭରରେ ଲାଇଭ୍ ହୁଏ, ଏବଂ ପରବର୍ତ୍ତୀ ସତେଇଶ ମିନିଟ୍ ପାଇଁ ଏହା ପଛରେ ଥିବା ସାଇଟଗୁଡ଼ିକ 502 ପୃଷ୍ଠା ଅଟେ, ଯାହା, ଏକ ଫାୟାରୱାଲ୍ ପାଇଁ, ସମ୍ଭବତଃ ସବୁଠାରୁ କଠୋର ସେଟିଂ ଅଟେ। ଜୁଲାଇ 2, 2019, 13:42 UTC। କ୍ଲାଉଡ୍ଫ୍ଲେର୍ ଦୁଇ ଘଣ୍ଟା ମଧ୍ୟରେ ପୋଷ୍ଟ କରେ: ଆକ୍ରମଣ ନୁହେଁ, ଏକ ଖରାପ ଡିପ୍ଲୋୟ, ଟ୍ରାଫିକ୍ 82 ପ୍ରତିଶତ କମିଯାଇଛି। ଦଶ ଦିନ ପରେ CTO ଜନ୍ ଗ୍ରାହାମ୍-କୁମିଂ ସମ୍ପୂର୍ଣ୍ଣ ପୋଷ୍ଟମର୍ଟମ୍ ପ୍ରକାଶ କରନ୍ତି, ରେଗେକ୍ସ ସହିତ, ଏବଂ ହାକର୍ ନ୍ୟୁଜ୍ ଏହାକୁ 698 ପଏଣ୍ଟ ଦିଏ,
0:26 ଯାହା ଏକ ଆଉଟେଜ୍ ପାଇଁ ଏକ ଷ୍ଟାଣ୍ଡିଂ ଓଭେସନ୍ ଅଟେ। ଏହା କିପରି ଘଟେ, ଏହା କାହିଁକି ସମ୍ଭବ, ଏବଂ ପ୍ରକୃତରେ କିଏ ଦୋଷୀ ହୁଏ। ଏହା ହେଉଛି ଦ ଡେଲି ଡିଫ୍, ପୋଷ୍ଟମର୍ଟମ୍। 13:31। ଏକ ପୁଲ୍ ଅନୁରୋଧ ମର୍ଜ ହୁଏ: କ୍ରସ୍-ସାଇଟ୍ ବିରୁଦ୍ଧରେ ଗୋଟିଏ ନୂଆ ଫାୟାରୱାଲ୍ ନିୟମ ସ୍କ୍ରିପ୍ଟିଂ, ସିମୁଲେଟ୍ ମୋଡ୍ରେ, ତେଣୁ ଏହା କିଛି ବି ବ୍ଲକ୍ କରେ ନାହିଁ। 13:37, ଟେଷ୍ଟ ପାସ୍; କୌଣସିଟି CPU ମାପ କରେ ନାହିଁ। 13:42, ନିୟମ ଦୁଇ ସେକେଣ୍ଡରେ 180 ସହରକୁ ପଠାଯାଏ, କାରଣ WAF ନିୟମଗୁଡ଼ିକ ଅନ୍ୟ ରିଲିଜ୍ ପାଉଥିବା କୁକୁର, ଘୁଷୁରି ଏବଂ କାନାରି ଷ୍ଟେଜ୍ ଛାଡିଥାଏ।
0:54 13:45, ପ୍ରଥମ ପୃଷ୍ଠା। 13:49, ହାକର୍ ନ୍ୟୁଜ୍ରେ ଷ୍ଟାଟସ୍ ପୃଷ୍ଠା ଉପରେ ଏକ ଥ୍ରେଡ୍ ଅଛି, ଯାହା ଏପର୍ଯ୍ୟନ୍ତ କହୁଛି ସମସ୍ତ ସିଷ୍ଟମ୍ କାର୍ଯ୍ୟକ୍ଷମ ଅଛି। ନିୟମ ଡଟ୍-ଷ୍ଟାର୍, ଡଟ୍-ଷ୍ଟାର୍, ଇକ୍ୱାଲ୍ସ, ଡଟ୍-ଷ୍ଟାର୍ରେ ଶେଷ ହୁଏ: ଯେକୌଣସି କିଛି, ତା’ପରେ ଯେକୌଣସି କିଛି, ତା’ପରେ ଏକ ସମାନ ଚିହ୍ନ। PCRE ଲୋଭନୀୟ ଭାବରେ ଅନୁମାନ କରେ, ବିଫଳ ହୁଏ, ଏବଂ ଅନ୍ୟ ପ୍ରତ୍ୟେକ ସ୍ପ୍ଲିଟ୍ ମାଧ୍ୟମରେ ବ୍ୟାକ୍ଟ୍ରାକ୍ କରେ। x ଇକ୍ୱାଲ୍ସ x 23 ଷ୍ଟେପ୍ ନିଏ। ସମାନ ଚିହ୍ନ ପରେ କୋଡ଼ିଏ x: 555।
1:15 କୋଡ଼ିଏ x, କୌଣସି ସମାନ ଚିହ୍ନ ନାହିଁ: କିଛି ନ ଖୋଜିବା ପାଇଁ 4,067 ଷ୍ଟେପ୍। ତାହା ପ୍ରତ୍ୟେକ ଅନୁରୋଧରେ ଚଲାନ୍ତୁ ଏବଂ ପ୍ରତ୍ୟେକ କୋର୍ ଶହେ ପ୍ରତିଶତରେ ରହିବ, କିଛି ନ କରି, ସମ୍ପୂର୍ଣ୍ଣ ଭାବରେ। ଦୁଇଟି ଗାର୍ଡ ଏହାକୁ ଧରିବା ଉଚିତ୍ ଥିଲା। ନିୟମଗୁଡ଼ିକ ଉପରେ CPU ସୀମା ଭୁଲ୍ରେ କିଛି ସପ୍ତାହ ପୂର୍ବରୁ ହଟାଯାଇଥିଲା, ଏକ ରିଫାକ୍ଟରରେ ଯାହାର ଉଦ୍ଦେଶ୍ୟ WAF କମ୍ CPU ବ୍ୟବହାର କରିବା ଥିଲା। ଏବଂ ପ୍ରଣାଳୀ ଯେକୌଣସି ନିୟମକୁ ଷ୍ଟେଜିଂ ଛାଡିବାକୁ ଅନୁମତି ଦିଏ, କାରଣ ଲାଇଭ୍ ଆକ୍ରମଣ ବନ୍ଦ କରିବା ପାଇଁ ନିୟମଗୁଡ଼ିକ ଅଛି; ଏହା ଏକ ଜରୁରୀ ପରିସ୍ଥିତି ନଥିଲା, ଏବଂ ଏହା ସର୍ବଦା ବିଶ୍ୱବ୍ୟାପୀ ହେଲା।
1:37 14:00, WAF ଚିହ୍ନଟ ହୁଏ; କୌଣସି ଆକ୍ରମଣ ନୁହେଁ। 14:02, କେହି ଜଣେ ବିଶ୍ୱବ୍ୟାପୀ ବନ୍ଦ କରିବାକୁ ପ୍ରସ୍ତାବ ଦିଏ: ଗୋଟିଏ ଉପାଦାନ, ବନ୍ଦ, ସମଗ୍ର ବିଶ୍ୱରେ। ସୁଇଚ୍ କ୍ଲାଉଡ୍ଫ୍ଲେର୍ ଆକ୍ସେସ୍ ପଛରେ ଅଛି। କ୍ଲାଉଡ୍ଫ୍ଲେର୍ ଆକ୍ସେସ୍ କ୍ଲାଉଡ୍ଫ୍ଲେର୍ ପଛରେ ଅଛି। କିଛି ପ୍ରମାଣପତ୍ର ବ୍ୟବହାର ନ ହେବା କାରଣରୁ ମିଆଦ ଶେଷ ହୋଇଛି, ତେଣୁ ଇଣ୍ଟରନେଟ୍ର ସବୁଠାରୁ ଦ୍ରୁତ ନେଟୱର୍କ କେହି ଅଭ୍ୟାସ ନ କରିଥିବା ଏକ ବାଇପାସ୍ ଉପରେ ପାଞ୍ଚ ମିନିଟ୍ ବିତାଏ। 14:07, ବନ୍ଦ। 14:09, ଟ୍ରାଫିକ୍ ସ୍ୱାଭାବିକ। git blame: ଗୋଟିଏ ବେଗରେ ରୋଲଆଉଟ୍, ବିଶ୍ୱବ୍ୟାପୀ; ଏକ CPU ଗାର୍ଡ ଦୁର୍ଘଟଣାବଶତଃ ରିଫାକ୍ଟର ହୋଇ ଅପସାରିତ ହୋଇଛି;
2:04 କୌଣସି ଉପର ସୀମା ନଥିବା ଏକ ରେଗେକ୍ସ ଇଞ୍ଜିନ୍। ନିୟମ ଲେଖିଥିବା ଇଞ୍ଜିନିୟର ନୁହେଁ: ପୋଷ୍ଟମର୍ଟମ୍ ଏଗାରଟି କାରଣ ତାଲିକାଭୁକ୍ତ କରେ ଏବଂ କାହାରି ନାମ ନିଏ ନାହିଁ। ବ୍ଲାଷ୍ଟ ରେଡିଅସ୍: 27 ମିନିଟ୍, 82 ପ୍ରତିଶତ ଟ୍ରାଫିକ୍, ପ୍ରତ୍ୟେକ କୋର୍ରେ 100 ପ୍ରତିଶତ CPU, ପ୍ରତ୍ୟେକ ସହରରେ। ଡ୍ୟାସବୋର୍ଡ ଏବଂ API ସମାନ ଏଜ୍ ପଛରେ ଅଛି, ତେଣୁ ଗ୍ରାହକମାନେ ଏହାକୁ ବନ୍ଦ ମଧ୍ୟ କରିପାରିବେ ନାହିଁ। ହାକର୍ ନ୍ୟୁଜ୍, ପୋଷ୍ଟମର୍ଟମ୍ ତଳେ: ସେମାନଙ୍କର ଗୋଟିଏ ସମସ୍ୟା ଥିଲା, ଏକ ନିୟମିତ ଅଭିବ୍ୟକ୍ତି ବ୍ୟବହାର କଲେ, ବର୍ତ୍ତମାନ ସେମାନଙ୍କର ଦୁଇଟି ଅଛି। ପୁରୁଣା ମଜାଳିଆ। ଏବେ ବି କମ୍ପାଇଲ୍ ହୁଏ।
2:28 ରାୟ, ପୋଷ୍ଟମର୍ଟମ୍: SHIP IT। CPU ଗାର୍ଡ ଫେରି ଆସିଛି, ସମସ୍ତ 3,868 ନିୟମ ହାତରେ ପଢାଯାଏ, ନିୟମଗୁଡ଼ିକ ଷ୍ଟେଜିଂ ଦେଇ ଯାଏ, ଏବଂ ଇଞ୍ଜିନ୍ ଲିନିଅର୍-ଟାଇମ୍ ଗ୍ୟାରେଣ୍ଟି ସହିତ ଗୋଟିଏକୁ ସ୍ଥାନାନ୍ତରିତ ହୁଏ, 1968 ରେ କେନ୍ ଥମ୍ପସନ୍ ଦ୍ୱାରା ପ୍ରକାଶିତ। ସୋମବାର: ପ୍ରତ୍ୟେକ ଅନୁରୋଧରେ ଚାଲୁଥିବା କିଛିରେ କୌଣସି ଡଟ୍-ଷ୍ଟାର୍ ଡଟ୍-ଷ୍ଟାର୍ ନାହିଁ, ଏବଂ କିଲ୍ ସୁଇଚ୍କୁ ଏହା ବନ୍ଦ କରୁଥିବା ଜିନିଷରୁ ଦୂରରେ ରଖନ୍ତୁ। ଆପଣ ଏପର୍ଯ୍ୟନ୍ତ କଥାବାର୍ତ୍ତା କରିବାକୁ ଅନୁମତିପ୍ରାପ୍ତ ନଥିବା ଘଟଣା ମୋତେ ପଠାନ୍ତୁ, ମନ୍ତବ୍ୟରେ, କିମ୍ବା daily diff dot dev ରେ।
2:53 ଏବଂ ଏହା ହେଉଛି ଆଜିର ଡିଫ୍। ମୁଁ Axrisi ରୁ ନିକୋ। ଦାୟିତ୍ୱର ସହିତ ମର୍ଜ କରନ୍ତୁ।
ଉତ୍ସଗୁଡ଼ିକ
- John Graham-Cumming, "Details of the Cloudflare outage on July 2, 2019" (Jul 12, 2019)blog.cloudflare.com
- Matthew Prince, "Cloudflare outage caused by bad software deploy (updated)" (Jul 2, 2019)blog.cloudflare.com
- Matthew Prince on X, Jul 2, 2019, 14:22 UTCx.com
- Matthew Prince on X, Jul 2, 2019, 14:36 UTC ("No evidence yet attack related")x.com
- Hacker News, Jul 2, 2019, 13:49 UTC — "Cloudflare Network Performance Issues" (631 points)news.ycombinator.com
- Hacker News, Jul 2, 2019 — "Cloudflare outage caused by bad software deploy" (348 points)news.ycombinator.com
- Hacker News, Jul 12, 2019 — "Details of the Cloudflare outage on July 2, 2019" (698 points)news.ycombinator.com
- TechCrunch, Jul 2, 2019techcrunch.com
