ไมโครซอฟท์ (Microsoft) เปิดรายงานเบื้องต้นกรณีระบบล่มทั่วโลก เผย 3 ปัจจัยต้นเหตุ ตั้งแต่ Bug ที่ซ่อนอยู่ในระบบตั้งแต่เดือน ก.ค. เกตเวย์เครือข่ายขัดข้อง ไปจนถึงเซิร์ฟเวอร์ที่สูญเสียกำลังรองรับกว่า 14% ส่งผลให้ Outlook และบริการ Office 365 หยุดชะงักนาน 24 ชั่วโมง
KEY POINTS
- สาเหตุหลักของระบบล่มเกิดจาก 3 ปัจจัยที่เกิดขึ้นพร้อมกัน ได้แก่ บั๊กเก่าที่อยู่ในระบบมาตั้งแต่เดือนกรกฎาคม, ปัญหาเกตเวย์เครือข่าย และความสามารถของเซิร์ฟเวอร์ที่ลดลง
- ปัญหาเกตเวย์ทำให้ภาระการเชื่อมต่อทั้งหมดไปรวมอยู่ที่เกตเวย์หลักเพียงแห่งเดียว ประกอบกับเซิร์ฟเวอร์มีความสามารถรองรับลดลง จึงกระตุ้นให้บั๊กเก่าทำงานจนระบบหยุดตอบสนอง
- การกู้คืนระบบทำได้ยากและใช้เวลานานกว่าปกติ เนื่องจากบั๊กเป็นปัญหาเก่าที่ไม่สามารถแก้ไขด้วยการย้อนกลับเวอร์ชันได้ และระบบกู้คืนอัตโนมัติไม่รองรับการล่มในวงกว้างเช่นนี้
ไมโครซอฟท์ (Microsoft) เปิดเผยรายงานเบื้องต้นถึงสาเหตุของเหตุการณ์ระบบล่มครั้งใหญ่ทั่วโลก ซึ่งทำให้ผู้ใช้งานหลายล้านคนไม่สามารถเข้าถึง Outlook, Exchange และบริการในชุด Office 365 ได้ โดยพบว่า ปัญหาไม่ได้เกิดจากความผิดพลาดเพียงจุดเดียว แต่เป็นผลจาก 3 ปัจจัยที่เกิดขึ้นพร้อมกัน ได้แก่ บั๊ก (Bug) ที่ซ่อนอยู่ในระบบตั้งแต่เดือนกรกฎาคม ปัญหาเกตเวย์เครือข่ายภายใน และความสามารถของเซิร์ฟเวอร์ที่ลดลง
ไมโครซอฟท์ระบุว่า แม้แต่ละปัจจัยจะสามารถจัดการได้หากเกิดขึ้นแยกกัน แต่เมื่อเกิดขึ้นพร้อมกันกลับทำให้ระบบเผชิญภาระหนักเกินกว่าจะรองรับได้ และทำให้การกู้คืนบริการยากกว่าปกติ
เหตุการณ์เริ่มต้นขึ้นเมื่อวันพฤหัสบดี (12 พ.ย. 69) ที่ผ่านมา หลังผู้ใช้งานในสหรัฐรายงานว่าไม่สามารถเข้าถึงบัญชีอีเมล Outlook ได้ ก่อนที่ปัญหาจะขยายวงกว้างไปถึงวันถัดมา ส่งผลให้ผู้ใช้งานหลายล้านคนทั่วโลกไม่สามารถใช้อีเมลและบริการ Office 365 ได้ตามปกติ
ผลกระทบไม่ได้หยุดอยู่แค่การทำงานในสำนักงาน แต่ยังลามไปถึงบริการสาธารณะ โดยมีรายงานว่าเรือนจำบางแห่งไม่สามารถดำเนินการปล่อยตัวผู้ต้องขังได้ โรงพยาบาลต้องกลับไปใช้เอกสารกระดาษในการบันทึกข้อมูลผู้ป่วย โรงเรียนขาดช่องทางติดต่อกับผู้ปกครอง และหน่วยงานตำรวจบางแห่งไม่สามารถรับรายงานเหตุอาชญากรรมได้
ไมโครซอฟท์ระบุว่า สามารถแก้ไขปัญหาและฟื้นฟูบริการได้ภายในวันเสาร์ (14 พ.ย. 69) พร้อมกล่าวขอโทษต่อผู้ใช้งานที่ได้รับผลกระทบ โดยยืนยันว่าเหตุการณ์ดังกล่าวไม่ได้เกิดจากการโจมตีทางไซเบอร์
3 ปัจจัยต้นเหตุ ทำระบบรับภาระไม่ไหว
ชาร์ลส์ ลามันนา (Charles Lamanna) รองประธานบริหารฝ่าย Copilot, Agents และ Platform ของไมโครซอฟท์ เปิดเผยผ่านแพลตฟอร์ม X ว่า ปัจจัยแรกคือ ข้อบกพร่องในระบบ หรือ Bug ที่เกิดขึ้นตั้งแต่เดือนก.ค.ที่ผ่านมา แม้ปัญหาดังกล่าวจะไม่ได้แสดงผลกระทบอย่างชัดเจนในช่วงแรก แต่กลับกลายเป็นจุดอ่อนที่ทำให้เซิร์ฟเวอร์ของบริษัททำงานหนักเกินไปและหยุดตอบสนองเมื่อเผชิญกับปริมาณการใช้งานที่เพิ่มขึ้น
ปัจจัยที่สองเกี่ยวข้องกับเกตเวย์เครือข่าย ซึ่งทำหน้าที่เป็นจุดเชื่อมต่อสำหรับรับส่งข้อมูลระหว่างระบบต่างๆ โดยปกติไมโครซอฟท์มีเกตเวย์ที่พร้อมใช้งาน 2 ช่องทาง เพื่อช่วยรองรับการเชื่อมต่อและกระจายภาระการทำงาน แต่ในเหตุการณ์ครั้งนี้ เกตเวย์หนึ่งเกิดปัญหาในการทำงานร่วมกับ Microsoft Teams ทำให้การเชื่อมต่อจำนวนมากไหลไปรวมอยู่ที่เกตเวย์หลักเพียงช่องทางเดียว ส่งผลให้ระบบต้องรับภาระเพิ่มขึ้นอย่างมาก
ปัจจัยที่สามคือ ความสามารถของเซิร์ฟเวอร์ที่ลดลงจากปัญหาอีกประการหนึ่งซึ่งเกิดขึ้นตั้งแต่วันก่อนหน้า และไม่ได้เกี่ยวข้องกับปัญหาเกตเวย์ โดยส่งผลให้เซิร์ฟเวอร์ของบริษัทมากกว่า 14% ไม่สามารถใช้งานได้
เมื่อนำทั้งสามปัจจัยมารวมกัน ปริมาณการเชื่อมต่อที่เพิ่มขึ้นจึงตกอยู่กับเกตเวย์หลัก ขณะที่เซิร์ฟเวอร์ก็มีขีดความสามารถรองรับลดลง สถานการณ์ดังกล่าวทำให้บั๊กที่ซ่อนอยู่ตั้งแต่เดือนกรกฎาคมถูกกระตุ้นขึ้นมา จนคำขอใช้งานสะสมอยู่ในระบบจำนวนมาก และท้ายที่สุดเซิร์ฟเวอร์ไม่สามารถตอบสนองได้
ลามันนาอธิบายว่า “เมื่อปริมาณภาระการใช้งานเพิ่มขึ้น ขณะที่ขีดความสามารถของเซิร์ฟเวอร์ลดลง เกตเวย์เครือข่ายจึงเผชิญกับข้อบกพร่องแฝงที่มีมาตั้งแต่เดือนกรกฎาคม ส่งผลให้คำขอใช้งานสะสมเพิ่มขึ้นจนเซิร์ฟเวอร์หยุดตอบสนองในที่สุด โดยเหตุการณ์เกิดขึ้นในช่วงเวลาที่มีปริมาณการใช้งานสูงสุดของสหรัฐ”
ทำไมกู้ระบบยากกว่าปกติ?
อีกประเด็นที่ทำให้เหตุการณ์ครั้งนี้ใช้เวลาฟื้นฟูนาน คือข้อบกพร่องต้นเหตุเกิดขึ้นมาหลายเดือนแล้ว ไม่ใช่การเปลี่ยนแปลงระบบที่เพิ่งเกิดขึ้น จึงไม่สามารถแก้ไขได้ง่ายด้วยการย้อนกลับไปใช้การตั้งค่าหรือซอฟต์แวร์เวอร์ชันก่อนหน้า
ลามันนาระบุว่า การกู้คืนระบบใช้เวลานานกว่าปกติ เพราะเมื่อเซิร์ฟเวอร์เริ่มกลับมาให้บริการ ก็ต้องเผชิญกับคำขอใช้งานจำนวนมากที่สะสมรออยู่ก่อนแล้ว ทำให้เซิร์ฟเวอร์รับภาระหนักและกลับมาหยุดตอบสนองซ้ำอีกครั้ง
นอกจากนี้ ระบบกู้คืนอัตโนมัติที่ไมโครซอฟท์ใช้อยู่ตามปกติไม่ได้ออกแบบมาเพื่อรับมือกับสถานการณ์ที่เซิร์ฟเวอร์จำนวนมากไม่ตอบสนองพร้อมกันในวงกว้าง
ขณะเดียวกัน เครื่องมือที่ใช้จัดการการเปลี่ยนแปลงระบบก็ไม่สามารถแก้ปัญหาได้อย่างรวดเร็ว เนื่องจากบั๊กต้นเหตุเป็นข้อผิดพลาดที่แฝงอยู่ในระบบมาหลายเดือน โดยเครื่องมือเหล่านี้ประกอบด้วย Rollback หรือการย้อนกลับไปใช้ซอฟต์แวร์เวอร์ชันก่อนหน้า, Flighting หรือการทยอยปล่อยการเปลี่ยนแปลงระบบให้ผู้ใช้งานบางกลุ่มก่อน และ Feature Flags ซึ่งเป็นกลไกสำหรับเปิดหรือปิดการทำงานของฟีเจอร์ต่างๆ
ลามันนาอธิบายว่า “การฟื้นฟูระบบใช้เวลานานกว่าปกติ เพราะเมื่อเซิร์ฟเวอร์กลับมาให้บริการ ก็ถูกคำขอใช้งานที่รอสะสมอยู่เข้ามากดดันทันที จนกลับมาไม่ตอบสนองอีกครั้ง กระบวนการกู้คืนอัตโนมัติที่เราใช้อยู่ไม่ได้ถูกออกแบบมาเพื่อฟื้นฟูบริการจากสถานการณ์ที่ระบบไม่ตอบสนองในวงกว้างเช่นนี้ อีกทั้งข้อบกพร่องหลักเป็นบั๊กที่แฝงอยู่มาตั้งแต่หลายเดือนก่อน ทำให้เครื่องมือ Rollback, Flighting และ Feature Flags ไม่สามารถย้อนกลับการเปลี่ยนแปลงได้อย่างรวดเร็ว”
ไมโครซอฟท์ระบุว่า จะเผยแพร่รายงานฉบับสมบูรณ์เพิ่มเติมในภายหลัง เพื่อให้รายละเอียดเกี่ยวกับเหตุการณ์และแนวทางจัดการปัญหาชัดเจนยิ่งขึ้น
ระบบล่มครั้งเดียว กระทบมากกว่าที่คิด
ด้านแมตต์ ฮัลล์ (Matt Hull) รองประธานฝ่ายข่าวกรองและการตอบสนองด้านไซเบอร์ของ NCC Group มองว่า เหตุการณ์นี้สะท้อนความสำคัญของการเตรียมพร้อมรับมือกับความเสี่ยงด้านเทคโนโลยี โดยเฉพาะความสามารถในการรักษาความต่อเนื่องของธุรกิจ
เขาระบุว่า “นี่เป็นตัวอย่างสำคัญที่แสดงให้เห็นถึงความจำเป็นของการมีทั้งความสามารถในการรับมือกับเหตุการณ์ด้านความมั่นคงปลอดภัยไซเบอร์ และความสามารถในการรักษาความต่อเนื่องของธุรกิจ รายงานที่ระบุว่าโรงพยาบาล โรงเรียน และบริการที่จำเป็นอื่นๆ ได้รับผลกระทบ แสดงให้เห็นว่าการหยุดทำงานของระบบสามารถสร้างผลกระทบในวงกว้างได้ ไม่ว่าสาเหตุจะมาจากอะไรก็ตาม”
เหตุการณ์ดังกล่าวยังทำให้นักวิเคราะห์ตั้งคำถามถึงระดับการพึ่งพาระบบปฏิบัติการและแพลตฟอร์มเทคโนโลยีเพียงรายเดียวขององค์กรต่าง ๆ เนื่องจากเมื่อระบบหลักเกิดขัดข้อง ผลกระทบอาจไม่ได้จำกัดอยู่แค่บริการของผู้ให้บริการเทคโนโลยี แต่สามารถส่งต่อไปยังองค์กรและหน่วยงานที่ใช้ระบบดังกล่าวเป็นส่วนหนึ่งของการดำเนินงานได้ในวงกว้าง
อ้างอิง: The Guardian และ The Independent





