That collapsed because of acting purely by yourself 🚨
The massive crash of Cloudflare on Nov 18, 2025 has become a global impact event. A variety of websites, social media platforms, news web, online stores, as well as gaming services, are broadly unavailable simultaneously.
.
Many in the early stages understood that Cloudflare had been attacked or hit by a DDoS shot because of the high traffic and a similar anomaly response system during the collapse, but ultimately Cloudflare came out to argue that Cloudflare had nothing to do with any hackers or attacks, and that it was an internal problem for the company itself.
.
The cause started with the Cloudflare team adjusting the database access permissions. When the query system from ClickHouse did not specify the database clearly, it accidentally obtained a lot of duplicates. These duplicates were used to create Bot Management system feature files. Normally, there are only about 60 features and they are limited to 200 features. But the faulty files are so large that they exceed the limit. When they are spread across the network, Cloudflare's main proxies are constantly panicking and crashing. Many key services are chain-bound.
.
The complexity is that this file is regenerated every five minutes, thus causing the system to become so stuck that the team has long misunderstood that it may have actually been attacked. The analysis process was delayed. When the cause was detected, the team stopped the creation of the file, reverted to the correct version, and restarted the global system.
.
Cloudflare's service resumed around 21: 20 Thailand time and returned to normal at midnight, including a 3-6 hour crash with the affected service.
.
CEO Matthew Prince apologized to users around the world and acknowledged that this was the worst crash since 2019, with an announcement of increased monitoring measures and systems to prevent this from happening again in the future.
.
Source: Cloudflare
เหตุการณ์ล่มของ Cloudflare ครั้งใหญ่นี้เป็นบทเรียนสำคัญที่ชี้ให้เห็นถึงความเสี่ยงของการบริหารจัดการระบบฐานข้อมูลและซอฟต์แวร์ที่ซับซ้อน แม้ว่า Cloudflare จะเป็นผู้ให้บริการโครงสร้างพื้นฐานอินเทอร์เน็ตชั้นนำระดับโลก แต่ข้อผิดพลาดเพียงเล็กน้อยในการตั้งค่าสิทธิ์การเข้าถึงฐานข้อมูล ClickHouse ก็สามารถก่อให้เกิดผลกระทบรุนแรงและกว้างขวางได้ เมื่อทีมงานเผลอสร้างข้อมูลซ้ำจำนวนมากโดยไม่ได้ตั้งใจ ไฟล์ feature file ของระบบ Bot Management จึงมีขนาดเกินขีดจำกัด ซึ่งส่งผลกระทบโดยตรงต่อ proxy servers ที่ต้องประมวลผลข้อมูลนี้ทั่วทั้งเครือข่าย ทำให้ระบบพรอกซี่เกิด panic และแครชตามมาในช่วงเวลาหลายชั่วโมง ซึ่งสะท้อนให้เห็นว่าระบบควรมีการตรวจสอบและจำกัดขนาดไฟล์หรือเวอร์ชันของ feature file อย่างเข้มงวดกว่านี้ ความซับซ้อนของเหตุการณ์ยังมีส่วนที่ไฟล์นี้ถูกสร้างซ้ำทุก 5 นาที ส่งผลให้อาการล่มเกิดขึ้นซ้ำๆ และทำให้ทีมงานคิดว่าอาจเป็นการโจมตีแบบ DDoS จริงก่อนที่จะพบสาเหตุที่แท้จริง นอกจากนี้ การที่เหตุการณ์นี้เกิดขึ้นตั้งแต่ปี 2025 แต่เป็นเหตุการณ์ล่มที่รุนแรงที่สุดตั้งแต่ปี 2019 ทำให้ผู้ดูแลระบบทั่วโลกต้องตระหนักถึงความสำคัญของการทบทวนและตรวจสอบระบบหลังบ้านอย่างต่อเนื่อง การฟื้นฟูระบบของ Cloudflare ที่ใช้เวลาประมาณ 3-6 ชั่วโมงแสดงให้เห็นถึงความท้าทายในการจัดการระบบระดับโลกที่ซับซ้อน และความสำคัญของการมีแผนรองรับเหตุการณ์ล่ม (disaster recovery plan) ที่แข็งแรง แถลงการณ์ขอโทษจาก Matthew Prince ซีอีโอของ Cloudflare พร้อมกับการประกาศเพิ่มมาตรการป้องกันในอนาคต ช่วยสร้างความมั่นใจแก่ผู้ใช้และองค์กรที่พึ่งพาบริการของ Cloudflare อย่างกว้างขวาง สำหรับผู้ที่ใช้งานบริการคลาวด์และโครงสร้างพื้นฐานเครือข่าย ควรเรียนรู้จากกรณีนี้เพื่อตั้งค่าระบบและสิทธิ์การเข้าถึงฐานข้อมูลอย่างระมัดระวัง รวมถึงมีการตรวจสอบระบบอัตโนมัติที่สามารถตรวจจับข้อผิดพลาดที่อาจเกิดขึ้นก่อนที่จะส่งผลกระทบในวงกว้าง เพื่อสร้างความมั่นคงและลดโอกาสล่มของบริการในอนาคตอย่างมีประสิทธิภาพ
