Повече от 6 години не сме имали друг прекъсване, което да е довело до спиране на по-голямата част от основния трафик през нашата мрежа
Както винаги при подобна криза, хаш таг с Down се появи вчера и беше използван и за сериозни анализи, и за забавление. Ето няколко от интересните картинки, следва и обяснението на шефа на Cloudflare.
Матю Принс: На 18 ноември 2025 г. в 11:20 UTC (всички часове в този блог са UTC), мрежата на Cloudflare започна да изпитва значителни затруднения в доставянето на трафик от основната мрежа. Това се показваше на интернет потребителите, опитващи се да получат достъп до сайтовете на нашите клиенти, като страница за грешка, показваща повреда в мрежата на Cloudflare
Проблемът не беше причинен, пряко или косвено, от кибератака или злонамерена дейност от какъвто и да е вид. Вместо това, той беше задействан от промяна в разрешенията на една от нашите системи за бази данни, което накара базата данни да изведе множество записи във „feature file“, използван от нашата система за управление на ботове. Този файл с функции, от своя страна, се удвои по размер. По-големият от очаквания файл с функции след това беше разпространен до всички машини, които съставляват нашата мрежа.
Софтуерът, работещ на тези машини за маршрутизиране на трафика през нашата мрежа, чете този файл с функции, за да поддържа нашата система за управление на ботове актуална с постоянно променящите се заплахи. Софтуерът имаше ограничение за размера на файла с функции, което беше под удвоения му размер. Това доведе до срив на софтуера.
След като първоначално погрешно подозирахме, че симптомите, които наблюдавахме, са причинени от хипермащабна DDoS атака, правилно идентифицирахме основния проблем и успяхме да спрем разпространението на по-големия от очаквания файл с функции и да го заменим с по-ранна версия на файла. Основният трафик до голяма степен течеше нормално до 14:30. През следващите няколко часа работихме, за да смекчим увеличеното натоварване на различни части от нашата мрежа, тъй като трафикът се върна онлайн. Към 17:06 всички системи в Cloudflare функционираха нормално.
Съжаляваме за въздействието върху нашите клиенти и върху интернет като цяло. Предвид важността на Cloudflare в интернет екосистемата, всяко прекъсване на която и да е от нашите системи е неприемливо. Фактът, че имаше период от време, в който нашата мрежа не беше в състояние да маршрутизира трафика, е дълбоко болезнен за всеки член на нашия екип. Знаем, че ви разочаровахме днес.
Тази публикация е задълбочен разказ за това какво точно се случи и кои системи и процеси се провалиха. Това е и началото, макар и не краят, на това, което планираме да направим, за да гарантираме, че подобен прекъсване няма да се повтори. …