Почему упали сервера Cloudflare
На днях пол-интернета лежало, потому что лежали сервера Cloudflare. Что это было? А это было обычное американское разгильдяйство и коекакерство. Тяп-ляп — и в продакшен.
Обычно у Cloudflare некий процесс каждые несколько минут формировал и рассылал всем серверам Cloudflare файл с правилами маршрутизации, точнее — со списком адресов, откуда лезут боты, чтобы их завернуть на затычки и таким образом предотвратить атаку типа «отказ в обслуживании» (DDOS).
Результаты формирования этого файла никак не проверялись на корректность, и вот однажды после обновления БД, из которой брались данные об адресах ботов, этот файл оказался забит одинаковыми строчками. Много-много одинаковых строчек.
Обработка этого файла велась другим процессом, в котором использовалась тестовая функция, не рекомендованная для практической работы. В результате, получив слишком большой файл — процесс просто падал, и маршрутизация не работала вообще. Потому что Cloudflare не могла отличить честного пользователя от бота.
Кстати, у них на уровне стратегического решения переписывать код с C++ на Rust. Вот этот самый раст им и подложил гогнеца. Молодцы, чо уж там.
Вообще, как известно, Итернет создавался для решения проблемы «единого центра отказа». И что же сделали манагеры после решения этой проблемы? Впарили за деньги этот единый центр отказа «как услугу»(tm).
На новом уровне, правда. Со свистелками, перделками и удобствами — так что в итоге весь мир сложил все свои яички в одну корзинку к дяде Сэму. Молодцы, чо. Заодно решили проблему необходимости большого числа профессиональных администраторов.
Вокруг — сплошная выгода. До поры, и если не задумываться о неожиданностях. И то ли ещё будет. Ведь число админов снова можно снизить — и так до предельного случая. Классичекская нисходящая спираль убывающего интеллекта. Технические нюансы тут глубоко вторичны.
В теории у них лучше специалисты, но возникает неустранимое противоречие, приводящие к спирали отупления. Раньше каждый был сам себе дурачком. Ну не смог DDOS отфильтровать — и сдох. Но таких админов было — миллионы. А сейчас заплатил — получил облачных. Их нужно меньше. А потом оказывается, что они не нужны такие умные. Потом их в массе заменяют на ИИ. Потом ещё. И приехали.