Практический Devops. Оповещения в Cloudflare

Это заявка на доклад. Он пока не включен в программу.

Vasilii Alferov

SRE инженер компании Cloudflare. Сисадмин со стажем >20 лет
https://www.linkedin.com/in/valferov/

Рассказ о бесконечном потоке оповещений, как мы успеваем следить за всем что сломалось

Через датацентры Cloudflare проходит 10% всех HTTP запросов в Интернет. Используя 15000 физических серверов, размещенных более чем в 160 датацентрах по всему миру мы предоставляем более 100 сервисов нашим клиентам, большинство из которых нам не платят. Казалось бы что тут может сломаться? Много всего. Мы получаем более 20’000 “сырых” оповещений в день. Большая часть из них не доходит до оператора, но и оставшихся более чем достаточно, чтобы сделать дежурства “веселыми”.
Доклад о том как мы справляемся с бесконечным потоком оповещений. Как отличаем важные от мелких, как улучшаем работу системы. И конечно о том каких дров мы успели наломать в процессе.