Центр сертификации Kubernetes получил 100 тысяч запросов одновременно

Компания Clearway разобрала случай, когда центр сертификации (ЦС) Kubernetes получил около 100 тысяч запросов на TLS-сертификаты одновременно после аварии и восстановления инфраструктуры. При штатной нагрузке в 10–11 запросов в секунду ЦС стал узким местом: запросы начали ждать, уходить в таймауты и повторяться.

Простое масштабирование ЦС не решило проблему — потребовалось разделить выпуск и потребление сертификатов. Это привело к новой задаче: безопасному хранению сотен тысяч сертификатов и закрытых ключей.