VK Cloud выбрал ClickHouse для хранения трейсов в Cloud Tracing

VK Cloud опубликовала техническое обоснование выбора ClickHouse в качестве бэкенда для Cloud Tracing — сервиса распределённой трассировки, который принимает спаны по протоколу OpenTelemetry и отдаёт их через Jaeger-совместимое API. При проектировании архитекторы сравнивали шесть вариантов хранилищ: Cassandra, Elasticsearch, Kafka, gRPC-плагин, Badger и memory, но для публичного облака подошли только Cassandra, Elasticsearch и ClickHouse.

Сервис должен обрабатывать потоки от сотен клиентов, хранить десятки терабайт телеметрии и изолировать данные проектов друг от друга при ограничении в 1 МБ/с на проект. Выбор хранилища для облачной трассировки оказался сложнее, чем просто найти базу для быстрой записи спанов.