В докладе мы разберём, что такое распределенный трейс, из чего он состоит и как собрать все его части воедино, чтобы получить цельное представление о запросе. Обсудим, почему сбор и хранение всех трейсов не всегда оправданы и как семплирование помогает снизить нагрузку на систему без потери ключевой информации. Рассмотрим два основных подхода — head-based- и tail-based-семплирование, разберём их принципы работы, алгоритмы реализации, преимущества и ограничения.

Отдельное внимание уделим масштабированию: почему при увеличении нагрузки нельзя «просто добавить серверов» в бэкенд мониторинга, какие проблемы возникают при объединении фрагментов трейсов и как принимать решения о семплировании в условиях неполного контекста. Завершим доклад разбором архитектур решений для масштабирования семплирующего бэкенда и примеров их реализации в реальных системах мониторинга.