Logbroker: сбор и поставка больших объёмов данных

Современные высоконагруженные сервисы генерируют огромное количество данных. Статистические расчёты на их основе помогают в аналитике и принятии продуктовых решений. Задача сбора этих данных существенно усложняется, если их генерируют десятки тысяч серверов сотнями терабайт в день. Logbroker позволяет решать задачу сбора распределённо. В докладе мы рассмотрим ключевые особенности системы — возможность переживать отключение датацентра, поддержку семантики exactly once и потоков реального времени.