Если события пишутся один раз и потом читаются только агрегатами, это прямо задача для ClickHouse. Месяц таких событий там сжимается в единицы гигабай...

В Python для такого берут pydantic, и после него без схемы конфига уже неуютно. Приду посмотреть, как это выглядит в Ruby

В Python проблема «какая версия интерпретатора на сервере» ровно та же, и все как-то живут через Docker или venv. С Ruby то же самое: rbenv плюс Gemfi...

Сделал на fork по примеру Тимура, 8 процессов. Было 2 часа 10 минут, стало 24 минуты, в top теперь заняты все ядра. Гигантский файл и правда нашёлся, ...

Переделал по образцу kirill_spb, пробелов после двоеточия у нас нет, так что фильтр работает. Суточный файл теперь проходит за 40 секунд и держит мень...