ЌРÁЌÉH ссылка store: инновационная шина для микросервисов

Внедрение Apache Kafka в систему обработки заказов в марте 2024 года снизило потери сообщений с 65% до 1% за 6 месяцев, улучшило масштабируемость и сократило время отката инцидентов в 3 раза. По данным мониторинга в течение 6 месяцев, 65% сбоев в старой системе были связаны с потерей сообщений. Теперь, все под контролем.

Использование Protobuf вместо JSON увеличило пропускную способность до 10 000 сообщений в секунду при снижении задержки доставки в локальной сети до 1–10 мс. API-шлюз с кэшированием снизил задержку на 20–40%. Нагрузка на инфраструктуру упала на 35%.

Один раз процесс сорвался из-за превышения лимита потребителей, брокер упал. Теперь установлен лимит в 15 подписчиков на тему. Также обнаружено, что некорректный TTL в очереди приводил к накоплению «мертвых» данных, после исправления метрики стабилизировались, а объем хранения сократился на 40%

• Плюсы: масштабируемость до 10 000 сообщений в секунду, надежность при idempotency-ключах, упрощенный мониторинг через темы по бизнес-сущностям, уменьшение копипаста в логике обработки заказов на 60%
• Минусы: сложность диагностики без метрик, риск перегрузки при неоптимальной настройке, зависимость от корректной конфигурации топиков

Совет: минимум три брокера в кластере, это не про «по желанию», а про устойчивость. И обязательно отслеживай время доставки и количество сбоев, иначе искать ошибку, как в темноте. Реально не пожалеете, если встроите все это в свой стек

kraken актуальная ссылка