Почему мы убрали Kafka из горячего пути
Разбор того, как перенос checkpoint-журнала из брокера в локальный WAL-хранилище снизил P99 латентность с 48ms до 12ms на кластере из 240 узлов.
12 мин · читать
/ блог · 142 публикации · обновлено 12.06.2025
Блог SyncOps
Инсайты из мира данных и DevOps
Технические разборы, производственные кейсы и честные отзывы. Пишем о том, что ломается в проде и как это чинить — без маркетинговой воды.
Поиск
Найдите нужный разбор
Популярные запросы: checkpoint · WAL-журнал · kafka → s3 · конфликт-резолвинг
Свежее
Последние публикации
Три самых новых материала. Каждый прошёл через внутренний код-ревью и проверку на реальном проде.
Идемпотентность как контракт, а не фича
Как проектировать идемпотентное применение на стороне цели, чтобы exactly-once не превращалось в «надеемся, что не задублится». С примерами мерджеров.
9 мин · читать
Финтех-кластер: 8 недель до полного отключения legacy
История миграции платёжного ядра на SyncOps: 4.2M msg/s, ноль потерянных транзакций и что пошло не так на третьей неделе.
15 мин · читать
Разделы
Категории
Как устроено ядро
Плоская модель пайплайнов, WAL-журнал, vector clocks и то, почему мы против «магических» репликаторов. 38 статей.
Практики без боли
Чек-листы, конфиги и паттерны: от алертинга на lag до корректного масштабирования. 52 статьи.
Голоса из прода
Кейсы клиентов с цифрами: throughput, uptime и что они сделали иначе. 52 истории.
Топ июня
Популярные статьи месяца
По числу прочтений за 30 дней. Спойлер: про конфликты и про checkpoint снова в топе.
Vector clocks без боли: когда их реально нужно
Когда логическая версия достаточно, а когда без vector clocks не обойтись. Разбираем на трёх реальных пайплайнах.
Архитектура · 11 мин
Checkpoint-age: метрика, которую все игнорируют
Почему по lag можно решить, что всё отлично, пока checkpoint не уехал на 40 секунд назад. Как настроить алерт.
Best Practices · 7 мин
Гибрид облака и DC: что мы сломали в первую неделю
Разбор инцидента при миграции части узлов в on-prem: рассинхрон реплик и как это ловить до пользователя.
Отзывы · 13 мин
Рассылка · раз в две недели
Два письма в месяц. Ноль спама
Отбираем один технический разбор и один кейс из прода. Пишем только о том, что реально поможет в проде — без «10 инструментов для данных».
4 380 инженеров уже в списке · отписка в один клик