Яндекс.Метрика
Постмортем

Инцидент с доступностью сервиса 18 августа 2025

Разбор причин и хронология инцидента с деградацией производительности сервиса 18 августа 2025 года.

Резюме инцидента

Дата и время18.08.2025 в 10:53 (UTC+3)
ПричинаОбновление с оптимизацией @упоминаний, вышедшее 11.08.2025, привело к сильной нагрузке на старый запрос
Уровень серьёзностиВысокий
Продолжительность43 минуты
Пострадавшие системыapp.pachca.com — веб, мобильные и компьютерные версии
Пострадавшие пользователиВсе пользователи

Что произошло

18 августа 2025 в 10:53 МСК сервис Пачка начал испытывать деградацию скорости работы. Причиной стало обновление с оптимизацией @упоминаний, выпущенное неделей ранее (11.08.2025), которое привело к сильной нагрузке на старый запрос. Деградация длилась 43 минуты.

Потери данных не произошло.

Мы приносим извинения за этот инцидент. Ниже — хронология, анализ причин и меры, которые мы принимаем.


Хронология

Все отметки времени — UTC+3.

  • 10:53 – Получены первые массовые обращения по деградации скорости работы сервиса.
  • 10:55 – Команда начала расследование и сужение проблемы.
  • 11:36 – Полный доступ к сервису восстановлен.

Цепочка причин

  1. Почему сервис деградировал? — Старый запрос к базе данных получил аномально высокую нагрузку.
  2. Почему нагрузка выросла? — Обновление от 11.08.2025 с оптимизацией @упоминаний изменило паттерн обращений, что привело к перегрузке старого запроса.
  3. Почему проблема проявилась не сразу? — Нагрузка накапливалась постепенно в течение недели после обновления и достигла критического уровня 18.08.2025.

Что мы делаем, чтобы это не повторилось

Немедленные меры

  • Временное ограничение @упоминаний. Функциональность @упоминаний была ограничена для снятия нагрузки и восстановления сервиса.

Долгосрочные меры

  • Исправление поиска @упоминаний. Исправляем проблемы поиска @упоминаний в чатах и тредах.
  • Протокол реагирования на инциденты. Внедряем более системный протокол реагирования для ускорения диагностики и восстановления.
  • Оптимизация производительности. Продолжаем работы по оптимизации производительности и стабильности мессенджера.