Аномальное отображение количества запросов и объема трафика
Затронуто: Raw Access Logs (RAL), Real-time Analytics (RTA)
Обнаружена аномалия отображения количества запросов и трафика в разделе "Анатилитка" портала Multidesk. Аномалия проявляется как отображение увеличенного количества запросов/объема трафика относительно реальных значений. По предварительной оценке, возникновение аномалии произошло 08.09 в ~16:20 МСК. Влияния на обработку запросов не оказывается. Занимаемся изучением причин аномального отображения.
Инцидент выявлен.
Причина инцидента выявлена.
Причина инцидента выявлена, применено исправление. Наблюдаем восстановление отображения корректных значений.
Дополнительно затронут сервис Raw Access Logs - логи, выгруженные в сервис в период с 16:20 МСК 08.09 по 14:28 МСК 09.09 также содержат в себе аномально высокое количество запросов, не соответствующее актуальному состоянию. Дополнительно затронуто: Raw Access Logs (RAL).
Исправление применено, ведётся мониторинг.
На текущий момент влияние проблемы устранено, отображение статистики и выгрузка логов сервисом RAL происходит корректно. Продолжаем мониторинг состояния технических систем. Очистить логи, уже выгруженные сервисом RAL в хранилища лог-файлов за этот промежуток времени, не представляется возможным технологически - аномальное количество запросов в них сохранится. Аномальное отображение в мониторинге Платформы будет скорректировано до 23.09. Влияния на итоговый биллинг оказано не будет.
Инцидент устранён.