Поветрие, шоле?
"Привет, ночью 7 августа дыбр вырубился примерно на пять часов. Приносим свои извинения.
Оказалось что мы не уследили на размером базы данных и она вместе с другими данными полностью забила рабочий диск, из-за база вырубилась а за ней как следствие упал весь дыбр."
В субботнее утро в 08:30 (в страшную рань для человека, заснувшего около четырех утра и ни в какой форме не планировавшего выходить на работу в выходные) меня разбудил телефон, нежно мурлыкавший вступление к "Воспоминанию о былой любви". Прокляв себя за то, что я забыл выключить будильник, я перевернулся мордой к телефону и обнаружил, что это не я склеротик, а звонит мой тимлид.
-- Але, -- прохрипело спросонья чудовище, не успевшее мутировать из Лешего в человека.
-- Привет. Ты спишь, что ли?
-- Угу.
-- Ща проснешься. У нас 229-й сервак все боевые базы потерял.
И вот тут я реально проснулся!!!
Оказалось, что *Голосом Левитана*: "Двенадцатого августа двадцать третьего года, в 04:00:21 боевой серверный кластер БД, на котором находится база RU_WMS, переполнил Transaction Log в служебной базе tempdb и окуклился. Глобальная команда DBA ведет тяжелые и кровопролитные бои по возвращению сервера в боевой режим."
После того, как сервак пинками с применением ТЯО таки загнали в рестарт, и после всех реверансов, положенных после выхода каличной машинки из глубочайшего нокаута, я еще два часа рыскал по своим сервисам, которые, потеряв соединение с болезным, так и не смогли его восстановить и обильно орошали логи на виртуалках красненьким. На мой монитор контроля смотреть было откровенно страшно. Самое неприятное, что я так и не смог выяснить, что именно переполнило ТрансЛог. Одно хорошо, что реальный простой для склада составил примерно полтора часа. С учетом низкой загрузки -- не самое страшное, что в природе бывает.
А заснуть обратно после всего этого я так и не смог...
Отредактировано: 13 Авг 2023, 11:46.
Оказалось что мы не уследили на размером базы данных и она вместе с другими данными полностью забила рабочий диск, из-за база вырубилась а за ней как следствие упал весь дыбр."
В субботнее утро в 08:30 (в страшную рань для человека, заснувшего около четырех утра и ни в какой форме не планировавшего выходить на работу в выходные) меня разбудил телефон, нежно мурлыкавший вступление к "Воспоминанию о былой любви". Прокляв себя за то, что я забыл выключить будильник, я перевернулся мордой к телефону и обнаружил, что это не я склеротик, а звонит мой тимлид.
-- Але, -- прохрипело спросонья чудовище, не успевшее мутировать из Лешего в человека.
-- Привет. Ты спишь, что ли?
-- Угу.
-- Ща проснешься. У нас 229-й сервак все боевые базы потерял.
И вот тут я реально проснулся!!!
Оказалось, что *Голосом Левитана*: "Двенадцатого августа двадцать третьего года, в 04:00:21 боевой серверный кластер БД, на котором находится база RU_WMS, переполнил Transaction Log в служебной базе tempdb и окуклился. Глобальная команда DBA ведет тяжелые и кровопролитные бои по возвращению сервера в боевой режим."
После того, как сервак пинками с применением ТЯО таки загнали в рестарт, и после всех реверансов, положенных после выхода каличной машинки из глубочайшего нокаута, я еще два часа рыскал по своим сервисам, которые, потеряв соединение с болезным, так и не смогли его восстановить и обильно орошали логи на виртуалках красненьким. На мой монитор контроля смотреть было откровенно страшно. Самое неприятное, что я так и не смог выяснить, что именно переполнило ТрансЛог. Одно хорошо, что реальный простой для склада составил примерно полтора часа. С учетом низкой загрузки -- не самое страшное, что в природе бывает.
А заснуть обратно после всего этого я так и не смог...
Отредактировано: 13 Авг 2023, 11:46.
