Перейти к содержимому
Назад

Ночь зелёных индикаторов

Попросил Fable расследовать инцидент, из-за которого весь вечер и всю ночь упала навзничь и лежала часть важной инфраструктуры уютной хоумлабы. При этом все сирены и вотчдоги, сговорясь, молчали, показывая отсутствие проблем.

Почему Fable вдруг перешёл на высокий слог — осталось загадкой. Однако есть подозрение, что одной из причин, затронувших лирические струны его души, было позитивное подкрепление «обосрались» в задании. Стараясь не отсвечивать, он снарядил специального агента-следователя (которого почему-то называл форензик), по результатам работы которого подготовил артефакт — я прям зачитался.

Скриншот артефакта-постмортема «Ночь зелёных индикаторов»

Опыт в сухом остатке

  1. Если не установить лимиты для контейнеров, всегда найдётся паршивая овца, которая нагадит всему стаду.
  2. Если у контейнера политика перезапуска unless-stopped, в редких случаях его может придушить служба, оживляющая умерший dockerd; при этом контейнер будет считаться остановленным вручную и обратно не запустится. always теперь — наше всё.
  3. Усаживать на хост контейнер, отдающий метрики для мониторинга этого хоста в виде retained MQTT-топиков без контроля TTL, — плохая идея.

Поделиться постом:

Предыдущий пост
Neurio
Следующий пост
pimenov.ai