Стендап Сьогодні 📢 Канал в Telegram @stendap_sogodni

🤖🚫 AI-free content. This post is 100% written by a human, as is everything on my blog. Enjoy!

17.10.2022

Як помітити поламку швидко? Налаштувати автоматичне спостереження

😬😱😳 Нема нічого гірше, ніж помітити, що на продакшні щось поламалось, і причому давно. А ти це міг помітити, але не помітив аж до непристойно пізнього часу.

В мене найстрашніший випадок був з блогом. Для редизайну я обрав несистемний шрифт, але забув під’єднати деякі варіанти. Та всі відвідувачі бачили весь текст на блозі жирним курсивом! Я ж цього не знав, тому що такий шрифт був встановлений в мене в системі, тому бачив текст нормальним. Так от, я це помітив майже через рік, і те, коли хтось прислав неповʼязаний з цим багом скриншот. Ото було сорому.

Але ж пропустити поламку на вісім годин це теж дуже неприємно.

У таких випадках завжди здається, що ситуацію було легко виправити — добре перевірити, бути уважним, ще щось. Я думаю, що це хибний підхід, хоч теоретично дієвий.

Натомість треба думати про автоматичне спостереження, а також системи автоматичного сповіщення, такі, як PagerDuty. Така система буде писати вам СМС, дзвонити, нагадувати всіма можливими способами, доки ви не підтвердите, що прийняли екстрену ситуацію.

Ну, й впроваджувати хелс-чек на кожне місце, де такі ситуації виникають.