Перейти до вмісту

Побудувала моніторинг хоста з dead man's switch

Побудувала моніторинг за принципом dead man's switch, який надсилає пінг, лише поки пам'ять і диск у нормі, тож хост у погіршеному стані здіймає тривогу своїм мовчанням, — і виявила шість імен змінних зі словом «free» там, де перевірка правильно вимірювала «available»: на машині з 464 МБ ці значення різняться на порядок.

хост, що б'є на сполох, замовкаючи

Ситуація. Вичерпання пам’яті та місця на диску — два важливі ризики для хоста з 464 МБ пам’яті, на якому працюють git‑сервер і вебсервер. Моніторинг може виявляти тривожні ознаки, хоча час їх появи залежить від навантаження й умов спостереження.

Завдання. Хостові потрібна була сигналізація, яка працює й тоді, коли сам хост не працює, — а це відкидає все, що мусить надіслати повідомлення в момент збою.

Дія. Рішення — dead man’s switch на таймері. Кожні п’ятнадцять хвилин, із випадковим зсувом, невеликий скрипт вимірює доступну пам’ять і вільне місце на диску й пінгує зовнішній сервіс, лише якщо обидва показники вищі за свої пороги. Тривогу здіймає тиша. Машина, у якої скінчилася пам’ять, пропала мережа або яка перестала завантажуватися, дає точнісінько той самий сигнал, що й несправна, — це правильна поведінка, і саме тому обрано такий підхід, а не агента, який звітує про стан. Вимірюється доступна пам’ять, а не вільна, і ця відмінність виявилася найповчальнішою частиною роботи: скрипт від початку читав правильний стовпчик, тоді як шість імен змінних навколо нього казали «free». На справному Linux‑хості вільної пам’яті майже немає, бо ядро віддає незайняту пам’ять під кеш, тож читач, який звіряв би ці імена з порогом у десять відсотків, побачив би дванадцять вільних мегабайтів на машині з 464 МБ, вирішив би, що перевірка зламана, і виправив би її зміною в один символ, — а та перетворила б робочу сигналізацію на таку, що постійно перебуває за порогом і яку менш ніж за тиждень заглушать.

Результат. Хост отримав сигналізацію, яка спрацьовує за відсутності очікуваного сигналу, а оманливі назви виправлено. Отриманий сигнал підтверджує, що скрипт виконався, а перевірки доступної пам’яті й вільного місця на диску пройдено за встановленими порогами; він не засвідчує загальної справності хоста чи того, що сайт обслуговує запити.

  • Покажчик рівня пального, термометр, позначка температури
    Фото: u_ieeicob7xz / Pixabay
  • Будильник із двома дзвінками
    Фото: domeckopol / Pixabay

Застосуйте цей досвід у своєму проєкті

Використайте «Побудувала моніторинг хоста з dead man's switch» як відправну точку для схожого завдання у вашій організації. Послуги, що стоять за цією роботою, доступні й для вашого проєкту. Уся конфігурація записана у файлах, тож її можна відтворити точно, і вона не живе лише в чиїйсь голові.

Переглянути наші послуги Зв'язатися з нами

Дізнайтеся, що привело до результату

Прочитайте про ситуацію, рішення та результат цього прикладу. Ми можемо обговорити, що відповідає вашим умовам, а що потребує іншого підходу. Побудувала моніторинг хоста з dead man's switch — хост, що б'є на сполох, замовкаючи

Переглянути наші послуги Зв'язатися з нами

Одна частина довшого переліку — і він увесь на цьому сайті.

Кожен запис написано однаково: ситуація, завдання, що ми зробили і що змінилося.

Переглянути весь перелік

Визначте потрібне покращення

Опишіть шлях розгортання, експлуатаційні ризики та чергову команду. Ми можемо визначити зміну з перевірками, шляхом відновлення та чіткою відповідальністю.

Дивитися, скільки це коштує Зв'язатися з нами

Чи отримаєте ви сповіщення, якщо сервер замовкне?

Запитайте про рішення в роботі «Побудувала моніторинг хоста з dead man's switch». Ви говоритимете з людьми, які можуть пояснити роботу й оцінити ваш проєкт.

Переглянути наші послуги
welcome@engineer.company +45 50 10 61 84 Копенгаген, Данія
QR-код сторінки «Побудувала моніторинг за принципом dead man's switch, який надсилає пінг, лише поки пам'ять і диск у нормі, тож хост у погіршеному стані здіймає тривогу своїм мовчанням, — і виявила шість імен змінних зі словом «free» там, де перевірка правильно вимірювала «available»: на машині з 464 МБ ці значення різняться на порядок.»
Візьміть цю сторінку із собоюhttps://platform.engineer.company/uk/portfolio/built-dead-mans-switch-host-monitoring/