Я задолбался пропускать падения моих сервисов и написал HealthCheck-бота

Пишешь боту имя своего домена и бот проверяет его раз в минуту.

К идее создания бота я пришёл при запуске другого продукта для проверки резюме на английском -

В день запуска всё пошло не так😎

Ошибка #1

Большинство сервисов работали на одном сервере, а это

Запускал я довольно требовательный сервис к ресурсам - используется OCR (распознавание символов на pdf файле), алгоритм категоризации, нейронная сеть для определения насколько резюме соответствует профессии найденной по ключевым словам. В общем жирный сервис, который ест много ресурсов процессора и при превышении лимитов - он зависает намертво вместе с сервером.

Не кладите яйца в одну корзину

Ошибка #2

После запуска я не особо следил за сервисом, занимался своими делами.

В итоге проблему с виртуальной машиной, где крутятся все мои сервисы я заметил только по комментариям от пользователей на ProductHunt.

А завис не только сервис, а вообще всё!

Приходилось перезагружать сервер и поднимать все сервисы, чтобы они ожили. Спасибо боту @IsBotDownBot - я понимал когда падали мои боты😂

Кот из дома - мыши в пляс!

Ошибка #3

В сервисе не было ограничений на количество загрузок резюме - в итоге кто-то отчаянно пытался получить высокий балл от https://checkcv.info/ и загружал резюме около сотни раз, это нагружало сервер и тоже приводило к падению сервера.

Берегись козла спереди, лошади сзади, а лихого человека со всех сторон.

Решение

После 5 падений сервиса (довольно позорно, но что поделать) я начал искать быстрое решение для мониторинга, желательно бесплатное.

Небольшой ресерч не дал простого и быстрого решения, чтобы проверять свои сервисы по доменному имени, поэтому я написал своё решение - https://t.me/YourDomainHealthCheckBot

Просто отправляешь боту свой домен - например checkcv.info - бот сам определяет доступен ли сервис по HTTPS или HTTP и начинает его пинговать раз в минуту.

В случае ошибки или недоступности сайта - бот отправит сообщение об ошибке.

Как только сервис вернется к жизни - бот сообщит и об этом.

Вот в общем-то и все, так же можно редактировать свой список сайтов.

Ещё можно пингануть сайт один раз.

Кто-то подсказал, что этим ботом можно поднимать свои Heroku-сервисы к жизни.

С тех пор как запустил бота сервис пока не падал, но если упадёт узнаю об этом в течение минуты (если не упадёт сервер с ботом😏).

Буду рад услышать фидбек или предложения по улучшению -

0
190 комментариев
Написать комментарий...
Nikita Rogatov

Есть же нормальные решения по мониторингу, зачем бот?

Ответить
Развернуть ветку
Коммунист

Ну основная задача - быстро уведомить ответственных, что нужно их внимание.

Что может подойти лучше, чем мессенджер? Слак и прочие рабочие мессенджеры используются в рабочее время.
Почта - ну вы понели.
СМС - сложнее, надо дополнительно проверять баланс, да и многие уже смс игнорируют.
Звонить - то же самое.

Из мессенджеров которые используют айти специалисты - это телеграм без вариантов.

Так что как ни посмотри, алерт в телеге - это самый простой и быстрый способ.

Ответить
Развернуть ветку
himik genuine

Вообще человек про другое спрашивал. У нас вон заббикс пишет в телегу, так что нормальные системы мониторинга и боты не взаимоисключающие явления.

Ответить
Развернуть ветку
Коммунист

Человек спросил зачем бот - я привёл аргументы, почему уведомления в телеге через бота это приемлемо.
Понятно, что за ботом может быть какая угодно система мониторинга

Ответить
Развернуть ветку
187 комментариев
Раскрывать всегда