Как я нагрел 1cloud на 100к

Недавно я научился управлять активностью серверов, используя API провайдера. Теперь извлекаю выгоду в 30% из простоя мощностей.

Ввиду специфики нашего проекта мы имеем большое (50+) количество арендованных Linux-серверов, которые фактически используются с 8 утра до 12 ночи ежедневно. Мы не раз меняли провайдера таких серверов. Сейчас работаем с 1cloud.ru. Изучив условия предоставления услуг сервисом, я заметил, что при выключенном сервере в независимости от выделенного ему объема ресурсов оплачиваются только зарезервированное этим сервером дисковое пространство и лицензии/доп. услуги. Учитывая, что 1cloud предлагает REST API, через который можно выполнять любые действия, доступные в панели, пришла мысль автоматизировать включение/выключение серверов, чтобы они были неактивны в течение 8 часов в ночное время. Таким образом удалось снизить стоимость аренды серверов почти на 30%.

Я решил поделиться опытом реализации этой задачи. Т.к. я новичок в работе с API, материал ниже ориентирован на людей, не имеющих опыта написания скриптов, работы с Windows Scheduler, Linux Cron и cURL. По этой причине здесь много скриншотов и общей информации. Тем же, кто знаком с данными инструментами, но не имеет времени на изучение документации к API 1cloud, могут быть полезны готовые скомпилированные примеры скриптов для Windows и Linux ниже. Я буду приводить примеры каждого действия для обоих семейств ОС.

Прежде всего, необходимо пройти авторизацию для доступа к API 1cloud. Для этого используется вставляемый в header запроса уникальный закрытый ключ (token), передаваемый через SSL. Сгенерировать ключ доступа к API можно на в настройках панели управления. После генерации ключа скопируем его для вставки в компилируемый запрос к API:

1. Компиляция запроса к API:

Для обращений к API можно использовать различные инструменты. В примере ниже я покажу, как это сделать с помощью curl на Windows и Linux

Запрос обязательно должен включать ключ авторизации. Для включения сервера предусмотрено значение PowerOn входных параметров действий над сервером. Важно отметить, что выключить сервер можно двумя способами:
а. Средствами ОС (аналог Завершения Работы для Windows или halt для Windows)
б. По питанию (аналог нажатия кнопки отключения питания)

Для каждого из способов в API 1сloud используются значения параметров ShutDownGuestOS и PowerOff соответственно. Важно отметить, что для работы функции выключения средствами ОС на машине должны быть установлены VMware Tools, чтобы сервер мог принимать команду на завершение работы со стороны гипервизора. В противном случае будет доступно только отключение по питанию. Насколько я заметил, для стандартных шаблонов ОС, предлагаемых 1cloud, VMware Tools предустановлены.

Ниже мы будем использовать вариант выключения серверов средствами ОС как более корректный сценарий завершения работы системы.

Прежде всего, необходимо убедиться в наличии утилиты curl на машине, с которой будут запускаться скрипты:

Windows: загрузить бинарные файлы curl и распаковать скачанный архив.
Linux: в большинстве современных Linux-систем curl уже присутствует. Вы также можете установить его из репозиториев для вашего дистрибутива.

Теперь можно приступить к компиляции запроса в соответствии с документацией к API 1cloud. Для начала создадим два файла скриптов в формате .bat (CMD) или .ps1 (PowerShell) для Windows или .sh для Linux. Первый скрипт для включения машины, второй – для выключения.

Включение сервера:

В начале скрипта необходимо указать путь до расположения распакованной утилиты curl. Затем нужно добавить POST-запрос на включение сервера, содержащий ключ доступа к API, полученный в панели управления 1cloud.ru и уникальный идентификатор конкретной машины (ссылку на страницу сервера в панели управления).

Можно включить в один скрипт задачи для нескольких серверов, как я и сделал в примере ниже, разделив запросы символом & (&& для Linux). В конце скрипта для Windows я явно добавил параметр exit 0 для автоматического завершения работы скрипта в случае успешной отработки. Этот параметр необязателен.

Жирным ниже выделены значения, которые вам необходимо отредактировать: путь до утилиты curl, токен авторизации (Authorization: Bearer) и идентификатор сервера (https://api.1cloud.ru/Server)

Windows (.bat/.ps1):

"C:\Program Files\curl\bin\curl" -X POST -H "Content-Type:application/json" -H "Authorization: Bearer 549017cd2587e68f23b32e87c39037a09c74a0d8f3675be9e1ddf8916bd78544" "https://api.1cloud.ru/Server/390573/Action" -d "{\"Type\":\"PowerOn\"}" & "C:\Program Files\curl\bin\curl" -X POST -H "Content-Type:application/json" -H "Authorization: Bearer 549017cd2587e68f23b32e87c39037a09c74a0d8f3675be9e1ddf8916bd78544" "https://api.1cloud.ru/Server/390572/Action" -d "{\"Type\":\"PowerOn\"}" & exit 0

Linux (.sh):

curl -X POST -H "Content-Type:application/json" -H "Authorization: Bearer 549017cd2587e68f23b32e87c39037a09c74a0d8f3675be9e1ddf8916bd78544" "https://api.1cloud.ru/Server/390573/Action" -d "{\"Type\":\"PowerOn\"}" && curl -X POST -H "Content-Type:application/json" -H "Authorization: Bearer 549017cd2587e68f23b32e87c39037a09c74a0d8f3675be9e1ddf8916bd78544" "https://api.1cloud.ru/Server/390572/Action" -d "{\"Type\":\"PowerOn\"}"

Сохраним созданный скрипт на включение серверов в формате файла .bat (для CMD) или .ps1 (для PowerShell) и протестируем его работоспособность, запустив полученный исполняемый файл. Даже если серверы уже включены – скрипт отработает, и в панели 1cloud мы увидим информацию о задании на включение

При успешной отработке скрипта должен быть получен ответ следующего вида:

Информация о выполненной задаче отобразится соответственно и в панели управления 1cloud:

Выключение сервера

Создание скрипта выключения серверов полностью аналогично скриптам на включение. В примере ниже я использую опцию выключения тех же двух серверов средствами ОС (ShutDownGuestOS), т.к. необходимые мои серверы созданы из стандартных шаблонов, предлагаемых 1cloud, в которых VMware Tools уже предустановлены.

Windows:

" C:\Program Files\curl\bin\curl" -X POST -H "Content-Type:application/json" -H "Authorization: Bearer 549017cd2587e68f23b32e87c39037a09c74a0d8f3675be9e1ddf8916bd78544" "https://api.1cloud.ru/Server/390573/Action" -d "{\"Type\":\"ShutDownGuestOS\"}" & " C:\Program Files\curl\bin\curl " -X POST -H "Content-Type:application/json" -H "Authorization: Bearer 549017cd2587e68f23b32e87c39037a09c74a0d8f3675be9e1ddf8916bd78544" "https://api.1cloud.ru/Server/390572/Action" -d "{\"Type\":\"ShutDownGuestOS\"}" & exit 0

Linux (.sh):

curl -X POST -H "Content-Type:application/json" -H "Authorization: Bearer 549017cd2587e68f23b32e87c39037a09c74a0d8f3675be9e1ddf8916bd78544" "https://api.1cloud.ru/Server/390573/Action" -d "{\"Type\":\" ShutDownGuestOS \"}" && curl -X POST -H "Content-Type:application/json" -H "Authorization: Bearer 549017cd2587e68f23b32e87c39037a09c74a0d8f3675be9e1ddf8916bd78544" "https://api.1cloud.ru/Server/390572/Action" -d "{\"Type\":\" ShutDownGuestOS \"}"

После сохранения и запуска .bat/.ps1 скрипта можно увидеть результат его выполнения в панели управления:

Автоматическое выполнение скриптов по расписанию

Windows:

Автоматизировать исполнение скриптов можно, создав простую задачу в Планировщике Задач Windows и указав время и частоту выолнения задачи, а также путь до файла скрипта. Ниже приведен пример для задачи на включение серверов.

Linux:

Аналогом Планировщика Задач Windows в Linux-системах выступает cron. После создания файлов скриптов на Linux-машины необходимо разрешить скрипту исполнение, выполнив команду: chmod –X /путь/до/скрипта.sh Добавим строки для обоих скриптов в список заданий cron, расположенный по пути /etc/crontab

Указанные мной параметры (слева направо): - Ежедневно в 00:00 выполнять от имени пользователя root скрипт /root/poweroff.sh - Ежедневно в 08:00 выполнять от имени пользователя root скрипт /root/poweron.sh

Заключение:

В результате манипуляций выше мы получили автоматизированные сценарии включения/выключения серверов 1cloud по расписанию, уменьшив среднюю стоимость аренды серверов в месяц примерно на 30% (при неактивности в течение 8 часов).

0
2 комментария
Kfmook

"скомпилированные примеры скриптов для Windows и Linux ниже"
Только у меня бомбит, что скрипты нужно компилировать?

Ответить
Развернуть ветку
Oleg Siber
Автор

Ruslan, я понимаю ваше смущение и ценю внимание к словам. Как я упоминал в начале статьи, они написана для людей без опыта работы с файлами скриптов и консолью. Да и слово "компиляция" может использоваться в разных контекстах, не только сборки пакетов из исходников. Я вот называю любую множественную копипасту в одно место компиляцией, также как и DJ-сет. Такой скрипт нельзя называть написанным. Ну разве что составленным, но слово составлять дурацкое, нет?

Ответить
Развернуть ветку
-1 комментариев
Раскрывать всегда