Разработка Oleg Siber
246

Как я нагрел 1cloud на 100к

Недавно я научился управлять активностью серверов, используя API провайдера. Теперь извлекаю выгоду в 30% из простоя мощностей.

В закладки

Ввиду специфики нашего проекта мы имеем большое (50+) количество арендованных Linux-серверов, которые фактически используются с 8 утра до 12 ночи ежедневно. Мы не раз меняли провайдера таких серверов. Сейчас работаем с 1cloud.ru. Изучив условия предоставления услуг сервисом, я заметил, что при выключенном сервере в независимости от выделенного ему объема ресурсов оплачиваются только зарезервированное этим сервером дисковое пространство и лицензии/доп. услуги. Учитывая, что 1cloud предлагает REST API, через который можно выполнять любые действия, доступные в панели, пришла мысль автоматизировать включение/выключение серверов, чтобы они были неактивны в течение 8 часов в ночное время. Таким образом удалось снизить стоимость аренды серверов почти на 30%.

Я решил поделиться опытом реализации этой задачи. Т.к. я новичок в работе с API, материал ниже ориентирован на людей, не имеющих опыта написания скриптов, работы с Windows Scheduler, Linux Cron и cURL. По этой причине здесь много скриншотов и общей информации. Тем же, кто знаком с данными инструментами, но не имеет времени на изучение документации к API 1cloud, могут быть полезны готовые скомпилированные примеры скриптов для Windows и Linux ниже. Я буду приводить примеры каждого действия для обоих семейств ОС.

Прежде всего, необходимо пройти авторизацию для доступа к API 1cloud. Для этого используется вставляемый в header запроса уникальный закрытый ключ (token), передаваемый через SSL. Сгенерировать ключ доступа к API можно на в настройках панели управления. После генерации ключа скопируем его для вставки в компилируемый запрос к API:

1. Компиляция запроса к API:

Для обращений к API можно использовать различные инструменты. В примере ниже я покажу, как это сделать с помощью curl на Windows и Linux

Запрос обязательно должен включать ключ авторизации. Для включения сервера предусмотрено значение PowerOn входных параметров действий над сервером. Важно отметить, что выключить сервер можно двумя способами:
а. Средствами ОС (аналог Завершения Работы для Windows или halt для Windows)
б. По питанию (аналог нажатия кнопки отключения питания)

Для каждого из способов в API 1сloud используются значения параметров ShutDownGuestOS и PowerOff соответственно. Важно отметить, что для работы функции выключения средствами ОС на машине должны быть установлены VMware Tools, чтобы сервер мог принимать команду на завершение работы со стороны гипервизора. В противном случае будет доступно только отключение по питанию. Насколько я заметил, для стандартных шаблонов ОС, предлагаемых 1cloud, VMware Tools предустановлены.

Ниже мы будем использовать вариант выключения серверов средствами ОС как более корректный сценарий завершения работы системы.

Прежде всего, необходимо убедиться в наличии утилиты curl на машине, с которой будут запускаться скрипты:

Windows: загрузить бинарные файлы curl и распаковать скачанный архив.
Linux: в большинстве современных Linux-систем curl уже присутствует. Вы также можете установить его из репозиториев для вашего дистрибутива.

Теперь можно приступить к компиляции запроса в соответствии с документацией к API 1cloud. Для начала создадим два файла скриптов в формате .bat (CMD) или .ps1 (PowerShell) для Windows или .sh для Linux. Первый скрипт для включения машины, второй – для выключения.

Включение сервера:

В начале скрипта необходимо указать путь до расположения распакованной утилиты curl. Затем нужно добавить POST-запрос на включение сервера, содержащий ключ доступа к API, полученный в панели управления 1cloud.ru и уникальный идентификатор конкретной машины (ссылку на страницу сервера в панели управления).

Можно включить в один скрипт задачи для нескольких серверов, как я и сделал в примере ниже, разделив запросы символом & (&& для Linux). В конце скрипта для Windows я явно добавил параметр exit 0 для автоматического завершения работы скрипта в случае успешной отработки. Этот параметр необязателен.

Жирным ниже выделены значения, которые вам необходимо отредактировать: путь до утилиты curl, токен авторизации (Authorization: Bearer) и идентификатор сервера (https://api.1cloud.ru/Server)

Windows (.bat/.ps1):

"C:\Program Files\curl\bin\curl" -X POST -H "Content-Type:application/json" -H "Authorization: Bearer 549017cd2587e68f23b32e87c39037a09c74a0d8f3675be9e1ddf8916bd78544" "https://api.1cloud.ru/Server/390573/Action" -d "{\"Type\":\"PowerOn\"}" & "C:\Program Files\curl\bin\curl" -X POST -H "Content-Type:application/json" -H "Authorization: Bearer 549017cd2587e68f23b32e87c39037a09c74a0d8f3675be9e1ddf8916bd78544" "https://api.1cloud.ru/Server/390572/Action" -d "{\"Type\":\"PowerOn\"}" & exit 0

Linux (.sh):

curl -X POST -H "Content-Type:application/json" -H "Authorization: Bearer 549017cd2587e68f23b32e87c39037a09c74a0d8f3675be9e1ddf8916bd78544" "https://api.1cloud.ru/Server/390573/Action" -d "{\"Type\":\"PowerOn\"}" && curl -X POST -H "Content-Type:application/json" -H "Authorization: Bearer 549017cd2587e68f23b32e87c39037a09c74a0d8f3675be9e1ddf8916bd78544" "https://api.1cloud.ru/Server/390572/Action" -d "{\"Type\":\"PowerOn\"}"

Сохраним созданный скрипт на включение серверов в формате файла .bat (для CMD) или .ps1 (для PowerShell) и протестируем его работоспособность, запустив полученный исполняемый файл. Даже если серверы уже включены – скрипт отработает, и в панели 1cloud мы увидим информацию о задании на включение

При успешной отработке скрипта должен быть получен ответ следующего вида:

Информация о выполненной задаче отобразится соответственно и в панели управления 1cloud:

Выключение сервера

Создание скрипта выключения серверов полностью аналогично скриптам на включение. В примере ниже я использую опцию выключения тех же двух серверов средствами ОС (ShutDownGuestOS), т.к. необходимые мои серверы созданы из стандартных шаблонов, предлагаемых 1cloud, в которых VMware Tools уже предустановлены.

Windows:

" C:\Program Files\curl\bin\curl" -X POST -H "Content-Type:application/json" -H "Authorization: Bearer 549017cd2587e68f23b32e87c39037a09c74a0d8f3675be9e1ddf8916bd78544" "https://api.1cloud.ru/Server/390573/Action" -d "{\"Type\":\"ShutDownGuestOS\"}" & " C:\Program Files\curl\bin\curl " -X POST -H "Content-Type:application/json" -H "Authorization: Bearer 549017cd2587e68f23b32e87c39037a09c74a0d8f3675be9e1ddf8916bd78544" "https://api.1cloud.ru/Server/390572/Action" -d "{\"Type\":\"ShutDownGuestOS\"}" & exit 0

Linux (.sh):

curl -X POST -H "Content-Type:application/json" -H "Authorization: Bearer 549017cd2587e68f23b32e87c39037a09c74a0d8f3675be9e1ddf8916bd78544" "https://api.1cloud.ru/Server/390573/Action" -d "{\"Type\":\" ShutDownGuestOS \"}" && curl -X POST -H "Content-Type:application/json" -H "Authorization: Bearer 549017cd2587e68f23b32e87c39037a09c74a0d8f3675be9e1ddf8916bd78544" "https://api.1cloud.ru/Server/390572/Action" -d "{\"Type\":\" ShutDownGuestOS \"}"

После сохранения и запуска .bat/.ps1 скрипта можно увидеть результат его выполнения в панели управления:

Автоматическое выполнение скриптов по расписанию

Windows:

Автоматизировать исполнение скриптов можно, создав простую задачу в Планировщике Задач Windows и указав время и частоту выолнения задачи, а также путь до файла скрипта. Ниже приведен пример для задачи на включение серверов.

Linux:

Аналогом Планировщика Задач Windows в Linux-системах выступает cron. После создания файлов скриптов на Linux-машины необходимо разрешить скрипту исполнение, выполнив команду: chmod –X /путь/до/скрипта.sh Добавим строки для обоих скриптов в список заданий cron, расположенный по пути /etc/crontab

Указанные мной параметры (слева направо): - Ежедневно в 00:00 выполнять от имени пользователя root скрипт /root/poweroff.sh - Ежедневно в 08:00 выполнять от имени пользователя root скрипт /root/poweron.sh

Заключение:

В результате манипуляций выше мы получили автоматизированные сценарии включения/выключения серверов 1cloud по расписанию, уменьшив среднюю стоимость аренды серверов в месяц примерно на 30% (при неактивности в течение 8 часов).

Материал опубликован пользователем. Нажмите кнопку «Написать», чтобы поделиться мнением или рассказать о своём проекте.

Написать
{ "author_name": "Oleg Siber", "author_type": "self", "tags": [], "comments": 2, "likes": 0, "favorites": 3, "is_advertisement": false, "subsite_label": "dev", "id": 65275, "is_wide": false, "is_ugc": true, "date": "Mon, 22 Apr 2019 17:14:09 +0300" }
SMS-чат для клиентов
{ "id": 65275, "author_id": 286995, "diff_limit": 1000, "urls": {"diff":"\/comments\/65275\/get","add":"\/comments\/65275\/add","edit":"\/comments\/edit","remove":"\/admin\/comments\/remove","pin":"\/admin\/comments\/pin","get4edit":"\/comments\/get4edit","complain":"\/comments\/complain","load_more":"\/comments\/loading\/65275"}, "attach_limit": 2, "max_comment_text_length": 5000, "subsite_id": 235819, "last_count_and_date": null }

2 комментария 2 комм.

Популярные

По порядку

0

"скомпилированные примеры скриптов для Windows и Linux ниже"
Только у меня бомбит, что скрипты нужно компилировать?

Ответить
0

Ruslan, я понимаю ваше смущение и ценю внимание к словам. Как я упоминал в начале статьи, они написана для людей без опыта работы с файлами скриптов и консолью. Да и слово "компиляция" может использоваться в разных контекстах, не только сборки пакетов из исходников. Я вот называю любую множественную копипасту в одно место компиляцией, также как и DJ-сет. Такой скрипт нельзя называть написанным. Ну разве что составленным, но слово составлять дурацкое, нет?

Ответить
0
{ "page_type": "article" }

Прямой эфир

[ { "id": 1, "label": "100%×150_Branding_desktop", "provider": "adfox", "adaptive": [ "desktop" ], "adfox_method": "createAdaptive", "auto_reload": true, "adfox": { "ownerId": 228129, "params": { "pp": "g", "ps": "bugf", "p2": "ezfl" } } }, { "id": 2, "label": "1200х400", "provider": "adfox", "adaptive": [ "phone" ], "auto_reload": true, "adfox": { "ownerId": 228129, "params": { "pp": "g", "ps": "bugf", "p2": "ezfn" } } }, { "id": 3, "label": "240х200 _ТГБ_desktop", "provider": "adfox", "adaptive": [ "desktop" ], "adfox": { "ownerId": 228129, "params": { "pp": "g", "ps": "bugf", "p2": "fizc" } } }, { "id": 4, "label": "240х200_mobile", "provider": "adfox", "adaptive": [ "phone" ], "adfox": { "ownerId": 228129, "params": { "pp": "g", "ps": "bugf", "p2": "flbq" } } }, { "id": 5, "label": "300x500_desktop", "provider": "adfox", "adaptive": [ "desktop" ], "adfox": { "ownerId": 228129, "params": { "pp": "g", "ps": "bugf", "p2": "ezfk" } } }, { "id": 6, "label": "1180х250_Interpool_баннер над комментариями_Desktop", "provider": "adfox", "adaptive": [ "desktop" ], "adfox": { "ownerId": 228129, "params": { "pp": "h", "ps": "bugf", "p2": "ffyh" } } }, { "id": 7, "label": "Article Footer 100%_desktop_mobile", "provider": "adfox", "adaptive": [ "desktop", "tablet", "phone" ], "adfox": { "ownerId": 228129, "params": { "pp": "g", "ps": "bugf", "p2": "fjxb" } } }, { "id": 8, "label": "Fullscreen Desktop", "provider": "adfox", "adaptive": [ "desktop", "tablet" ], "auto_reload": true, "adfox": { "ownerId": 228129, "params": { "pp": "g", "ps": "bugf", "p2": "fjoh" } } }, { "id": 9, "label": "Fullscreen Mobile", "provider": "adfox", "adaptive": [ "phone" ], "auto_reload": true, "adfox": { "ownerId": 228129, "params": { "pp": "g", "ps": "bugf", "p2": "fjog" } } }, { "id": 10, "disable": true, "label": "Native Partner Desktop", "provider": "adfox", "adaptive": [ "desktop", "tablet" ], "adfox": { "ownerId": 228129, "params": { "pp": "g", "ps": "clmf", "p2": "fmyb" } } }, { "id": 11, "disable": true, "label": "Native Partner Mobile", "provider": "adfox", "adaptive": [ "phone" ], "adfox": { "ownerId": 228129, "params": { "pp": "g", "ps": "clmf", "p2": "fmyc" } } }, { "id": 12, "label": "Кнопка в шапке", "provider": "adfox", "adaptive": [ "desktop" ], "adfox": { "ownerId": 228129, "params": { "p1": "bscsh", "p2": "fdhx" } } }, { "id": 13, "label": "DM InPage Video PartnerCode", "provider": "adfox", "adaptive": [ "desktop", "tablet", "phone" ], "adfox_method": "createAdaptive", "adfox": { "ownerId": 228129, "params": { "pp": "h", "ps": "bugf", "p2": "flvn" } } }, { "id": 14, "label": "Yandex context video banner", "provider": "yandex", "yandex": { "block_id": "VI-223676-0", "render_to": "inpage_VI-223676-0-1104503429", "adfox_url": "//ads.adfox.ru/228129/getCode?pp=h&ps=bugf&p2=fpjw&puid1=&puid2=&puid3=&puid4=&puid8=&puid9=&puid10=&puid21=&puid22=&puid31=&puid32=&puid33=&fmt=1&dl={REFERER}&pr=" } }, { "id": 15, "label": "Плашка на главной", "provider": "adfox", "adaptive": [ "desktop", "tablet", "phone" ], "adfox": { "ownerId": 228129, "params": { "p1": "byudx", "p2": "ftjf" } } }, { "id": 16, "label": "Кнопка в шапке мобайл", "provider": "adfox", "adaptive": [ "tablet", "phone" ], "adfox": { "ownerId": 228129, "params": { "p1": "byzqf", "p2": "ftwx" } } }, { "id": 17, "label": "Stratum Desktop", "provider": "adfox", "adaptive": [ "desktop" ], "auto_reload": true, "adfox": { "ownerId": 228129, "params": { "pp": "g", "ps": "bugf", "p2": "fzvb" } } }, { "id": 18, "label": "Stratum Mobile", "provider": "adfox", "adaptive": [ "tablet", "phone" ], "auto_reload": true, "adfox": { "ownerId": 228129, "params": { "pp": "g", "ps": "bugf", "p2": "fzvc" } } }, { "id": 19, "label": "Тизер на главной", "provider": "adfox", "adaptive": [ "desktop", "tablet", "phone" ], "auto_reload": true, "adfox": { "ownerId": 228129, "params": { "p1": "cbltd", "p2": "gazs" } } } ]
Голосовой помощник выкупил
компанию-создателя
Подписаться на push-уведомления
{ "page_type": "default" }