Кто «охраняет» инфраструктуру Selectel? Один день в Дубровке

Привет! Я — Олег, инженер по диагностике оборудования в Дубровке. Работаю здесь уже более трех лет и за это время успел побывать на разных должностях: системным, дежурным инженером и по диагностике. Обычно о дата-центре в Дубровке пишут мало информации, поэтому в тексте делюсь подробностями работы в ней.

Используйте навигацию, если не хотите читать текст полностью

→ Кто работает в дата-центре

→ Дорога до офиса

→ Начало рабочего дня

→ Обед

→ Вторая половина рабочего дня

→ Конец рабочего дня

→ Отдых и развлечения

→ Дорога домой

В Дубровке много разных ролей для технических специалистов. Можно выбрать одну и расти в ней вертикально — от младшего инженера к старшему — или со временем перейти на другую и развивать свои навыки горизонтально. Последнее — про меня.

После нескольких лет работы можно стать старшим системным инженером. Тогда вы будете управлять занятостью других коллег, участвовать в обсуждении планов отдела и принимать важные решения.

Поскольку Дубровка находится в Ленинградской области, любой рабочий день начинается с дороги. Возможно, кому-то не нравится ездить в офис, тем более загород, но для меня время в пути — прекрасная возможность послушать музыку, построить планы на неделю или придумать, что буду делать на выходных. Ну и, конечно же, насладиться красотой природы.

По дороге можно увидеть зеленые поля, сосновые рощи и бескрайние горизонты. Возникает ощущение, что вы едете не в офис, а в увлекательное мини-путешествие за город. Кроме того, дата-центр настолько близко к городу, что путь меня не угнетает. Поездка от КАДа занимает не более 30 минут, да и компания компенсирует затраты на проезд.

В Дубровку также можно добраться на общественном транспорте, например на электричке от Финляндского вокзала. Расписание довольно плотное и совпадает с началом рабочего дня.

В Дубровке находятся сразу три дата-центра общей площадью 2 450 м2. Это один из самых больших дата-центров в Ленинградской области.

Как и в любом дата-центре Selectel, на входе стоит пропускной пункт. Проходим через него и заходим в офис.

Кстати, рекомендую захватить с собой сендвич или булочку на завтрак. Если не успели, на кофепоинте всегда найдутся каши, полезные вкусняшки и другие блюда на любой вкус.

После завтрака начинаем рабочий день: открываем ноутбуки, перебираем дашборды и выполняем задачи, которые займут сегодняшний день.

Дежурный инженер

Работа дежурного инженера начинается с передачи смены. Ему рассказывают, что поменялось в инструкциях или настройке оборудования, пока его не было. После инженер проверяет показания мониторинга, обменивается дежурным телефоном со сменщиком, фиксирует передачу в журнале и желает ему приятного дня.

Мониторинг — основной помощник дежурного инженера. На него выводятся показания практически по всему, что связано с инфраструктурой дата-центра, — например, температура и давление в серверных. Если какое-то оборудование выходит из строя или имеет нестандартные параметры, мониторинг мгновенно сообщит об этом инженеру. Далее — мгновенная реакция и обработка нештатной ситуации.

Молниеносная реакция и четкое понимание того, что именно пошло не так и как это исправить, — главные навыки для дежурного инженера. Если вы любите решать сложные задачи и нештатные ситуации, то эта работа для вас.

Инженер по диагностике

Бывает, с сервером случилась неприятность — например, его комплектующие вышли из строя. Такой сервер нельзя сдать клиенту, поэтому он попадает под статус «диагностика». После в игру вступает инженер.

Инженер по диагностике начинает свой день с просмотра серверов в данном статусе, чтобы приоритезировать, какие в первую очередь нужно вывести из диагностики. Предварительно смотрит на их конфигурацию и историю. Проверяет логи IPMI и сетевого оборудования, изучает тикет с заменой сервера и собирает максимально подробный анамнез.

Подробный сбор информации ускоряет вывод сервера в продакшен. В его истории можно увидеть, какие комплектующие в нем менялись. По логам возможно вычислить текущую проблему, а по тикету — узнать, сталкивался ли клиент с ней в реальной эксплуатации.

После сбора информации инженер оставляет комментарии и приступает к диагностике.

Системный инженер

Системный инженер начинает работу с изучения дашбордов, чтобы спланировать задачи на день. Сегодня ему нужно переподготовить новые стойки. Бывает, они подготовлены под определенный проект и успешно его отработали, но рынок динамический и постоянно требует изменений, поэтому со временем их нужно апгрейдить.

Ранее инженеры демонтировали все оборудование, отключили линии связи и переподключили схему электропитания стойки. Сегодня смонтируем серверы обратно.

Получаем сетевое оборудование со склада, перевозим в нужную серверную, монтируем в правильные юниты, маркируем хостнеймами, прокладываем кроссировки и аккуратно укладываем в стойку.

Отдельное внимание стоит уделить маркировке и аккуратной укладке кроссировок. Ведь в процессе эксплуатации стойки нам может понадобиться горячая замена оптоволокна или UTP-кабеля. Поэтому должна быть возможность их идентифицировать и быстро демонтировать из стройки

Далее верно подключаем питание, чтобы у всего оборудования в стойке сохранилась резервирование по электропитанию. Заполняем все информационные системы, которые содержат данные для поиска и идентификации оборудования. Готово — задача завершена!

→ Системный инженер в инженерно-технический отдел

→ Младший системный инженер

Selectel предоставляет компенсацию питания, поэтому часто с коллегами заказываем доставку еды. Однако из-за расположения выбор поставщиков невелик — планировать обед нужно заранее. Зато есть вендинговый автомат с готовой едой: пастой, бефстроганов, суши и другим. Достаточно сканировать штрихкод, и блюдо становится вашим.

Кроме того, на кофепоинте есть чай, кофе, овощи, фрукты и вкусняшки — последние разделены на обычные и здоровые сладости. В офисе всегда найдется, чем перекусить.

Системный инженер

После стойки системный инженер приступает к монтажу других серверов. Вся информация о процессе и настройке находится в Confluence — внутренней базе знаний компании. Сверяемся со статьей, обсуждаем с коллегами, как лучше проложить кроссировки, и начинаем монтаж.

После — настраиваем серверы, проверяем корректность настроек и заполнение информационных систем и отправляем в автоматические приемочные тесты. Спустя несколько часов видим заветный зеленый статус «Готово». Клиенты смогут арендовать этот сервер, а нам будет приятно за результаты работы.

Но бывает и по-другому, когда сервер не проходит приемочный тест и допускает ошибки, а разобраться в нем не получается. Не беда — зовем инженера по диагностике и находим проблему вместе. У нас сплоченная команда, поэтому никто не бросит коллегу в трудной ситуации.

Инженер по диагностике

Диагностика серверов может занимать до трех дней. Все зависит от тяжести неисправности, которую инженеру нужно найти, — обычно на это уходит больше всего времени — и устранить.

Иногда бывают такие проблемы, над которыми приходится серьезно подумать, поискать причины, заменить комплектующие на заведомо исправные, провести тесты, пообщаться с коллегами и, возможно, собрать целый консилиум. А иногда — достаточно тривиальные, например, диски выработали свой ресурс. В таком случае заказываем новые на складе, подключаем их к серверу и не забываем отметить в информационных системах.

Дежурный инженер

Каждые два часа дежурный инженер проводит визуальный осмотр, чтобы лучше узнать состояние дата-центра. Проверяет, не шумят ли вентиляционные установки, нет ли индикации сервисных ошибок на источниках бесперебойного питания, в норме ли температура помещения дизель генераторных установок и другое.

Для меня дата-центр — безумно интересное место. Когда проводил первые обходы, узнавал много полезной информации об эксплуатации оборудования, работе систем и параметрах серверов. Захватывающее чувство, как из фантастических фильмов детства.

Кроме мониторинга инженер отвечает за общение с клиентами через тикет-систему. Когда тикетов много и дежурный не успевает их обрабатывать, другие инженеры могут помочь и взять часть задач на себя. Например, осмотреть оборудование или заменить комплектующие в сервере.

Сегодня приезжает подрядчик, чтобы проверить системы кондиционирования. Контролировать процесс инженеру не нужно, охлаждением занимается их представитель. Однако оформить пропуск и сопроводить к месту работ придется.

К вечеру завезут поставку расходных материалов: кабели, инструменты, оборудование и прочее. С дежурного — опять пропуск и встреча.

Системный инженер

В конце смены инженер «передает дела», тщательно описывает в дашборде, каких результатов достиг за день, меняет статусы задач и перепроверяет, все ли выполнил из запланированного.

Инженер по диагностике

Инженер по диагностике проверяет все серверы. Благо финишное тестирование автоматизировано, поэтому остается только загрузить сервер и проверить результаты тестов. После — убедиться, что серверы в диагностике вывели в продашкен, и закрыть смену.

Дежурный инженер

Дежурного инженера в это время ждет последний за смену обход. На нем контролируется больше параметров, чем на обычных обходах — их передают следующему сменщику:

Осталось свободное время? Отлично! У нас есть книжки, шахматы, Playstation и настольные игры. Партейка в шахматы или пару боев в Mortal Combat для разгрузки лишними не будут.

Еще в нашем офисе находится массажное кресло — нам нем можно размять спину и ноги, если устали.

Вечереет. Смотрю на часы и понимаю, что нужно ехать домой. Завожу машину и общаюсь с коллегами. Один из дежурных инженеров рассказывает, какие шикарные звуки леса доносятся по ночам и каких птиц слышал на прошлой смене.

Напоследок, покажу фотографию Невы. На ней я запечатлел момент, когда после работы выходил на берег, чувствовал летний легкий бриз и любовался спокойствием Дубровки. Не хватает только красивого заката и приятной музыки на фоне.

Расскажите, работали ли вы в загородных офисах? Поделитесь своими впечатлениями в комментариях!

#selectel, #карьера, #карьеравit, #дата_центры, #инженер, #itкомпания