Как автоматизировать бизнес-процессы для более 10 000 клиентов: кейс «Команды F5»

Рассказываем, как «Команда F5» обеспечила бесперебойную работу 40+ виджетов amoCRM благодаря инфраструктуре Selectel.

«Команда F5» — сертифицированный партнер amoCRM, который интегрирует и дорабатывает платформу под конкретных клиентов. За 11 лет компания реализовала более 1 000 проектов в сфере торговли, недвижимости, образования, строительства, медицины и интернет-маркетинга.

На инфраструктуре Selectel «Команда F5» размещает свои публичные решения. Прежде всего, виджеты amoCRM — «Триггеры», «Документы», «Почтовик», «Telegram» и другие. Сервисами пользуются более 10 000 клиентов ежедневно.

В 2013 году, на старте работы, все свои сервисы «Команда F5» размещала на одном выделенном сервере. Программные продукты активно росли и развивались, поэтому требовалась платформа, которая надежно обеспечила бы их ресурсами и дала бы возможность постепенно увеличивать вычислительные мощности.

Одно из главных требований «Команды F5» к инфраструктуре — производительность. Обработчики веб-хуков из amoCRM должны выдерживать массовые действия клиентов. Массовые — это когда несколько компаний одновременно меняют теги в 500 000 сделок. Все хуки должны быть одновременно обработаны и по ним должен быть выполнен определенный сценарий в виджете «Триггеры». При этом у компании тысячи клиентов, и вычислительные ресурсы нужны всем одновременно.

Более того, серверы должны справляться с большим объемом HTTPS-трафика и постоянными криптографическими вычислениями. В конце концов, здесь тоже важна производительность, в частности высокая тактовая частота процессора.

Казалось бы, можно взять побольше мощных серверов и проблема решится. Но с точки зрения бизнеса это не так. Одним продуктам нужно больше ядер, другим — меньше. Или одни требовательны к процессору, тогда как для других критичен объем RAM. А просто арендовать самые мощные серверы на все случаи жизни — слишком дорого.

Selectel предоставил в аренду выделенные серверы в произвольных конфигурациях. Это позволило «Команде F5» подобрать под каждую задачу оптимальное железо и получить доступ к безлимитному HTTPS-трафику.

Кроме того, аренда выделенных серверов решила проблему блокировок API amoCRM. Там есть ограничение — не более семи запросов в секунду с уникального IP-адреса. В масштабах сервисов «Команды F5» этого мало. Инфраструктура Selectel позволяет задействовать подсеть из 11 IP-адресов, добавленных на выделенный сервер. На нем система очереди заданий использует адреса для работы с amoCRM.

Для «Команды F5» важно, чтобы клиенты не сталкивались с перебоями в работе сервисов даже при росте нагрузки. И хотя выделенные серверы не предусматривают автоматическое масштабирование, ситуацию удалось решить.

Прежде всего, у платформы предсказуемый рост нагрузки, поэтому «Команда F5» может заранее к нему подготовиться. В обычное время компания поддерживает запас ресурсов, регулярно мониторит работу серверов и принимает превентивные меры для увеличения производительности. А в пиковое — подключает дополнительные мощности.

Кроме того, Selectel предлагает в аренду выделенные серверы в готовой конфигурации с запуском от двух минут. Это решение подходит, когда нужно действительно быстро получить в свое распоряжение производительное железо. Выделенные серверы в произвольной конфигурации можно собрать за пять дней. Это удобно для компаний, которые могут точно прогнозировать рост нагрузки на инфраструктуру.

Клиенты «Команды F5» часто используют виджеты amoCRM для работы с файлами. Например, в электронных письмах через «Почтовик» отправляют фото, документы и так далее. Все эти файлы нужно надежно хранить, обеспечив к ним быстрый и удобный доступ.

В продуктах, связанных с файлами, базы данных хранят только идентификаторы, а сами файлы находятся в объектном хранилище. Туда они попадают, например, из того же виджета «Почтовик». Объем объектного хранилища можно легко увеличить в любой момент, и это дешевле увеличения дискового пространства на сервере.

Данные, которые необходимо резервировать, хранятся и обрабатываются на облачных серверах. «Команда F5» использует инкрементальные бэкапы в облаке — это копия изменений между текущим состоянием диска и предыдущим бэкапом, созданным по плану. Такая копия создается быстрее, чем полная, и занимает меньше места, потому что хранит только изменения на диске. Также в облаке находятся системы управления базами данных (СУБД).

Виджетами amoCRM одновременно пользуются тысячи клиентов «Команды F5». Если инфраструктурный инцидент приведет к остановке сервиса, это может обернуться риском потери ценных данных. Чтобы избежать такой ситуации, «Команде F5» было важно обеспечить максимальную отказоустойчивость инфраструктуры.

Selectel организовал распределенную инфраструктуру. Одни инструменты хранения данных размещены на облачных серверах, другие — на выделенных. Самые требовательные к ресурсам виджеты размещены сразу на нескольких выделенных серверах. А для того, чтобы два разных продукта могли обращаться к одной и той же базе данных, все серверы связаны локальной сетью.

Предусмотрен и сценарий, когда большое количество пользователей одновременно нагружают один и тот же сервис. Чтобы они не мешали друг другу, зоны ответственности распределены по разным серверам: на одном базы данных, на другом — кеш, на третьем — очередь заданий. Сервисы распределения нагрузки специалисты F5 пишут сами на программном уровне. Дополнительно помогает запас ресурсов на каждом выделенном сервере, где происходят вычисления.Для того, чтобы обновление ПО или модуля не привело к ошибкам, все сначала реализуют на сервере-зеркале: проводят обновления, тесты и устранения ошибок. Как только там все стабильно работает, обновление переносят на основной сервер или переводят трафик со старого сервера на новый.

«Команда F5» превратила монолитную архитектуру в микросервисы за счет того, что разные сервисы работают на разных элементах инфраструктуры. Это позволяет компании предлагать клиентам стабильные и быстрые продукты. К тому же, сервисы по мере своего развития обзавелись новыми функциями: системой мониторинга и сбора ошибок, сервисами для ведения документации и другими.