Видео: стенд для автоматического тестирования приложений в офисе Mail.Ru Group

18 апреля вице-президент Mail.Ru Group Анна Артамонова опубликовала на своей странице в Facebook видео, на котором показан стенд в виде логотипа почтового приложения myMail с расположенными на нём смартфонами для автоматического тестирования. Редакция vc.ru попросила топ-менеджера рассказать, для чего нужен такой стенд и как он используется.

Анна Артамоновавице-президент Mail.Ru Group

В разработке есть такое понятие, как continuous integration, или непрерывная интеграция. Любое изменение, вносимое в проект, должно быть протестировано максимально быстро и не должно привносить ошибки. Такой подход позволяет минимизировать или вообще исключить баги и сократить время разработки новых фич или изменений в продукте.

Сейчас для автоматизированного тестирования приложений Mail.Ru и myMail мы используем более 60-ти различных смартфонов, на которых прогоняются регрессы после каждой сборки. Регресс — это и есть проверка, что ничего из старой функциональности не «отвалилось» при добавлении нового.

До последнего времени все эти смартфоны жили в тумбочке, но на днях к нам приехала красивая стойка, сделанная в духе визуального стиля myMail, и сейчас на ней расположено 20 устройств.

Изначально мы использовали Nexus 5 как оригинальные телефоны от Google, на которых все работало идеально. Позднее мы стали пробовать различные недорогие телефоны, на которых стоит стоковая операционная система с минимальным количеством расширений от производителя. Сейчас мы пришли к тому, что по соотношению цены и минималистичности операционной системы нам выгоднее использовать Fly.

В день мы тестируем в среднем 25 сборок приложения. Для каждой сборки выполняется около 500 UI-тестов и более 3000 unit-тестов. Для тестирования одной сборки на одном устройстве потребовалось бы около 900 минут.