Строю тмс TestRun. Тестирую софт.
Тестирование AI - это как проверка робота перед тем, как показать его живым людям. Только робот этот особенный: он может дать разные ответы на один и тот же вопрос, и со временем начинает вести себя чуть иначе даже если вы ничего не меняли. Поэтому обычных способов проверки качества здесь недостаточно.
Первое, что нужно проверить - что робот…
В 2026 году безопасность разработки изменилась сильнее, чем за предыдущие десять лет. Главный риск теперь не в уязвимостях кода, а сама цепочка разработки: зависимости, CI/CD и инструменты, которыми пользуются инженеры. Атакующим больше не нужно ломать систему напрямую. Гораздо проще встроиться в процесс разработки - через npm-пакеты, Python-библио…
Playwright прогнал тесты - и тест-кейсы сами появились в тмске с шагами, описанием и нужной директорией. Разбираем, как это работает и как настроить с нуля.
TestRun.ru - российская система управления тестированием ПО с внешним API для программного создания тест-кейсов. Это значит: можно написать E2E-тест в Playwright, добавить пару строк в CI…
Большинство трат на AI-агентов вроде Goose сгорают из-за того, как мы с ней разговариваем. Как работает: вы написали запрос, агент что-то сделал. Но на самом деле он прочитал лишние файлы, додумал половину контекста и выдал длинный ответ с объяснениями, которые вы не просили. Каждый запрос - это токены, а токены - это деньги.
Плохой промт - э…
Разговоры об использовании ИИ в разработке давно ушли от уровня «генерировать код» к более сложной теме - как встроить LLM в реальные процессы так, чтобы они приносили пользу, а не создавали иллюзию автоматизации. На практике выясняется, что подключить ИИ к пайплайну - самая простая часть. Сложнее добиться предсказуемого и воспроизводимого результа…
ИИ написал код. MVP запущен за выходные - и он работает. Но ты не знаешь, почему. Хорошая новость: тебе не нужно нанимать QA-инженера, но нужно спасти продукт от факапа на продакшне.
Когда пишешь код - хотя бы примерно понимаешь, что он делает. Когда за тебя пишет ИИ, то получаешь рабочий результат без модели в голове. Он решает задачу, но ты…
Итак еще один вариант использования ИИ в тестировании.
Написание тест-кейсов - это нужная, но очень механическая работа. Особенно когда выходит очередная фича и надо быстро её покрыть, при этом не нарушив общую структуру документации.
Автоматизация тестирования изначально была инженерной областью, где важны код, архитектура и системное мышление. Поэтому влияние ИИ здесь про изменение того, что считается базой, а что - экспертизой.
Главное изменение последнего времени - резкий рост скорости разработки. Команды выпускают фичи быстрее, релизы - чаще, изменения в коде идут поч…
На прошлой неделе ИИ-агент сам зашёл на наш сайт, прочитал 15 тест-кейсов и нашёл 4 бага - пока я пила кофе.
Я использовала Goose - это бесплатный open source ИИ-агент, который работает на компьютере и умеет открывать браузер, кликать по кнопкам и читать файлы. Подключается к ИИ моделям через API-ключ.
Теряет ли ваша пользователей - и как это проверить
1. Проверяйте не то, что вводят правильно - а то, что вводят неправильно
Сейчас почти все пробуют использовать AI в тестировании. Чаще всего это выглядит одинаково: просят сгенерировать тест-кейсы или автотесты и получают аккуратный, но довольно поверхностный результат.
Я довольно быстро поняла, что в такой формат дает больше редакторской работы, а не творческой. AI начинает реально помогать только в одном случае…