Да, вот это как раз очень показательный кейс. Формально тест есть и он зелёный, но по факту может вообще не ловить нужный баг. С AI-кодингом это особенно коварно: агент может сам написать и фикс и тест и они будут как будто-бы отлично согласованы между собой, только проверять не то. Поэтому идея специально вернуть баг и посмотреть, покраснеет ли тест, очень здравая👍. По сути это уже проверка не наличия теста, а его полезности.
Да, вот это как раз очень показательный кейс. Формально тест есть и он зелёный, но по факту может вообще не ловить нужный баг. С AI-кодингом это особенно коварно: агент может сам написать и фикс и тест и они будут как будто-бы отлично согласованы между собой, только проверять не то. Поэтому идея специально вернуть баг и посмотреть, покраснеет ли тест, очень здравая👍. По сути это уже проверка не наличия теста, а его полезности.