Автотесты пишет агент вместе с кодом: автоматизация тестирования перестала быть отдельным проектом

Автотест сам выполняет проверку, которую раньше повторяли руками. Например, после изменения входа проверяет, что пользователь попадает в свой кабинет.

Написание автотестов не обязательно выносить в отдельную очередь. У нас агент получает задачу вместе с ожидаемым результатом и добавляет проверку в ту же правку.

На открытой странице машины указано 2 685 тестов на каждом пуше плюс ревью, проверено 7 октября 2026. Но количество проверок ещё не отвечает на вопрос, что они защищают.

Anthropic рекомендует задавать проверяемый результат. Общие причины, почему ИИ не ускорил разработку, разобраны отдельно; здесь принимаем проверку каждой правки.

Агент может перенести неверное ожидание из кода в тест. Тогда оба файла согласны друг с другом, хотя пользователь получает неправильный результат.

Проверять надо результат из задачи агенту. В нашем случае 24 сентября функция вернула поле, которое боевой код не разрешал; тестовая среда эту границу пропустила.

Новый тест воспроизвёл поломку: без исправления он падал. Это сильнее отчёта «добавил тесты»: появилась проверка, чувствительная к конкретной ошибке.

Регрессионное тестирование проверяет, что новая правка сохранила прежнее поведение. Его полезная единица для руководителя: ошибка, которая больше не должна повториться.

Так у нас растёт набор проверок. После сбоя инженер разбирает причину, агент воспроизводит её тестом; следующая правка проходит уже через эту проверку.

Для старого кода есть порядок «сначала страховка». Здесь следующий шаг: каждой новой правкой пополнять защиту, чтобы страховка не осталась разовой кампанией.

Проверка может запрещать рост известных нарушений. Такой храповик держит записанный предел; когда долг сокращают, предел опускают. Старые нарушения не исчезают от запрета новых.

Выборочный набор помогает агенту во время работы. Перед приёмкой нужен весь обязательный набор: случай 27 сентября показал, что пропущенная проверка всё ещё может упасть.

Но полный набор тоже имеет границы. В сентябрьской поломке тестовая среда не повторяла одно ограничение боевой системы, поэтому все запущенные тесты прошли.

Для браузерной проверки Playwright рекомендует результат, видимый пользователю. Проверка открытия кабинета полезнее проверки имени функции, которая должна его открыть.

Сборка и короткий проход по рабочему сценарию дополняют автотесты. После выпуска нужен сигнал с живой системы: пользователь действительно может войти или отправить заявку.

Ответственность за выпуск и откат разобрана в статье об ошибках ИИ. Автотесты дают доказательства для этого решения, но сами его не принимают.

Не нужно обещать покрыть весь продукт до следующего релиза. Выберите ошибку, которую команда уже умеет воспроизвести, и закажите исправление вместе с проверкой.

Предложение автора для первой задачи: инженер фиксирует ожидаемое поведение, агент добавляет падающий тест, исправляет код и показывает результат всего обязательного прогона.

Если проверка проходит и на старой ошибке, задача не закончена. Тест надо изменить так, чтобы он отличал сломанное поведение от правильного.

Если вы решаете, кто будет вести этот процесс, пройдите тест для руководителя. Он поможет выбрать следующий шаг перед запуском агентов.

Для постоянных правок есть подписка «Один проект»: 250 000 ₽ в месяц, один продукт и один поток работы. Условия проверены 7 октября 2026; поток ведёт инженер с машиной агентов.

При входе в систему без тестов первой задачей подписки стоит сделать страховку текущего поведения. Дальше тесты идут вместе с правками. Для одного исправления подписку брать незачем.

1. Включайте тест в приёмку правки. Он должен защищать результат из задачи.

2. Принимайте сам тест: на ошибке падает, после исправления проходит.

3. Превращайте повторяющийся сбой в проверку, которая остаётся в следующих прогонах.

4. Проверяйте весь обязательный набор и нужный пользовательский путь. Зелёный результат ограничен тем, что запускали.

5. Закрепите за инженером ожидаемое поведение и приёмку. Агент пишет проверку, человек отвечает за её смысл.