Автоматизация UI для сайтов и приложений, которые вы разрабатываете сами

Что агент может сделать для ваших тестов

• Файлыread_file, write_file, append_file, edit_file, delete_file, make_dir, move_file, copy_file, list_dir, grep и glob работают внутри рабочей папки чата, а счетчик показывает количество созданных, отредактированных и прочитанных файлов.
• Shellзапускает вашу команду тестов, линтер или сборку локально в Windows, WSL или по SSH на сервере, которым вы владеете, и оценивает успех по реальному коду выхода. Опасные команды заблокированы.
• Вебweb_search находит страницы, а http_get читает одну страницу официальной документации, так что вопрос по селектору или ожиданию можно проверить по собственному руководству фреймворка.
• Скриншоты и изображенияocr читает текст на сохраненном скриншоте, например, баннер ошибки при сбое запуска, а gen_image сохраняет реальные файлы изображений, когда они вам нужны.
• Оркестрацияtask разделяет независимые проверки между параллельными субагентами, run_on_model отправляет один сложный шаг на большую модель, а skill сохраняет переиспользуемый плейбук, например, вашу обычную процедуру ремонта.
• Режимы одобренияAuto-run действует сразу, Ask first приостанавливается перед действиями, изменяющими что-либо, и показывает diff, а Plan only пишет план и ничего не запускает. Планы сохраняются после перезагрузки.
• Cronзапускает промпт по расписанию, например, чтобы запускать вашу команду тестов в заданные вами время и сообщать код выхода в чате, так что поток, который сломался ночью, — это первое, что вы видите.
• Моделиподключите облачного поставщика ИИ через стандартный API-эндпоинт, модель, работающую локально на вашем ПК, или встроенную модель, готовую к использованию без вашего собственного эндпоинта. Кнопка Test проверяет эндпоинт перед запуском.

Четыре задачи, которые агент выполняет в тестовом проекте

Написать первый сценарий

Лучшие практики e2e-тестирования начинаются с краткого списка сценариев, которые не должны падать, поэтому попросите FlowLatch написать только их. list_dir и glob показывают, как названы ваши существующие тесты, read_file открывает один как шаблон, а write_file создает новый файл для сценария входа в систему с тестовым аккаунтом и фейковыми данными. Затем Shell запускает вашу команду тестов, а карточка показывает реальный код выхода. Первый черновик редко бывает финальным, поэтому просите одно изменение за раз, например, более понятное имя или добавленную проверку текста на странице. Прежде чем принять, прочитайте новый файл в diff, запустите его самостоятельно один раз и сохраните только если он соответствует задуманному сценарию.

Запустить набор тестов и прочитать сбой

Shell запускает вашу команду тестов, а карточка сохраняет полный вывод, так что красный результат никогда не является догадкой. grep ищет в этом выводе падающий шаг, а если ваш фреймворк сохранил скриншот, ocr читает сообщение на нем. Чтобы снизить флаттер в end-to-end тестах, попросите FlowLatch запустить падающий тест снова с той же командой и сравнить коды выхода. Проход за падением указывает на фиксированное ожидание, общие тестовые данные или порядок тестов. Попросите краткое объяснение в чате, затем проверьте его по выводу, прежде чем менять какие-либо файлы.

Починить селектор после изменения макета

Стоит ли e2e-тестирование времени для фронтенд-работы, зависит от сценария, поэтому сначала покрывайте вход в систему и оформление заказа. Когда макет страницы меняется, grep находит каждый селектор, связанный с ним, read_file показывает окружающие шаги, а edit_file предлагает стабильные метки или test id вместо них. В режиме Ask first FlowLatch приостанавливается перед каждым изменением и показывает diff, по одному файлу за раз. Примите строки, которые выглядят правильно, отклоните остальные, затем позвольте Shell запустить набор тестов снова, чтобы увидеть новый код выхода. Держите diff небольшим, чтобы рецензент мог прочитать его за минуту.

Перенести набор тестов в другой фреймворк

При миграции e2e-тестов между фреймворками держите оба набора в репозитории, пока новый не пройдет. FlowLatch перечисляет старые тесты с помощью glob, читает каждый с read_file и записывает соответствующий новый файл с write_file, по одному сценарию за раз. web_search и http_get могут прочитать официальную документацию нового фреймворка для синтаксиса, который вы забыли. Запустите оба набора с помощью Shell, сравните коды выхода и одобряйте каждый файл в Ask first, прежде чем удалить старый. Планы сохраняются после перезагрузки, так что долгая миграция может продолжиться на следующий день.