Otomatisasi UI untuk situs dan aplikasi yang Anda bangun sendiri

Apa yang dapat dilakukan agen untuk tes Anda

• Fileread_file, write_file, append_file, edit_file, delete_file, make_dir, move_file, copy_file, list_dir, grep, dan glob bekerja di dalam folder kerja obrolan, dan penghitung menunjukkan file yang dibuat, diedit, dan dibaca.
• Shellmenjalankan perintah tes Anda, linter, atau build di Windows lokal, WSL, atau melalui SSH di server yang Anda miliki, dan menilai keberhasilan berdasarkan exit code asli. Perintah berbahaya diblokir.
• Webweb_search menemukan halaman dan http_get membaca satu halaman dokumentasi resmi, sehingga pertanyaan tentang selector atau wait dapat diperiksa terhadap manual framework itu sendiri.
• Screenshot dan gambarocr membaca teks dalam screenshot yang disimpan, misalnya banner error dari run yang gagal, dan gen_image menyimpan file gambar asli ketika Anda membutuhkannya.
• Orkestrasitask membagi pemeriksaan independen ke sub-agen paralel, run_on_model mengirim satu langkah sulit ke model yang lebih besar, dan skill menyimpan playbook yang dapat digunakan kembali seperti rutinitas perbaikan Anda.
• Mode persetujuanAuto-run bertindak segera, Ask first menjeda sebelum tindakan yang mengubah sesuatu dan menampilkan diff, dan Plan only menulis rencana dan tidak menjalankan apa pun. Rencana bertahan setelah restart.
• Cronmenjalankan prompt sesuai jadwal, misalnya untuk menjalankan perintah tes Anda pada waktu yang Anda tetapkan dan melaporkan exit code di obrolan, sehingga alur yang rusak semalam menjadi hal pertama yang Anda baca.
• Modelsambungkan penyedia AI cloud melalui endpoint API standar, model yang berjalan secara lokal di PC Anda, atau model bawaan yang siap digunakan tanpa endpoint pribadi Anda. Tombol Tes memeriksa endpoint sebelum Anda memulai.

Empat pekerjaan yang dilakukan agen dalam proyek tes

Tulis alur pertama

Praktik terbaik untuk tes e2e dimulai dengan daftar singkat alur yang tidak boleh gagal, jadi minta FlowLatch untuk menulis hanya itu. list_dir dan glob menunjukkan bagaimana tes Anda yang ada dinamai, read_file membuka satu sebagai pola, dan write_file membuat file baru untuk alur masuk dengan akun tes dan data palsu. Shell kemudian menjalankan perintah tes Anda, dan kartu menampilkan exit code asli. Draf pertama jarang final, jadi minta satu perubahan pada satu waktu, seperti nama yang lebih jelas atau pemeriksaan tambahan pada teks halaman. Sebelum Anda menerima, baca file baru di diff, jalankan sendiri sekali, dan simpan hanya jika sesuai dengan alur yang Anda maksud.

Jalankan suite dan baca kegagalan

Shell menjalankan perintah tes Anda dan kartu menyimpan output lengkap, sehingga hasil merah bukan sekadar tebakan. grep mencari output itu untuk langkah yang gagal, dan jika framework Anda menyimpan screenshot, ocr membaca pesan di dalamnya. Untuk mengurangi flakiness dalam tes end to end, minta FlowLatch menjalankan tes yang gagal lagi dengan perintah yang sama dan bandingkan exit code. Pass diikuti fail menunjukkan wait tetap, data tes bersama, atau urutan tes. Minta penjelasan singkat di obrolan, lalu tinjau terhadap output sebelum mengubah file apa pun.

Perbaiki selector setelah perubahan tata letak

Apakah pengujian e2e sepadan dengan waktu untuk pekerjaan frontend tergantung pada alur, jadi tutup masuk dan checkout terlebih dahulu. Ketika tata letak halaman berubah, grep menemukan setiap selector yang terkait dengannya, read_file menunjukkan langkah di sekitarnya, dan edit_file mengusulkan label stabil atau id tes. Dalam Ask first, FlowLatch menjeda sebelum setiap edit dan menampilkan diff, satu file pada satu waktu. Terima baris yang terlihat benar, tolak sisanya, lalu biarkan Shell menjalankan suite lagi untuk melihat exit code baru. Jaga diff tetap kecil agar reviewer dapat membacanya dalam satu menit.

Pindahkan suite ke framework lain

Saat memigrasikan tes e2e antar framework, simpan kedua suite di repositori hingga yang baru lulus. FlowLatch mendaftar tes lama dengan glob, membaca setiap satu dengan read_file, dan menulis file baru yang sesuai dengan write_file, satu alur pada satu waktu. web_search dan http_get dapat membaca dokumentasi framework baru sendiri untuk sintaks yang tidak Anda ingat. Jalankan kedua suite dengan Shell, bandingkan exit code, dan setujui setiap file dalam Ask first sebelum yang lama dihapus. Rencana bertahan setelah restart, sehingga migrasi panjang dapat dilanjutkan hari berikutnya.