CI untuk AI coding agent: saat agent menunggu GitHub Actions 20 menit di setiap putaran
Putaran kerja AI coding agent adalah push, menunggu CI, membaca kegagalan, memperbaiki, push lagi. Pipeline 20 menit untuk lima perbaikan berarti 100 menit menunggu, dan agent mem-push lebih sering daripada manusia: volume job CI Anthropic naik 25x dalam enam bulan. Persingkat waktu tunggunya dengan urutan ini. Minta agent menjalankan lint, type check, dan unit test yang terdampak sebelum push. Batalkan run lama sebuah pull request saat push baru masuk. Letakkan check cepat di job tersendiri agar kegagalan kembali dalam satu atau dua menit. Jalankan hanya test yang terdampak oleh perubahan. Lalu pangkas persiapan yang diulang setiap job di VM baru: di mesin yang menyimpan layer Docker, cache paket, dan output build di antara job, job CI astro turun dari 528 detik di GitHub menjadi 30 detik di Skipbox.
Skipbox menjalankan job Anda di mesin khusus untuk akun Anda, yang menyimpan state itu di antara job. Ubah satu baris, runs-on: skipbox, dengan harga tetap $39 per bulan dan menit tanpa batas: agent yang mem-push dua puluh kali dalam satu sore tidak menambah tagihan sedikit pun, dan anggaran GitHub tidak pernah menghentikan job-nya.
Kenapa putaran agent membuat CI menjadi hambatan
Dari artikel Anthropic tentang scaling test impact analysis: "Our CI job volume increased 25x over 6 months." Dua alasan yang disebutkannya: Claude "prefers smaller, more granular PRs", dan agent "push overnight and on weekends". Manusia mengumpulkan beberapa perbaikan sekaligus; agent mem-push setiap perbaikan lalu menunggu. Setiap menit pipeline dibayar sekali di setiap putaran.
1. Tangkap yang bisa ditangkap sebelum push
Run CI tercepat adalah yang tidak gagal. Beri agent perintah lint, type check, dan unit test yang sama dengan yang dijalankan CI, dan minta agent menjalankannya pada file yang diubahnya sebelum setiap push. Salah ketik lalu hanya memakan beberapa detik di mesinnya sendiri, bukan perjalanan bolak-balik 20 menit.
2. Batalkan run yang digantikan push baru
Agent yang mem-push perbaikan saat run terakhir masih berjalan meninggalkan dua run di pull request yang sama. Batalkan yang lebih lama (concurrency):
concurrency:
group: ${{ github.workflow }}-${{ github.head_ref || github.run_id }}
cancel-in-progress: true
github.head_ref hanya ada di pull request, jadi setiap push ke main mendapat group sendiri dan tidak pernah dibatalkan.
3. Laporkan check cepat lebih dulu
Letakkan lint dan type check di job tersendiri, tanpa needs: di depannya, dan suite lambat di job lain. Agent membaca kegagalan pertama begitu muncul, bukan setelah job E2E.
4. Jalankan hanya yang terdampak perubahan
Jawaban Anthropic untuk lonjakan 25x adalah layanan test impact analysis yang "determines which tests run on each change". Sebagian besar repositori bisa mulai dari yang lebih kecil: turbo run test --affected di Turborepo (panduan CI Turborepo), filter path di workflow yang hanya relevan untuk satu direktori, dan run penuh di main setelah merge untuk menangkap apa yang terlewat oleh seleksi.
5. Berhenti membangun ulang state yang sama di setiap putaran
Di runner yang dihosting GitHub setiap job dimulai di VM baru: toolchain disiapkan lagi, cache dependensi diunduh dan diekstrak, layer Docker ditarik atau dibangun ulang, dan build dimulai dari nol. Dalam seratus putaran agent per hari, persiapan itu adalah sebagian besar waktu tunggunya. Runner yang menyimpan disknya di antara job sudah memiliki semuanya.
Dari run kami pada proyek nyata, dengan workflow tanpa perubahan:
| Proyek | GitHub (repositori publik, 4 vCPU, 16 GB) | Mesin khusus untuk Anda di Skipbox (4 vCPU) |
|---|---|---|
| astro (pnpm, Turborepo) | 528 s | 30 s |
| tauri (Rust) | 246 s | 53 s |
| ripgrep (Rust) | 200 s | 40 s |
6. Rencanakan job bersamaan, bukan hanya menit
Beberapa agent yang masing-masing mem-push pull request dengan matrix mencapai batas job bersamaan GitHub untuk runner standar: 20 job sekaligus di GitHub Free, 40 di Pro, 60 di Team, 500 di Enterprise (batas). Setelah batas itu, job mengantre. Di tagihan per menit, setiap job itu juga berbiaya; batas pengeluaran yang habis menghentikannya dengan "The job was not started because recent account payments have failed or your spending limit needs to be increased" (yang perlu dilakukan).
Yang dilakukan Skipbox untuk CI agent
Setiap paket datang dengan mesin khusus untuk akun Anda, yang disimpan di antara job:
- State-nya tetap ada. Image, layer, dan build cache Docker;
~/.npm, store pnpm,~/.cache, cache Go, Gradle, Maven, dan Cargo; tool yang dipasangsetup-*. Checkout juga tetap ada, besertatarget/milik Cargo dan, untuk proyek turbo 2,.turbodi tingkat atas, jadi build berikutnya melanjutkan dari titik build sebelumnya berhenti. - Menitnya tanpa batas, dan anggaran atau batas pengeluaran GitHub tidak pernah menghentikan job Skipbox.
- Job bersamaan sama dengan vCPU paket. Job berjalan sekaligus selama muat di vCPU paket yang dimiliki akun; sisanya menunggu giliran, dan halaman akun menampilkan berapa yang menunggu dan berapa lama. Satu S menjalankan satu job 4 vCPU pada satu waktu; paket bisa dijumlahkan dalam kombinasi apa pun.
- Job milik agent sendiri juga bisa berjalan di sana: atur
runs-on-nya menjadiskipbox.
| Label | Mesin | Paket |
|---|---|---|
skipbox | 4 vCPU · 16 GB | S, $39 per bulan |
skipbox-8x16 | 8 vCPU · 16 GB | M, $79 per bulan |
skipbox-16x32 | 16 vCPU · 32 GB | L, $149 per bulan |
Untuk 20.000 menit per bulan di 4 vCPU, GitHub menagih $222; Skipbox S $39. Untuk 30.000 menit, $342.
Pindah cukup satu baris
jobs:
checks:
runs-on: skipbox # was ubuntu-latest
- Masuk ke Skipbox dengan GitHub.
- Instal aplikasi GitHub Skipbox dan pilih repositorinya.
- Ubah
runs-on, lalu push.
Keamanan
- Mesinnya hanya milik akun Anda. Tidak ada job perusahaan lain yang berjalan di sana.
- Setelah setiap job, kredensial runner, proses, dan container dihapus, begitu juga kredensial git dan file yang tidak dilacak di checkout yang disimpan. Bersih setiap job memberi setiap job mesin baru sebagai gantinya.
- Kode dari orang tanpa akses tulis (misalnya pull request dari fork) berjalan di VM baru yang bisa membaca cache Anda tetapi tidak bisa mengubahnya.
Detailnya ada di cara job diisolasi.
Coba di job yang ditunggu agent Anda
Uji cobanya gratis selama 7 hari atau 3.000 menit job, mana yang lebih dulu tercapai, dan tanpa kartu. Pindahkan job yang ditunggu agent Anda ke runs-on: skipbox, biarkan agent mem-push dua kali, lalu bandingkan run kedua dengan di GitHub.
FAQ
Coding agent saya membuka PR, menunggu CI 20 menit, memperbaiki, lalu menunggu lagi. Bagaimana membuat CI cukup cepat untuk putaran agent?
Persingkat apa yang ditunggu agent, dengan urutan ini. Minta agent menjalankan lint, type check, dan unit test yang terdampak sebelum push, agar CI bukan tempat pertama salah ketik terlihat. Batalkan run lama sebuah pull request saat push baru masuk (concurrency dengan cancel-in-progress). Letakkan check cepat di job tersendiri agar agent membaca kegagalan dalam satu atau dua menit. Jalankan hanya test yang terdampak oleh perubahan. Lalu hilangkan persiapan yang diulang setiap job: di mesin yang menyimpan layer Docker, cache paket, dan output build di antara job, CI astro turun dari 528 detik di GitHub menjadi 30 detik di Skipbox.
Berapa banyak CI tambahan yang ditimbulkan AI agent?
Anthropic menulis bahwa volume job CI-nya naik 25x dalam 6 bulan, karena Claude lebih suka pull request yang lebih kecil dan lebih terperinci, dan agent mem-push semalaman serta di akhir pekan. Setiap push itu menjalankan seluruh workflow lagi, kecuali workflow-nya membatalkan, melewati, atau mempersempitnya.
Apa setup CI terbaik untuk tim yang sebagian besar PR-nya ditulis AI agent?
Setup yang menjawab agent dengan cepat dan tidak menagih per push: job cepat untuk lint dan type check yang melapor lebih dulu, suite lambat setelahnya, run lama sebuah pull request dibatalkan, hanya test yang terdampak yang dijalankan, dan runner yang menyimpan cache-nya di antara job. Skipbox memberi setiap akun mesin khusus dengan harga tetap dan menit tanpa batas; jumlah job yang dijalankannya sekaligus adalah vCPU dari paket yang dimiliki akun itu.
Apakah agent bisa mencapai batas job bersamaan GitHub?
Bisa. Runner standar yang dihosting GitHub menjalankan paling banyak 20 job sekaligus di GitHub Free, 40 di Pro, 60 di Team, dan 500 di Enterprise; sisanya mengantre. Beberapa agent yang masing-masing mem-push pull request dengan matrix cepat mencapainya. Di Skipbox, job berjalan sekaligus selama muat di vCPU paket akun, dan sisanya menunggu giliran, jadi tim yang menjalankan beberapa agent sekaligus memegang beberapa paket atau satu paket yang lebih besar.
Bisakah job milik agent sendiri berjalan di Skipbox?
Bisa. Setiap job Linux memilih mesinnya lewat runs-on, termasuk job yang menjalankan action Claude Code. Atur menjadi skipbox, dan job itu berjalan di mesin yang sama dengan CI Anda.
Berapa biaya untuk mencobanya?
Gratis. Uji cobanya 7 hari atau 3.000 menit job, mana yang lebih dulu tercapai, tanpa kartu, hingga 4 job sekaligus, masing-masing di 4 vCPU. Pindahkan job yang ditunggu agent ke runs-on: skipbox dan ukur waktu run keduanya.
Diperbarui 19 November 2026