Skipbox

E2E testing berkelanjutan di GitHub Actions: jalankan suite sepanjang hari dengan harga tetap

Coding agent mem-push kode sepanjang waktu, dan suite end-to-end Anda adalah pemeriksaan yang melihat apa yang tidak dilihat unit test mereka: apakah login, checkout, dan halaman di sekitar sebuah perubahan masih bekerja bersama. Tim yang menjalankan E2E sekali semalam baru menemukan regresi yang di-merge pagi hari setelah run malam berikutnya, dengan merge sehari penuh di atasnya. Menjalankan suite sepanjang hari menyelesaikan itu, dan di runner per menit itulah hal termahal di CI: satu runner 4 vCPU yang sibuk sepanjang bulan berbiaya $500,40 di GitHub.

Skipbox menjalankan putaran itu dengan harga tetap $39 per bulan dan menit tanpa batas, di mesin khusus untuk Anda yang menyimpan browser dan paket yang sudah terpasang di antara run. Pindah cukup satu baris, runs-on: skipbox.

Jalankan di setiap push, dan berulang

Dua trigger dalam satu workflow:

  • Di setiap push ke pull request, agar regresi tertangkap sebelum di-merge.
  • Terjadwal terhadap main atau staging, setiap 15 menit, agar test yang flaky, regresi yang lolos, dan kerusakan dari luar kode Anda (sandbox pembayaran, penyedia autentikasi, pembaruan browser) terlihat dalam hitungan menit.

Jadwal terpendek GitHub adalah setiap 5 menit, di commit terbaru branch default. Concurrency group mencegah putaran menumpuk, dan retry Playwright menandai test yang gagal lalu lulus sebagai flaky, jadi test yang flaky sekali dalam lima puluh run terlihat dua kali sehari alih-alih tersembunyi selama seminggu.

Biaya putaran di runner per menit

Putaran setiap 15 menit berarti 96 run per hari. Dengan beberapa shard, runner sibuk hampir sepanjang hari, setiap hari:

Angka GitHub adalah setelah dikurangi kuota bawaan GitHub Team. Empat shard dalam putaran berarti empat baris seperti baris terakhir. Coba menit Anda sendiri di kalkulator di beranda.

Tagihan itulah alasan sebagian besar tim tidak menjalankan E2E sepanjang hari, dan mereka membayarnya dengan jam kerja: regresi yang di-merge agent di malam hari ditemukan pagi harinya, setelah lebih banyak commit mendarat di atasnya, dan melacaknya dengan bisect memakan waktu yang seharusnya dihemat oleh putaran itu. Pull request yang dimulai agent terus naik (GitHub melaporkan lebih dari 40% pada September 2026, naik dari 17% pada Maret), dan anggaran yang membatasi tagihan per menit menghentikan job di tengah bulan, yang mematikan putaran tepat saat dibutuhkan.

Menjalankan putaran sendiri

Agar tetap di runner yang dihosting GitHub dan terjangkau, tim akhirnya melakukan ini:

  • Menjarangkan jadwal menjadi per jam atau per malam dan menerima deteksi yang lebih lambat
  • Mengatur test mana yang berjalan di trigger mana agar menitnya muat dalam anggaran
  • Melakukan sharding agar selesai lebih cepat, lalu membayar persiapan setiap shard lagi
  • Atau menjalankan self-hosted runner sendiri untuk putaran itu, dan menjaga browser, OS, dan disknya tetap sehat

Skipbox menghilangkan kompromi itu. Putarannya berbiaya sama sesering apa pun berjalan, dan tidak ada yang perlu mengurus mesinnya.

Yang diberikan Skipbox untuk putaran itu

Harga tetap untuk run sepanjang hari. Setiap paket menjalankan job-nya sepanjang waktu dengan menit tanpa batas. Job Skipbox tidak memakai menit GitHub, jadi anggaran GitHub tidak pernah mematikan putarannya.

vCPU paket Anda menentukan berapa shard yang berjalan sekaligus: empat shard runs-on: skipbox berjalan bersamaan di empat paket S atau satu L. Shard di luar itu menunggu giliran.

Persiapan yang tidak berulang. Setiap paket datang dengan mesin khusus untuk akun Anda, yang disimpan di antara job. Browser Playwright di ~/.cache/ms-playwright, cache npm, dan image Docker yang dipakai aplikasi dan service-nya ada di disk untuk run berikutnya.

Setiap run dimulai bersih. Kredensial runner, proses, dan semua container dihapus setelah setiap job, lalu health check dijalankan. Mesin yang gagal dibangun ulang dari image yang bersih. Mulai 13 November 2026, checkout Anda dan output build-nya (target/ milik Cargo) tetap ada di mesin khusus untuk Anda untuk job berikutnya; Bersih setiap job memberi setiap job mesin baru.

Pindah cukup satu baris

name: E2E
on:
  pull_request:
  schedule:
    - cron: "*/15 * * * *"
concurrency:
  group: e2e-${{ github.ref }}
  cancel-in-progress: ${{ github.event_name == 'pull_request' }}
jobs:
  e2e:
    runs-on: skipbox # was ubuntu-latest
    steps:
      - uses: actions/checkout@v6
      - uses: actions/setup-node@v6
        with:
          node-version: lts/*
      - run: npm ci
      - run: npx playwright install --with-deps
      - run: npx playwright test
  1. Masuk ke Skipbox dengan GitHub.
  2. Instal aplikasi GitHub Skipbox dan pilih repositorinya.
  3. Ubah runs-on, lalu push.

Keamanan

  • Mesinnya hanya milik akun Anda. Tidak ada job perusahaan lain yang berjalan di sana.
  • Setelah setiap job, kredensial runner, proses, dan container dihapus. Mulai 13 November 2026, checkout Anda dan output build-nya (target/ milik Cargo) tetap ada di mesin khusus untuk Anda untuk job berikutnya; Bersih setiap job memberi setiap job mesin baru.
  • Kode dari orang tanpa akses tulis (misalnya pull request dari fork) berjalan di mesin baru sekali pakai.

Detailnya ada di cara job diisolasi.

Coba sekarang

Uji cobanya gratis selama 7 hari atau 3.000 menit job, mana yang lebih dulu tercapai, tanpa kartu. Uji coba menjalankan hingga 4 job runs-on: skipbox sekaligus: pindahkan job E2E, aktifkan jadwalnya, dan lihat run sehari penuh dengan harga tetap.

FAQ

Perlukah saya menjalankan test end-to-end di setiap push?

Ya, saat agent menulis sebagian besar commit Anda. Unit test memeriksa fungsi yang berubah; test end-to-end memeriksa bahwa login, checkout, dan halaman di sekitarnya masih bekerja bersama. Di runner berharga tetap seperti Skipbox, menjalankan suite di setiap push dan terjadwal berbiaya sama dengan menjalankannya sekali semalam.

Seberapa sering workflow GitHub Actions bisa berjalan terjadwal?

Paling sering setiap 5 menit. Workflow terjadwal berjalan di commit terbaru branch default dan bisa terlambat dimulai saat GitHub sedang sibuk. Setiap 15 menit adalah putaran yang umum: 96 run per hari. Di Skipbox tagihannya sama untuk setiap 15 menit maupun setiap 5 menit.

Berapa biaya menjalankan test E2E sepanjang hari di GitHub Actions?

Satu runner 4 vCPU yang sibuk sepanjang bulan berbiaya $500,40 di runner 4-core GitHub, setelah dikurangi kuota bawaan GitHub Team. Di Skipbox, paket S menjalankan satu job 4 vCPU pada satu waktu sepanjang hari dengan harga tetap $39 per bulan, $461,40 lebih murah.

Bagaimana menjalankan shard Playwright bersamaan di Skipbox?

vCPU paket Anda menentukan berapa job yang berjalan sekaligus. Empat shard runs-on: skipbox sebesar 4 vCPU berjalan bersamaan di empat paket S atau satu paket L; dengan paket lebih sedikit, shard tambahan menunggu giliran dan dimulai begitu satu shard selesai.

Bagaimana menemukan test end-to-end yang flaky?

Aktifkan retry di CI. Playwright menandai test yang gagal lalu lulus saat dicoba ulang sebagai flaky, terpisah dari yang lulus dan gagal, dan laporannya mencantumkannya. Suite yang berjalan berulang menampilkan test flaky yang sama berkali-kali dalam sehari, jadi test itu terlihat dalam sehari, bukan dalam satu sprint.

Diperbarui 19 November 2026

CI/CD lebih cepat dengan cache yang selalu hangat

Runner hangat Anda dengan harga tetap

Kami yang meng-hosting. Anda mengubah satu baris. 1/12 biaya GitHub saat dipakai penuh. Harga tetap, jadi bisa jalan seharian. Ruang cache 7× GitHub.

  • Tanpa kartu
  • Masuk dengan GitHub
  • Batalkan kapan saja