Skipbox

GitHub Actions’ta kararsız Cypress ve Playwright testleri: neden runner olduğunda

Dizüstü bilgisayarınızda geçip GitHub Actions’ta kararsızlaşan uçtan uca testler çoğu zaman bozuk değil, aç kalmıştır. Özel bir deponun ubuntu-latest runner’ında Cypress ya da Playwright, bir tarayıcı, uygulama sunucunuz ve veritabanı 2 CPU’yu ve 8 GB’ı paylaşır; bu yüzden sayfalar geç işlenir, bir komut zaman aşımını geçer (Cypress’te varsayılan 4 saniye) ya da tarayıcı çalıştırmanın ortasında çöker. Cypress’in kendi belgelerine göre kaynak açlığı kararsız, yavaş ya da görünüşte rastgele hatalar olarak ortaya çıkar ve örnek uygulamaları 4 vCPU ve 16 GB’ta, yani özel bir runner’ın iki katında rahat çalışır. Bunu başarısız bir çalıştırma sırasında CPU’yu ve belleği izleyerek doğrulayın, testlerdeki sabit beklemeleri ve paylaşılan verileri düzeltin ve işe ihtiyaç duyduğu makineyi verin.

Skipbox o makineyi sabit fiyata verir: runs-on: skipbox-8x16 ile ayda $79 karşılığında 8 vCPU ve 16 GB; tarayıcıların ve paketlerin çalıştırmalar arasında kurulu kaldığı, Skipbox’ın yalnızca hesabınız için barındırdığı makinede. Dakikalar sınırsızdır; yeniden denemeler ve parçalar faturaya eklenmez.

Testlerin runner’ı neyle paylaştığı

Bir E2E işi testlerden fazlasını çalıştırır. Cypress’in performans rehberine göre bunlar Cypress’in kendisi, tarayıcı, uygulama sunucunuz ve uygulamanızın bağlı olduğu tüm arka plan servisleridir. Özel bir deponun ubuntu-latest runner’ında bunlar 2 CPU’yu ve 8 GB’ı paylaşır (GitHub’ın barındırdığı runner’lar). Herkese açık bir deponunki 4 CPU ve 16 GB alır; bu, Cypress’in örnek uygulaması için rahat dediği boyuttur.

Aynı rehbere göre kaynak açlığı çeken bir makinenin belirtileri:

  • Testler çalıştırma ilerledikçe yavaşlar
  • Tarayıcı, açık bir test hatası olmadan çalıştırmanın ortasında çöker
  • Çalıştırma boyunca CPU ya da bellek %100’e yakın durur

Playwright her worker için bir tarayıcı başlatır ve varsayılanı çekirdeklerin yarısıdır. CI belgeleri, kararlılığı ve tekrarlanabilirliği öne almak için CI’da workers: 1 önerir; böylece her test makinenin tamamını alır. Paralel testleri ise yalnızca güçlü, self-hosted bir CI sisteminde önerir.

Bir şeyi değiştirmeden önce doğrulayın

  • Cypress: DEBUG=cypress:server:util:process_profiler npx cypress run ile çalıştırın. Her 10 saniyede CPU ve belleği yazdırır; sürekli %100’ün üstündeki CPU, makinenin doyduğu anlamına gelir.
  • Playwright: başarısız paketi --workers=1 ile yeniden çalıştırın. Kararsızlıklar durursa sınır testler değil, makineydi. Sayfanın başarısız olduğu anda ne yaptığını görmek için yeniden denemede trace’i açık tutun (trace: 'on-first-retry').
  • İkisi için de: testlerden önce bir adım ekleyin, nproc && free -h, ve arka planda her 15 saniyede top -b -n 1 | head -15 kaydeden bir adım.

Daha büyük bir makinede kaybolan hatalar runner’dandı ve daha büyük bir makine onları bitirir. Hâlâ aynı yerde başarısız olan bir testin sorunu kendisindedir: bir sonraki bölüm onu düzeltir.

Testlere ait olanı düzeltin

  • Sabit bekleme yok. cy.wait(2000) ve page.waitForTimeout() hızlı bir dizüstünde geçer, yavaş bir runner’da başarısız olur. Bunun yerine öğeyi, rotayı ya da yanıtı bekleyin.
  • Intercept’leri istekten önce kaydedin. Tıklamadan sonra kurulan bir cy.intercept istekle yarışır.
  • Verileri ayırın. Bir kullanıcıyı ya da kaydı paylaşan testler başka bir sırada ya da paralel çalıştığında başarısız olur.
  • CI’da yeniden denemeleri açın. Playwright başarısız olup sonra geçen bir testi raporunda kararsız (flaky) olarak işaretler; Cypress’in retries ayarı cypress run içinde başarısız bir testi yeniden çalıştırır. Yeniden denemeler size kararsız olanları gösterir. Onları düzeltmez.

Parçalara bölmenin maliyeti

Parçalara bölmek paketi işlere dağıtır, her biri kendi makinesinde. Playwright --shard=1/4 alır ve blob raporlarını son bir işte birleştirir; Cypress’in paralel modu spec’leri makinelere dağıtan Cypress Cloud’a kayıt gerektirir.

Her parça yeni bir GitHub VM’idir: paketleri kurar, tarayıcıyı indirir (Playwright tarayıcıları önbelleğe almamayı önerir, çünkü geri yükleme yaklaşık indirme kadar sürer), uygulamanızı derler ve başlatır. Dört parça bunu dört kez öder ve dakika başına faturalandırma her birini sayar. Makine sınırsa parçalara bölmek yardımcı olur, ama kurulumu da onunla birlikte çoğaltır.

Yavaş, kararsız bir paketin maliyeti

E2E testleri birleştirmeden önceki son kontroldür; bu yüzden tüm ekip onları bekler ve bir kararsızlık üstüne bir yeniden çalıştırma ekler. Dakika başına faturalandırmada bu dakikaların her biri faturalandırılır:

8 vCPU’da 20.000 dakika GitHub’da $422, Skipbox M’de $79 tutar. GitHub tutarları, GitHub Team’e dahil kullanım düşüldükten sonradır. Kendi dakikalarınızı ana sayfadaki hesaplayıcıya girin.

Pakete makineyi verin

Her plan, hesabınıza ayrılmış ve işler arasında kalan bir makineyle, sabit fiyata gelir:

  • Tüm yığın için CPU ve bellek. skipbox-8x16, Cypress’in örnek uygulaması için adlandırdığı çekirdeklere ve belleğe, üstüne daha fazla çekirdeğe sahiptir; böylece tarayıcı, uygulama ve veritabanı yarışmayı bırakır. 8 vCPU ile Playwright’ın varsayılanı 4 worker’dır.
  • Tarayıcılar ve paketler kalır. ~/.cache/ms-playwright içindeki Playwright tarayıcıları, ~/.cache/Cypress içindeki Cypress ikili dosyası, npm’in önbelleği ve servislerinizin Docker imajları bir sonraki iş başladığında diskte olur.
  • Sınırsız dakika. Yeniden denemeler, yeniden çalıştırmalar ve parçalar faturayı değiştirmez. Aynı anda kaç parçanın çalışacağını planlarınızın vCPU’su belirler; bunun ötesindeki parçalar sıralarını bekler.

Geçiş tek satır

jobs:
  e2e:
    runs-on: skipbox-8x16 # was ubuntu-latest
    steps:
      - uses: actions/checkout@v6
      - uses: actions/setup-node@v6
        with:
          node-version: lts/*
      - run: npm ci
      - run: npx playwright install --with-deps
      - run: npx playwright test

skipbox-8x16 bir M planında çalışır; deneme runs-on: skipbox çalıştırır (4 vCPU, 16 GB).

  1. GitHub ile Skipbox’a giriş yapın.
  2. Skipbox GitHub App’i yükleyin ve depoları seçin.
  3. runs-on satırını değiştirin ve push edin.

Güvenlik

  • Makine yalnızca hesabınıza aittir. Başka hiçbir şirketin işleri onda çalışmaz.
  • Her işten sonra runner’ın kimlik bilgileri, süreçleri ve container’ları silinir. Tarayıcılar ve önbellekler kalır. Her iş için temiz VM ayarı bunun yerine her işe yeni bir makine verir.
  • Yazma erişimi olmayan kişilerin kodu (örneğin fork’lardan gelen pull request’ler), önbelleklerinizi okuyan ama değiştiremeyen yeni bir VM’de çalışır.

Ayrıntılar işler nasıl yalıtılır sayfasında.

Kararsız pakette deneyin

Deneme 7 gün ya da 3.000 iş dakikası boyunca, hangisi önce dolarsa, ücretsizdir ve kart istemez. E2E işini runs-on: skipbox satırına taşıyın, birkaç kez çalıştırın ve kararsızlıkları ve adım sürelerini GitHub’dakilerle karşılaştırın.

SSS

Cypress testlerim neden GitHub Actions’ta kararsız ama yerelde geçiyor?

Çoğu zaman runner dizüstü bilgisayarınızdan küçük olduğu için. Özel bir deponun ubuntu-latest runner’ında 2 CPU ve 8 GB vardır; Cypress, tarayıcısı, uygulama sunucunuz ve veritabanı hepsi onda çalışır. Rekabet ettiklerinde sayfalar geç işlenir, bir komut 4 saniyelik varsayılan zaman aşımını geçer ya da tarayıcı çöker. Cypress’in kendi performans rehberine göre kaynak açlığı kararsız, yavaş ya da görünüşte rastgele hatalar olarak ortaya çıkar ve örnek uygulaması 4 vCPU ve 16 GB’ta rahat çalışır. Bunu DEBUG=cypress:server:util:process_profiler ile doğrulayın, sabit beklemeleri düzeltin, sonra işe daha fazla CPU ve bellek verin.

Playwright testlerinin CI’da kararsız olmasının nedeni runner’ın CPU’su ya da belleği olabilir mi?

Evet. Her Playwright worker’ı kendi tarayıcısını sürer ve varsayılan, makinenin çekirdeklerinin yarısıdır. Playwright’ın CI belgeleri kararlılık için CI’da tek worker önerir, çünkü o zaman her test makinenin tamamını alır. Testler --workers=1 ile geçip daha fazlasıyla kararsızlaşıyorsa sınır makinedir: 2 CPU’da tek worker’la kalın ya da daha çok çekirdeği ve belleği olan bir makineye geçip orada worker sayısını artırın.

Kaynak açlığı çeken bir runner’ı kararsız bir testten nasıl ayırt ederim?

Başarısız bir çalıştırma sırasında makineyi izleyin. Cypress DEBUG=cypress:server:util:process_profiler ile her 10 saniyede CPU ve belleği yazdırır; Playwright için arka planda çalışan bir adımda free -h ve top çalıştırın ya da --workers=1 ile yeniden çalıştırın. Kaynak açlığı çeken bir runner CPU’yu %100’e yakın ya da belleği sınıra yakın gösterir; hatalar testler arasında yer değiştirir ve çalıştırmanın ilerleyen kısmında kötüleşir. Kararsız bir test hızlı bir makinede de aynı yerde başarısız olur.

E2E testlerini parçalara bölmek kararsızlığı ya da maliyeti düzeltir mi?

Tek başına ikisini de düzeltmez. Parçalara bölmek paketin her bölümüne kendi makinesini verir; makine sınırsa bu yardımcı olur, ama her parça paketleri yeniden kurar, tarayıcıları yeniden indirir ve uygulamanızı yeniden başlatır; dakika başına faturalandırma da her parçayı sayar. Cypress’in paralel modu ayrıca Cypress Cloud’a kayıt gerektirir. Skipbox’ta tarayıcılar ve paketler makinenizde kalır ve dakikalar sınırsızdır; parçalar ve yeniden denemeler ek bir maliyete mal olmaz.

E2E testleri hangi runner boyutunu kullanmalı?

Testlerin yanında ne çalıştığından başlayın: tarayıcı, uygulama sunucusu ve servisleri. Cypress’in örnek uygulaması 4 vCPU ve 16 GB’ta rahat çalışır. Skipbox’ta runs-on: skipbox-8x16 ayda $79 karşılığında 8 vCPU ve 16 GB verir, skipbox-16x32 ise 16 vCPU ve 32 GB.

Ücretsiz deneyebilir miyim?

Evet. Deneme 7 gün ya da 3.000 iş dakikası sürer, hangisi önce dolarsa, kart istemez ve 4 vCPU ve 16 GB üzerinde çalışır. E2E işini runs-on: skipbox satırına taşıyın, birkaç kez çalıştırın ve hataları ve adım sürelerini GitHub’dakilerle karşılaştırın.

Güncellendi: 19 Kasım 2026

Her zaman hazır önbellekle daha hızlı CI/CD

Sabit fiyatla hazır bekleyen runner’ınız

Biz barındırırız. Siz tek satır değiştirirsiniz. Tam kullanımda maliyet GitHub’ın 1/12 kadarı. Fiyat sabit, yani gün boyu çalıştırın. GitHub’ın 7 katı önbellek alanı.

  • Kart gerekmez
  • GitHub ile giriş
  • İstediğiniz zaman iptal edin