Непрекъснато E2E тестване в GitHub Actions: пакетът тестове по цял ден на фиксирана цена
Агентите за програмиране правят push на код денонощно, а пакетът ви end-to-end тестове е проверката, която вижда това, което unit тестовете им не виждат: дали входът, плащането и страниците около една промяна още работят заедно. Екип, който пуска E2E веднъж на нощ, намира регресия, слята сутринта, едва след изпълнението следващата нощ, с цял ден сливания върху нея. Пускането на пакета тестове по цял ден оправя това, а при рънъри на минута е най-скъпото нещо в CI: един рънър с 4 vCPU, зает цял месец, струва $500,40 в GitHub.
Skipbox изпълнява цикъла за фиксирани $39 на месец с неограничени минути, на отделната ви машина, която пази браузърите и пакетите инсталирани между изпълненията. Преминаването е един ред, runs-on: skipbox.
Пускайте го при всеки push и в цикъл
Два тригера в един работен поток:
- При всеки push в pull request, за да се хване регресията, преди да бъде слята.
- По график срещу main или staging, на всеки 15 минути, за да се виждат до минути нестабилните тестове, промъкналите се регресии и счупванията отвън (sandbox за плащания, доставчик на удостоверяване, обновяване на браузър).
Най-краткият график в GitHub е на всеки 5 минути, върху последния commit на клона по подразбиране. Група за едновременност не позволява на цикъла да се трупа, а повторните опити на Playwright отбелязват тестовете, които се провалят и после минават, като нестабилни, така че тест, който се проваля веднъж на петдесет изпълнения, се показва два пъти на ден, вместо да се крие цяла седмица.
Колко струва цикълът на рънъри на минута
Цикъл на всеки 15 минути е 96 изпълнения на ден. С няколко части рънърът е зает през по-голямата част от деня, всеки ден:
| Месец E2E на 4 vCPU | GitHub | Skipbox S | Спестявате всеки месец |
|---|---|---|---|
| 10 000 минути | $102 | $39 | $63 |
| 20 000 минути | $222 | $39 | $183 |
| 30 000 минути | $342 | $39 | $303 |
| Зает цял месец | $500,40 | $39 | $461,40 |
Цифрите за GitHub са след включеното в GitHub Team използване. Четири части в цикъла означават четири реда като последния. Опитайте собствените си минути в калкулатора на началната страница.
Тази сметка е причината повечето екипи да не пускат E2E по цял ден, а плащат за това с часове: регресия, слята от агент през нощта, се открива сутринта, след като върху нея са дошли още commit-и, а търсенето ѝ с bisect отнема времето, което цикълът би спестил. Pull request-ите, започнати от агенти, продължават да растат (GitHub съобщи за над 40% през септември 2026 г., при 17% през март), а бюджет, който ограничава сметката на минута, спира задачите в средата на месеца, което изключва цикъла точно когато е нужен.
Сами да поддържате цикъла
За да го държат на рънъри, хоствани от GitHub, и на поносима цена, екипите стигат до това:
- Разреждане на графика до всеки час или всяка нощ и приемане на по-бавно откриване
- Настройване кои тестове при кой тригер да вървят, за да се вместят минутите в бюджета
- Разделяне на части за по-бързо приключване и после плащане на настройката на всяка част отново
- Или собствен самостоятелно хостван рънър за цикъла и поддържане на браузърите, ОС и диска му в изправност
Skipbox маха компромиса. Цикълът струва едно и също, колкото и често да върви, и никой не се грижи за машината.
Какво дава Skipbox на цикъла
Фиксирана цена за изпълнения по цял ден. Всеки план изпълнява задачите си денонощно с неограничени минути. Задачите в Skipbox не използват минути в GitHub, така че бюджет в GitHub никога не изключва цикъла.
| План | Машина | Цена |
|---|---|---|
| S | 4 vCPU · 16 GB | $39 на месец |
| M | 8 vCPU · 16 GB | $79 на месец |
| L | 16 vCPU · 32 GB | $149 на месец |
vCPU на плановете ви определят колко части се изпълняват едновременно: четири части с runs-on: skipbox се изпълняват заедно с четири плана S или с един L. Частите над това чакат реда си.
Настройка, която не се повтаря. Всеки план идва с отделна машина за профила ви, пазена между задачите. Браузърите на Playwright в ~/.cache/ms-playwright, кешът на npm и Docker образите, които използват приложението ви и услугите му, са на диска за следващото изпълнение.
Всяко изпълнение започва чисто. Идентификационните данни, процесите и всеки контейнер на рънъра се изтриват след всяка задача и се прави проверка на състоянието. Машина, която не я премине, се изгражда наново от чист образ. От 13 ноември 2026 г. работното ви копие и резултатът от компилацията му (target/ на Cargo) остават на отделната ви машина за следващите ви задачи; „Чиста VM за всяка задача“ дава на всяка задача нова машина.
Преминаването е един ред
name: E2E
on:
pull_request:
schedule:
- cron: "*/15 * * * *"
concurrency:
group: e2e-${{ github.ref }}
cancel-in-progress: ${{ github.event_name == 'pull_request' }}
jobs:
e2e:
runs-on: skipbox # was ubuntu-latest
steps:
- uses: actions/checkout@v6
- uses: actions/setup-node@v6
with:
node-version: lts/*
- run: npm ci
- run: npx playwright install --with-deps
- run: npx playwright test
- Влезте в Skipbox с GitHub.
- Инсталирайте приложението Skipbox в GitHub и изберете хранилищата.
- Сменете
runs-onи направете push.
Сигурност
- Машината е само на вашия профил. Задачи на друга компания никога не се изпълняват на нея.
- След всяка задача идентификационните данни, процесите и контейнерите на рънъра се изтриват. От 13 ноември 2026 г. работното ви копие и резултатът от компилацията му (
target/на Cargo) остават на отделната ви машина за следващите ви задачи; „Чиста VM за всяка задача“ дава на всяка задача нова машина. - Код от хора без права за запис (например pull request-и от форкове) се изпълнява на нова машина за еднократна употреба.
Подробностите са в как са изолирани задачите.
Изпробвайте го
Пробният период е безплатен за 7 дни или 3000 минути на задачи, което настъпи първо, без карта. Той изпълнява до 4 задачи с runs-on: skipbox наведнъж: преместете задачата с E2E тестовете, включете графика и гледайте цял ден изпълнения на фиксирана цена.
Често задавани въпроси
Да пускам ли end-to-end тестове при всеки push?
Да, когато агентите пишат голяма част от commit-ите ви. Unit тестът проверява функцията, която се е променила; end-to-end тестът проверява дали входът, плащането и страниците около тях още работят заедно. На рънър с фиксирана цена като Skipbox пускането на пакета тестове при всеки push и по график струва колкото пускането му веднъж на нощ.
Колко често може работен поток в GitHub Actions да се изпълнява по график?
Най-много на всеки 5 минути. Работните потоци по график се изпълняват върху последния commit на клона по подразбиране и може да стартират със закъснение, когато GitHub е натоварен. На всеки 15 минути е обичаен цикъл: 96 изпълнения на ден. В Skipbox сметката е същата на всеки 15 минути, както и на всеки 5.
Колко струва да пускам E2E тестове по цял ден в GitHub Actions?
Един рънър с 4 vCPU, зает през целия месец, струва $500,40 на рънъра на GitHub с 4 ядра, след включеното в GitHub Team използване. В Skipbox планът S изпълнява по една задача с 4 vCPU денонощно за фиксирани $39 на месец, с $461,40 по-малко.
Как да пускам части на Playwright едновременно в Skipbox?
vCPU на плановете ви определят колко задачи се изпълняват едновременно. Четири части с runs-on: skipbox и 4 vCPU се изпълняват заедно с четири плана S или един план L; при по-малко допълнителните части чакат реда си и стартират веднага щом някоя приключи.
Как да намеря нестабилните end-to-end тестове?
Включете повторните опити в CI. Playwright отбелязва тест, който се проваля и после минава при повторен опит, като нестабилен (flaky), отделно от миналите и неуспешните, и отчетът ги изброява. Пакет тестове в цикъл показва един и същ нестабилен тест много пъти на ден, така че той изпъква за ден, а не за спринт.
Обновено на 19 ноември 2026 г.