Skipbox

Нестабільні тести Cypress і Playwright у GitHub Actions: коли причина в ранері

End-to-end тести, які проходять на вашому ноутбуці й «плавають» у GitHub Actions, часто голодують, а не зламані. На ubuntu-latest приватного репозиторію Cypress чи Playwright, браузер, сервер вашого застосунку і його база даних ділять 2 CPU і 8 ГБ, тож сторінки рендеряться із запізненням, команда виходить за тайм-аут (у Cypress за замовчуванням 4 секунди) або браузер падає посеред запуску. Власна документація Cypress каже, що нестача ресурсів проявляється як нестабільні, повільні або на вигляд випадкові падіння і що їхній демонстраційний застосунок комфортно працює на 4 vCPU і 16 ГБ — удвічі більше, ніж має приватний ранер. Підтвердьте це, спостерігаючи за CPU і пам’яттю під час запуску, що падає, приберіть із тестів фіксовані очікування й спільні дані та дайте завданню машину, яка йому потрібна.

Skipbox дає таку машину за фіксованою ціною: 8 vCPU і 16 ГБ на runs-on: skipbox-8x16 за $79 на місяць, на машині, яку Skipbox розміщує лише для вашого облікового запису, де браузери й пакети лишаються встановленими між запусками. Хвилини без обмежень, тож повтори й шарди не збільшують рахунку.

З чим тести ділять ранер

E2E-завдання запускає більше, ніж тести. З посібника Cypress про продуктивність: сам Cypress, браузер, сервер вашого застосунку і всі фонові сервіси, від яких залежить застосунок. На ubuntu-latest приватного репозиторію вони ділять 2 CPU і 8 ГБ (GitHub-hosted runners). Публічний репозиторій отримує 4 CPU і 16 ГБ — саме той розмір, який Cypress називає комфортним для свого демонстраційного застосунку.

Ознаки машини, якій бракує ресурсів, з того самого посібника:

  • Тести сповільнюються в міру запуску
  • Браузер падає посеред запуску без явного падіння тесту
  • CPU чи пам’ять тримаються близько 100% під час запуску

Playwright запускає один браузер на воркер, і за замовчуванням воркерів — половина ядер. Його документація про CI радить workers: 1 у CI, щоб віддати перевагу стабільності й відтворюваності, тож кожен тест отримує всю машину, а паралельні тести пропонує лише на потужній self-hosted CI-системі.

Підтвердьте це, перш ніж щось міняти

  • Cypress: запустіть з DEBUG=cypress:server:util:process_profiler npx cypress run. Він виводить CPU і пам’ять кожні 10 секунд; CPU, що стабільно вище 100%, означає, що машина насичена.
  • Playwright: перезапустіть набір, що падає, з --workers=1. Якщо падіння зникли, межа була в машині, а не в тестах. Лишіть трасу на повторі (trace: 'on-first-retry'), щоб бачити, що робила сторінка в момент падіння.
  • Обидва: додайте перед тестами крок nproc && free -h, а у фоні — крок, що логує top -b -n 1 | head -15 кожні 15 секунд.

Збої, що зникають на більшій машині, були через ранер, і більша машина їх усуває. Тест, який і далі падає в тому самому місці, має власну проблему: наступний розділ її виправляє.

Виправте те, що належить тестам

  • Жодних фіксованих очікувань. cy.wait(2000) і page.waitForTimeout() проходять на швидкому ноутбуці й падають на повільному ранері. Чекайте натомість на елемент, маршрут чи відповідь.
  • Реєструйте перехоплення до запиту. cy.intercept, заданий після кліку, змагається із запитом.
  • Ізолюйте дані. Тести, що ділять користувача чи запис, падають, коли запускаються в іншому порядку або паралельно.
  • Увімкніть повтори в CI. Playwright позначає тест, що впав і потім пройшов, як нестабільний у своєму звіті; параметр retries у Cypress знову запускає тест, що впав, у cypress run. Повтори показують вам нестабільні тести. Вони їх не виправляють.

Скільки коштує шардинг

Шардинг ділить набір між завданнями, кожне на власній машині. Playwright приймає --shard=1/4 і об’єднує blob-звіти в останньому завданні; паралельний режим Cypress потребує запису в Cypress Cloud, який розподіляє специфікації між машинами.

Кожен шард — нова ВМ GitHub: вона встановлює пакети, завантажує браузер (Playwright не радить кешувати браузери, бо відновлення займає приблизно стільки ж, скільки завантаження), збирає й запускає ваш застосунок. Чотири шарди платять за це чотири рази, і похвилинна оплата рахує кожен. Шардинг допомагає, коли межа була в машині, але разом з тим множить підготовку.

Скільки коштує повільний, нестабільний набір

E2E-тести — остання перевірка перед злиттям, тож на них чекає вся команда, а нестабільний тест додає ще й перезапуск. За похвилинної оплати кожна з цих хвилин потрапляє в рахунок:

На 8 vCPU 20 000 хвилин коштують $422 на GitHub і $79 на Skipbox M. Суми GitHub — після використання, що входить у GitHub Team. Власні хвилини введіть у калькулятор на головній сторінці.

Дайте набору машину

Кожен тариф дає виділену машину вашого облікового запису, яка лишається між завданнями, за фіксованою ціною:

  • CPU і пам’ять на весь стек. skipbox-8x16 має ядра й пам’ять, які Cypress називає для свого демонстраційного застосунку, і ще більше ядер, тож браузер, застосунок і його база даних перестають конкурувати. На 8 vCPU Playwright за замовчуванням бере 4 воркери.
  • Браузери й пакети лишаються. Браузери Playwright у ~/.cache/ms-playwright, бінарник Cypress у ~/.cache/Cypress, кеш npm і образи Docker ваших сервісів уже на диску, коли стартує наступне завдання.
  • Хвилини без обмежень. Повтори, перезапуски й шарди не змінюють рахунку. Кількість vCPU у ваших тарифах визначає, скільки шардів працюють одночасно; решта чекає своєї черги.

Перехід — це один рядок

jobs:
  e2e:
    runs-on: skipbox-8x16 # was ubuntu-latest
    steps:
      - uses: actions/checkout@v6
      - uses: actions/setup-node@v6
        with:
          node-version: lts/*
      - run: npm ci
      - run: npx playwright install --with-deps
      - run: npx playwright test

skipbox-8x16 працює на тарифі M; пробний період запускає runs-on: skipbox (4 vCPU, 16 ГБ).

  1. Увійдіть у Skipbox через GitHub.
  2. Встановіть GitHub-застосунок Skipbox і виберіть репозиторії.
  3. Змініть runs-on і зробіть push.

Безпека

  • Машина належить лише вашому обліковому запису. Завдання жодної іншої компанії на ній не працюють.
  • Після кожного завдання облікові дані ранера, процеси й контейнери стираються. Браузери й кеші лишаються. «Чиста ВМ для кожного завдання» натомість дає кожному завданню нову машину.
  • Код від людей без права запису (наприклад, pull requests з форків) запускається на новій ВМ, яка читає ваші кеші, але не може їх змінити.

Подробиці — у розділі Як ізольовано завдання.

Спробуйте на нестабільному наборі

Пробний період безкоштовний: 7 днів або 3 000 хв роботи завдань, залежно від того, що закінчиться раніше, без картки. Перенесіть E2E-завдання на runs-on: skipbox, запустіть кілька разів і порівняйте кількість падінь і час кроків з GitHub.

Запитання й відповіді

Чому мої тести Cypress нестабільні в GitHub Actions, хоча локально проходять?

Часто тому, що ранер менший за ваш ноутбук. ubuntu-latest приватного репозиторію має 2 CPU і 8 ГБ, і на ньому працюють Cypress, його браузер, сервер вашого застосунку та його база даних. Коли вони конкурують, сторінки рендеряться із запізненням, команда перевищує стандартний тайм-аут у 4 секунди або браузер падає. Власний посібник Cypress про продуктивність каже, що нестача ресурсів проявляється як нестабільні, повільні або на вигляд випадкові падіння, і що їхній демонстраційний застосунок комфортно працює на 4 vCPU і 16 ГБ. Підтвердьте це через DEBUG=cypress:server:util:process_profiler, приберіть фіксовані очікування, а потім дайте завданню більше CPU і пам’яті.

Чи можуть CPU або пам’ять ранера бути причиною нестабільності тестів Playwright у CI?

Так. Кожен воркер Playwright керує власним браузером, а за замовчуванням воркерів — половина ядер машини. Документація Playwright про CI радить один воркер у CI заради стабільності, бо тоді кожен тест отримує всю машину. Якщо тести проходять з --workers=1 і «плавають» з більшою кількістю, межа — у машині: лишіть один воркер на 2 CPU або перейдіть на машину з більшою кількістю ядер і пам’яті й збільште воркерів там.

Як відрізнити ранер, якому бракує ресурсів, від нестабільного тесту?

Стежте за машиною під час запуску, що падає. Cypress виводить CPU і пам’ять кожні 10 секунд із DEBUG=cypress:server:util:process_profiler; для Playwright запустіть free -h і top у фоновому кроці або перезапустіть з --workers=1. Ранер, якому бракує ресурсів, показує CPU близько 100% або пам’ять біля межі, а падіння переходять між тестами й частішають ближче до кінця запуску. Нестабільний тест падає в тому самому місці й на швидкій машині.

Чи виправляє шардинг E2E-тестів нестабільність або вартість?

Сам собою — ні. Шардинг дає кожній частині набору власну машину, що допомагає, коли межа була в машині, але кожен шард знову встановлює пакети, завантажує браузери й запускає ваш застосунок, а похвилинна оплата рахує кожен шард. Паралельний режим Cypress ще й потребує запису в Cypress Cloud. На Skipbox браузери й пакети лишаються на вашій машині, а хвилини без обмежень, тож шарди й повтори нічого не додають до рахунку.

Якого розміру ранер потрібен E2E-тестам?

Почніть з того, що працює поряд із тестами: браузер, сервер застосунку і його сервіси. Демонстраційний застосунок Cypress комфортно працює на 4 vCPU і 16 ГБ. На Skipbox runs-on: skipbox-8x16 дає 8 vCPU і 16 ГБ за $79 на місяць, а skipbox-16x32 — 16 vCPU і 32 ГБ.

Чи можна спробувати безкоштовно?

Так. Пробний період триває 7 днів або 3 000 хв роботи завдань, залежно від того, що закінчиться раніше, без картки, на 4 vCPU і 16 ГБ. Перенесіть E2E-завдання на runs-on: skipbox, запустіть кілька разів і порівняйте падіння та час кроків з GitHub.

Оновлено 19 листопада 2026 р.

Швидший CI/CD із завжди прогрітим кешем

Ваш прогрітий ранер за фіксовану ціну

Хостинг наш. Ви змінюєте один рядок. 1/12 вартості GitHub за повного навантаження. Ціна фіксована, тож запускайте хоч цілий день. Місця для кешу в 7× більше, ніж у GitHub.

  • Без картки
  • Вхід через GitHub
  • Скасування будь-коли