Skipbox

AI 코딩 에이전트를 위한 CI: 루프마다 GitHub Actions를 20분씩 기다릴 때

AI 코딩 에이전트의 루프는 푸시하고, CI를 기다리고, 실패를 읽고, 고치고, 다시 푸시하는 거예요. 20분짜리 파이프라인이면 수정 다섯 번에 100분을 기다리고, 에이전트는 사람보다 많이 푸시해요. Anthropic의 CI 작업량은 6개월 만에 25배가 됐어요. 기다림은 이 순서로 줄이세요. 푸시 전에 에이전트가 린트, 타입 검사, 영향받는 단위 테스트를 돌리게 하세요. 새 푸시가 들어오면 풀 리퀘스트의 이전 실행을 취소하세요. 빠른 검사는 따로 작업으로 떼어, 실패가 1~2분 안에 돌아오게 하세요. 변경이 영향을 주는 테스트만 돌리세요. 그리고 새 VM에서 작업마다 반복되는 준비를 없애세요. Docker 레이어, 패키지 캐시, 빌드 결과를 작업 사이에도 남기는 머신에서 astro의 CI 작업은 GitHub의 528초에서 Skipbox의 30초가 됐어요.

Skipbox는 작업을 내 계정 전용 머신에서 돌리고, 그 머신이 작업 사이에도 그 상태를 남겨요. runs-on: skipbox 한 줄만 바꾸면 월 $39 정액에 실행 시간 무제한이에요. 에이전트가 오후 한나절에 스무 번을 푸시해도 청구액은 늘지 않고, GitHub 예산 때문에 작업이 멈추지도 않아요.

에이전트 루프가 CI를 병목으로 만드는 이유

Anthropic의 테스트 영향 분석 확장에 관한 글에 따르면, 6개월 동안 CI 작업량이 25배로 늘었어요. 글이 드는 이유는 둘이에요. Claude는 더 작고 잘게 나눈 PR을 선호하고, 에이전트는 밤과 주말에도 푸시해요. 사람은 수정을 모아서 내지만, 에이전트는 하나씩 푸시하고 기다려요. 파이프라인의 1분 1분을 루프마다 한 번씩 치르는 셈이에요.

1. 푸시 전에 잡을 수 있는 것은 잡기

가장 빠른 CI 실행은 실패하지 않는 실행이에요. CI가 돌리는 것과 같은 린트, 타입 검사, 단위 테스트 명령을 에이전트에게 주고, 푸시할 때마다 바꾼 파일에 대해 먼저 돌리게 하세요. 그러면 오타는 20분짜리 왕복이 아니라 에이전트 자기 머신에서 몇 초로 끝나요.

2. 새 푸시가 대신하는 실행 취소하기

지난 실행이 아직 도는 중에 에이전트가 수정을 푸시하면, 같은 풀 리퀘스트에 실행이 두 개 생겨요. 이전 것을 취소하세요(concurrency).

concurrency:
  group: ${{ github.workflow }}-${{ github.head_ref || github.run_id }}
  cancel-in-progress: true

github.head_ref는 풀 리퀘스트에만 있으므로, main에 대한 푸시는 각자 자기 그룹을 갖고 취소되지 않아요.

3. 빠른 검사를 먼저 보고하기

린트와 타입 검사는 앞에 needs: 없이 따로 작업으로 두고, 느린 스위트는 다른 작업으로 두세요. 에이전트는 E2E 작업이 끝난 뒤가 아니라, 첫 실패가 나오자마자 읽어요.

4. 변경이 영향을 주는 것만 돌리기

25배에 대한 Anthropic의 답은 변경마다 어떤 테스트를 돌릴지 정하는 테스트 영향 분석 서비스였어요. 대부분의 리포지토리는 더 작게 시작할 수 있어요. Turborepo라면 turbo run test --affected(Turborepo의 CI 가이드), 디렉터리 하나에만 관계있는 워크플로에는 경로 필터, 그리고 선택이 놓친 것을 잡기 위해 병합 뒤 main에서 전체 실행을 두세요.

5. 루프마다 같은 상태를 다시 만들지 않기

GitHub 호스팅 실행기에서는 작업마다 새 VM에서 시작해요. 툴체인을 다시 설정하고, 의존성 캐시를 받아서 풀고, Docker 레이어를 받거나 다시 빌드하고, 빌드는 아무것도 없는 데서 시작해요. 하루 100번의 에이전트 루프라면 기다림의 대부분이 이 준비예요. 작업 사이에도 디스크를 유지하는 실행기에는 이미 다 있어요.

실제 프로젝트를 돌려 본 결과예요. 워크플로는 그대로예요.

6. 실행 시간만이 아니라 동시 작업 수도 계획하기

여러 에이전트가 각자 행렬이 있는 풀 리퀘스트를 푸시하면 GitHub 표준 실행기의 동시 실행 한도에 닿아요. GitHub Free는 한 번에 20개, Pro는 40개, Team은 60개, Enterprise는 500개예요(한도). 넘으면 작업이 대기열에 들어가요. 분 단위 청구에서는 그 작업 하나하나가 비용이기도 하고, 지출 한도를 다 쓰면 "The job was not started because recent account payments have failed or your spending limit needs to be increased"와 함께 멈춰요(할 일).

Skipbox가 에이전트 CI에 해 주는 것

요금제마다 작업 사이에도 유지되는 내 계정 전용 머신이 따라와요.

  • 상태가 남아요. Docker 이미지, 레이어, 빌드 캐시. ~/.npm, pnpm 스토어, ~/.cache, Go·Gradle·Maven·Cargo 캐시. setup-*가 설치한 도구. Cargo의 target/이 든 체크아웃과, turbo 2 프로젝트의 최상위 .turbo도 남으므로, 다음 빌드는 지난 빌드가 멈춘 곳에서 이어서 해요.
  • 실행 시간은 무제한이고, GitHub 예산이나 지출 한도 때문에 Skipbox 작업이 멈추는 일은 없어요.
  • 동시 작업 수는 요금제의 vCPU예요. 계정이 가진 요금제의 vCPU 안에 들어가는 만큼 작업이 동시에 돌고, 나머지는 차례를 기다려요. 몇 개가 얼마나 기다리는지는 계정 페이지에 나와요. S 하나는 4 vCPU 작업을 한 번에 하나 돌리고, 요금제는 어떤 조합으로든 더할 수 있어요.
  • 에이전트 자신의 작업도 거기서 돌 수 있어요. 그 작업의 runs-on을 skipbox로 바꾸세요.

4 vCPU로 월 20,000분이면 GitHub는 $222를 청구하고, Skipbox S는 $39예요. 30,000분이면 $342예요.

옮기는 건 한 줄이에요

jobs:
  checks:
    runs-on: skipbox # was ubuntu-latest
  1. GitHub로 Skipbox에 로그인하세요.
  2. Skipbox GitHub App을 설치하고 리포지토리를 고르세요.
  3. runs-on을 바꾸고 푸시하세요.

보안

  • 머신은 내 계정만 써요. 다른 회사의 작업은 그 머신에서 돌지 않아요.
  • 작업이 끝날 때마다 실행기의 자격 증명, 프로세스, 컨테이너를 지우고, 남겨 둔 체크아웃 안의 git 자격 증명과 추적되지 않는 파일도 지워요. ‘작업마다 새 VM’을 켜면 작업마다 새 머신에서 돌아요.
  • 쓰기 권한이 없는 사람의 코드(포크에서 온 풀 리퀘스트 등)는 새 VM에서 돌고, 그 VM은 캐시를 읽을 수만 있고 바꿀 수는 없어요.

자세한 내용은 작업을 분리하는 방식에 있어요.

에이전트가 기다리는 작업으로 체험해 보세요

무료 체험은 7일 또는 작업 시간 3,000분 중 먼저 끝나는 쪽까지 무료이고, 카드가 필요 없어요. 에이전트가 기다리는 작업을 runs-on: skipbox로 옮기고, 에이전트가 두 번 푸시하게 한 뒤, 두 번째 실행을 GitHub와 비교해 보세요.

자주 묻는 질문

코딩 에이전트가 PR을 열고, CI를 20분 기다리고, 고치고, 또 기다려요. 에이전트 루프에 맞게 CI를 빠르게 하려면 어떻게 하나요?

에이전트가 기다리는 것을 이 순서로 줄이세요. 푸시 전에 에이전트가 린트, 타입 검사, 영향받는 단위 테스트를 돌리게 해서, 오타가 CI에서 처음 드러나지 않게 하세요. 새 푸시가 들어오면 풀 리퀘스트의 이전 실행을 취소하세요(concurrency와 cancel-in-progress). 빠른 검사는 따로 작업으로 떼어, 에이전트가 1~2분 안에 실패를 읽게 하세요. 변경이 영향을 주는 테스트만 돌리세요. 그리고 작업마다 반복되는 준비를 없애세요. Docker 레이어, 패키지 캐시, 빌드 결과를 작업 사이에도 남기는 머신에서, astro의 CI는 GitHub의 528초에서 Skipbox의 30초가 됐어요.

AI 에이전트 때문에 CI가 얼마나 늘어나나요?

Anthropic은 6개월 동안 CI 작업량이 25배로 늘었다고 썼어요. Claude가 더 작고 잘게 나눈 풀 리퀘스트를 선호하고, 에이전트가 밤과 주말에도 푸시하기 때문이에요. 워크플로가 취소하거나 건너뛰거나 범위를 좁히지 않으면, 그 푸시마다 워크플로 전체가 다시 돌아요.

PR 대부분을 AI 에이전트가 쓰는 팀에 가장 좋은 CI 구성은 무엇인가요?

에이전트에게 빨리 답하고, 푸시마다 청구하지 않는 구성이에요. 린트와 타입 검사를 먼저 보고하는 빠른 작업, 그 뒤의 느린 스위트, 풀 리퀘스트의 이전 실행 취소, 영향받는 테스트만 실행, 그리고 작업 사이에도 캐시를 남기는 실행기. Skipbox는 계정마다 전용 머신을 정액, 실행 시간 무제한으로 줘요. 한 번에 도는 작업 수는 계정이 가진 요금제의 vCPU만큼이에요.

에이전트가 GitHub의 동시 실행 한도에 걸리나요?

걸릴 수 있어요. GitHub 호스팅 표준 실행기는 GitHub Free에서 한 번에 최대 20개, Pro에서 40개, Team에서 60개, Enterprise에서 500개 작업을 돌리고, 나머지는 대기열에 들어가요. 여러 에이전트가 각자 행렬이 있는 풀 리퀘스트를 푸시하면 금방 닿아요. Skipbox에서는 계정 요금제의 vCPU 안에 들어가는 만큼 작업이 동시에 돌고, 나머지는 차례를 기다려요. 그래서 여러 에이전트를 한꺼번에 돌리는 팀은 요금제를 여러 개 두거나 더 큰 요금제를 써요.

에이전트 자신의 작업도 Skipbox에서 돌릴 수 있나요?

네. Linux 작업은 모두 runs-on으로 머신을 고르고, Claude Code의 액션을 돌리는 작업도 마찬가지예요. skipbox 레이블로 바꾸면 CI와 같은 머신에서 돌아요.

체험하는 데 비용이 얼마나 드나요?

들지 않아요. 무료 체험은 7일 또는 작업 시간 3,000분 중 먼저 끝나는 쪽까지이고, 카드가 필요 없고, 4 vCPU 작업을 한 번에 최대 4개까지 돌려요. 에이전트가 기다리는 작업을 runs-on: skipbox 레이블로 옮기고, 두 번째 실행의 시간을 재 보세요.

2026년 11월 16일 업데이트

캐시가 늘 살아 있는 더 빠른 CI/CD

캐시가 남는 전용 실행기를 정액으로

머신은 Skipbox가 준비해요. 바꿀 건 한 줄뿐이에요. 최대로 쓰면 비용은 GitHub의 1/12. 정액이라 하루 종일 돌려도 돼요. 캐시 용량은 GitHub의 7배.

  • 카드 불필요
  • GitHub로 로그인
  • 언제든 해지