매트릭스 빌드의 진짜 비용 모델 — 4축 매트릭스가 만든 $6,400/월
처음에 *3 OS × 3 Node 버전 = 9 잡* 으로 시작. 6개월 후 *4축 × 평균 5* 가 되어 *원래 빌드 시간의 100배*. 매트릭스 비용을 *처음부터* 계산하는 법.
매트릭스 빌드 는 거의 공짜 처럼 느껴진다. 한 줄 추가로 N 개 환경 검증. 그러나 4 축까지 가면 비용이 곱셈 으로 폭발한다.
이 글은 우리 비용 표 — 매트릭스 3 → 4 축 의 6 개월.
시작 — 3 축, 9 잡
matrix:
os: [ubuntu-22.04, ubuntu-24.04, macos-14]
node: [18, 20, 22]3 × 3 = 9 잡. CI 시간 예상 — 1 잡 4분 × 9 = 36 분 분산 (병렬 8 → 실제 8분).
만족했다. 모든 OS × 모든 Node 검증 을 8분에.
6 개월 후 — 4 축, 평균 5, 32~80 잡
매트릭스가 자라기 시작했다. 새 요구마다 한 축 추가:
matrix:
os: [ubuntu-22.04, ubuntu-24.04, macos-14, windows-2022] # +1
node: [18, 20, 22]
database: [postgres-15, postgres-16, mysql-8] # 새 축
region: [us-east-1, eu-west-1] # 새 축이제 4 × 3 × 3 × 2 = 72 잡. 일부 조합이 유효하지 않음 (windows + macos-only DB) 이라 실제 평균 60 잡.
CI 시간 — 잡당 평균 5분 (DB 셋업 추가). 60 잡 × 5분 = 300 분 분산. 병렬 8 → 실제 38분.
비용 표
초기 (3 축, 9 잡):
PR 당 CI 시간: 8 분
월 PR 수: 280
월 CI 시간: 2,240 분 = 37 시간
GitHub Actions 비용: ~$30 / 월
6개월 후 (4 축, 평균 60 잡):
PR 당 CI 시간: 38 분
월 PR 수: 280 (변화 없음)
월 CI 시간: 10,640 분 = 177 시간
GitHub Actions 비용: ~$1,800 / 월
순 증가: $1,770 / 월 = $21,240 / 연이게 직접 비용. 간접 비용은 더 큼.
간접 비용
PR 당 추가 대기 시간: 30 분
월 PR 수: 280
월 엔지니어 대기 시간: 8,400 분 = 140 시간
연간 환산: ~$84,000 (engineer rate)직접 비용의 4배. 매트릭스 축 이 추가될 때마다 팀 전체 가 기다리는 시간 이 누적됨.
매트릭스 추가 결정 매트릭스
새 축 추가 전 에 점검:
| 질문 | 추가 정당화 |
|---|---|
| 이 조합에서 진짜 다른 동작 이 있나? | 같으면 추가 X |
| 그 동작 차이가 런타임에 detect 가능한가? | 가능하면 런타임 detection 으로 |
| 차이가 분기 1회 미만 발생하나? | 그럼 야간 매트릭스 로 분리 |
| 차이가 치명 한가, 마이너 한가? | 마이너면 축 X |
우리가 한 결정 — 축 분리
6 개월 후 우리는 매트릭스를 3 단계 로 분리.
1) PR 매트릭스 (모든 PR 마다):
os × node = 9 잡 (8분)
목적: 빠른 피드백
2) main merge 매트릭스 (merge 직후):
os × node × database = 27 잡 (15분)
목적: 통합 검증
3) 야간 매트릭스 (매일 새벽 1회):
os × node × database × region = 60 잡 (38분)
목적: edge 조합 검증이 분리 후 PR 당 CI 시간이 8분 으로 회복. 월 비용이 $1,800 → $400. 간접 시간 $84,000 → $14,000.
매트릭스의 진짜 의미
매트릭스 빌드는 모든 PR 마다 모든 조합을 검증 하는 도구가 아니다. 언제 어떤 조합을 검증할지 의 분포 도구 다. 처음부터 이 분포를 명시적으로 설계 하지 않으면, 모든 조합이 모든 PR 에 깔리는 기본값 으로 가게 된다 — 그게 비용 폭발의 원인.
그래서 매트릭스 축을 추가해도 되나
CI 매트릭스에 새 축을 추가하는 결정은 위 4 단계 결정 매트릭스 를 통과했을 때만 정당하다. 매트릭스가 2 축 이상 인 팀이 축이 추가될 때마다 이 점검을 거치면, 6개월 후 비용 폭발을 막을 수 있다. 우리는 그 점검 없이 갔다가 직접 월 $1,800 + 간접 연 $84,000 까지 가서야 되돌렸다.
비슷한 글
에이전트 시대의 Eclipse 플러그인 — 작업 컨텍스트는 20년 전에도 문제였다
Mylyn 이 2000년대에 풀려던 문제와 지금 에이전트 컨텍스트 문제는 같습니다. 달라진 건 그 컨텍스트를 읽는 쪽에 사람만 있는 게 아니라는 점입니다.
김영상
에이전트 시대의 VS Code 확장 — 개발자는 에디터에서 무엇을 보는가
코드 작성 비용이 무너진 뒤 개발자의 시간은 판단과 승인으로 옮겨갔습니다. 그 일들이 왜 에디터 밖에 있으면 안 되는지, VS Code 확장을 만들며 내린 선택들.
이승백
이클립스는 그대로 쓰셔도 됩니다 — IDE 연동과 ITSM 연동에 대한 답
개발툴로 이클립스를 쓰는데 어떻게 연동되냐는 질문과, ITSM 과 연동되냐는 질문은 거의 항상 같이 나온다. 표준 Git 프로토콜이라는 답의 의미, 그리고 ITSM 연동 요구의 진짜 본질이 증적 체인이라는 이야기.
백재민