Vercel 빌드 인프라 딥다이브: Hive 플랫폼 아키텍처

Vercel이 2023년 11월 도입한 내부 컴퓨트 플랫폼 "Hive"의 아키텍처를 공개한다. 멀티테넌트 환경에서 잠재적으로 악의적인 코드도 실행해야 한다는 전제 아래 설계됐으며, KVM 위에 Firecracker microVM("cell")을 올린 구조로 빌드 시간을 크게 단축했다. 프로비저닝 시간은 90초에서 5초로 단축됐고, 전체 빌드 시간은 20% 개선됐다.

핵심 포인트

Hive → Box(베어메탈) → Cell(microVM) 3계층 구조로 각 계층이 독립된 장애 경계를 갖는다
KVM + Firecracker microVM 조합으로 각 Cell에 전용 CPU/메모리를 할당하고 디스크/네트워크는 속도 제한을 적용한다
Box Daemon이 블록 디바이스 프로비저닝과 Firecracker 프로세스 스포닝을 담당, Cell Daemon이 컨테이너 런타임과 빌드 실행을 제어한다
Docker 이미지 캐싱 최적화로 박스 시작 시간 45초 단축, Secure Compute 고객 프로비저닝 90초→5초로 개선
전체 빌드 시간 20% 단축, 신규 Cell 프로비저닝 빌드 40% 감소, 전반적인 빌드 성능 30% 향상

상세 정리

설계 전제: 멀티테넌트 머신에서 잠재적으로 악의적인 코드를 실행할 수 있다는 가정 하에 보안과 성능을 동시에 달성하는 것이 핵심 과제였다
Hive(클러스터): 특정 리전 내에서 운영되는 최상위 클러스터 단위. 각 Hive는 독립된 장애 경계를 유지한다
Box(베어메탈): Hive 내에서 가상 머신을 호스팅하는 베어메탈 머신. Docker 이미지 캐싱 최적화로 박스 시작 시간을 약 45초 단축했다
Cell(microVM): Box 내의 가상 머신으로 각각 Firecracker 프로세스와 1:1 관계. 전용 CPU/메모리를 할당하고 디스크/네트워크는 속도 제한을 적용한다
Box Daemon: 블록 디바이스 프로비저닝, Firecracker 프로세스 스포닝, Cell과의 소켓 기반 통신을 담당한다
Cell Daemon: Cell 내부에서 컨테이너 런타임 조작과 빌드 실행을 제어한다
Control Plane: 클러스터 오케스트레이션, 잡 배치, 오토스케일링, 인스턴스 라이프사이클 관리를 담당한다
API: 최소화된 리전별 인터페이스로 주로 Cell 실행 요청을 처리한다
빌드 라이프사이클: Hive API가 사전 구성된 컨테이너 이미지로 빌드 요청을 수신. 사전 워밍된 Cell 풀에서는 즉시 시작, 신규 프로비저닝 시 약 5초 소요된다
리소스 효율: 빌드 완료 후 Cell은 즉시 소멸해 리소스를 반환한다
성과: 전체 빌드 시간 20% 단축, 신규 Cell 프로비저닝 빌드 40% 감소, Secure Compute 프로비저닝 90초→5초, 전반적인 빌드 성능 30% 향상

왜 읽나대규모 CI/CD 빌드 인프라를 설계하거나 멀티테넌트 환경에서 보안과 성능을 동시에 달성해야 하는 인프라 엔지니어에게 KVM + Firecracker 기반 마이크로VM 아키텍처의 실전 적용 사례를 제공한다.

Vercel Blog 블로그

원문은 여기서 이어서 읽을 수 있어요

원문 읽기

읽음 (0)

·takedown 요청

Vercel 빌드 인프라 딥다이브: Hive 플랫폼 아키텍처

이 글과 비슷한

대규모 도그푸딩: cdnjs를 Cloudflare 개발자 플랫폼으로 이전하다

Dependabot 길들이기: 업데이트 묶고, 주기 늦추고, 보안은 빠르게

Cloudflare, 프라이버시 프로토콜 디버깅 CLI pvcli 오픈소스 공개