Hacker News인프라 · 데브옵스

GitHub, AI 에이전트 시대 맞춘 새로운 Git 저장소 아키텍처 공개

원제 GitHub's new Git storage architecture

105 포인트댓글 20
Key Point

에이전트 기반 개발이 대규모화되면서 단일 저장소의 동시 쓰기가 기하급수적으로 증가하는 문제를 GitHub이 근본적으로 해결했으며, 이는 AI 개발 도구의 실제 운영 가능성을 판단하는 중요한 기술 검증이다.

핵심 요약

  • GitHub이 새로운 Git 저장소 아키텍처 'Project Rubicon'을 발표했으며, 1초에 7,200개 푸시, 5,000명의 동시 작업자를 지원하고 요청에 따라 읽기가 확장된다.
  • 기존 방식의 핵심 문제는 단일 저장소에 점점 더 많은 에이전트가 몰리면서 수초 단위 쓰기가 지속적인 부하로 변한다는 점이다.
  • 새 아키텍처의 두 가지 설계 원칙은 '조정 최소화'와 '저장소와 연산 분리'이며, Git 객체는 Azure Blob Storage에, 참조 상태는 Ref-CAS라는 전용 복제 로그 서비스에 보관한다.
  • 참조 업데이트는 Ref-CAS에서 쿼럼 기반의 비교-스왑(compare-and-swap) 트랜잭션으로 처리되고, 각 참조는 독립적으로 리플리케이트되어 수만 건/초의 처리량을 지원한다.
  • 가상 레플리카(virtual replica)라는 처리 계층은 읽기·쓰기 캐시 역할을 하며 언제든 재구성 가능한 임시 자원으로 운영되고, 서버 부하에 따라 자동으로 추가된다.
  • 압축(compaction) 작업은 virtual replica에서 분리되어 별도 노드에서 백그라운드로 진행되므로, 저장소 스케일링 없이도 읽기·쓰기 성능을 일정하게 유지할 수 있다.
  • Git 객체는 불변이며 내용으로 명명되므로 두 작성자가 동의 없이 동시에 저장할 수 있고, 오직 참조 업데이트만 순서 보장이 필요해 조정 비용을 극적으로 줄인다.
  • 푸시 시 virtual replica는 팩을 Blob Storage에 업로드한 후 한 번의 Ref-CAS 트랜잭션으로 매니페스트에 등재하고 참조를 갱신하며, 읽기는 버전 확인으로 변경 없으면 단일 비교만 수행한다.
  • 압축 노드는 리스 기반으로 저장소 샤드 일부의 소유권을 행사하며, 여러 팩을 계층 구조로 병합해 팩 개수를 일정히 유지하면서도 푸시 대역폭을 수용한다.
  • 추후 개선 계획은 필요한 객체만 다운로드, 유형별 팩 구성, 부분 레플리카, 물리화된 뷰, 글로벌 레플리카, 제로 스케일 등을 포함한다.
  • 에이전트 효율성을 높기 위해 클론 없이 작동, 다중 파일 원자적 커밋 API, 실시간 이벤트 스트림을 계획 중이며, Git 자체의 경량 클론, 숨겨진 확장 비용 제거, 빠른 히스토리 워크, 일반적 오류 감지 개선도 진행한다.
  • 현재 제한된 프라이빗 프리뷰 상태이며 내년 초 광범위한 롤아웃을 예정하고 있다.
AI 요약 안내

AI가 한국어로 정리한 내용입니다. 정확한 정보는 원문을 확인해 주세요.

요약 원칙 ↗