Hacker News인프라 · 데브옵스

행 중심 vs 열 중심 저장소, 데이터베이스 성능을 나누는 갈림길

원제 Rows vs. Columns: How different are they, really?

122 포인트댓글 43
Key Point

데이터베이스의 저장 구조 선택이 쿼리 성능, 압축률, CPU 명령어 최적화에 미치는 근본적 영향을 이해하면 각 시스템의 설계 선택과 한계를 파악할 수 있다.

핵심 요약

  • 데이터베이스는 행(row) 중심 또는 열(column) 중심으로 데이터를 저장하는데, 이는 물리적 배치 방식일 뿐 SQL 쿼리와 결과는 동일하다.
  • 행 중심 저장소(Postgres, MySQL)는 각 레코드의 모든 필드를 함께 보관해 개별 레코드 조회·수정에 유리하고, 열 중심 저장소(DuckDB, ClickHouse)는 같은 타입의 데이터를 모아 보관해 분석 쿼리에 유리하다.
  • AVG 같은 분석 쿼리에서 필요한 열만 접근할 때, 행 중심 방식은 48바이트 레코드에서 4바이트 값만 필요해도 전체 48바이트를 캐시 라인으로 가져와야 하는 비효율이 발생한다.
  • 열 중심 저장소는 벡터 실행(vectorized execution)으로 수천 개 값의 배치를 한 번에 처리해 오버헤드를 줄이고, SIMD 명령어로 32개 값을 동시에 계산할 수 있다.
  • 같은 타입 데이터가 모여 있는 열은 경량 인코딩(lightweight encoding)으로 압축 효율이 높고, 압축된 상태에서도 임의 접근이 가능해 쿼리를 빠르게 실행할 수 있다.
  • 행 중심은 단일 레코드 접근에 1~2개 캐시 라인으로 충분하지만, 열 중심은 모든 필드가 분산되어 최소 5개 캐시 라인이 필요한 단점이 있다.
  • 벡터 실행과 압축, SIMD 최적화는 모두 열 중심 저장이 가능하게 하는 아키텍처에서 비롯되므로 대부분의 데이터베이스는 트랜잭션용 또는 분석용 중 하나로 설계된다.
AI 요약 안내

AI가 한국어로 정리한 내용입니다. 정확한 정보는 원문을 확인해 주세요.

요약 원칙 ↗