행 중심 vs 열 중심 저장소, 데이터베이스 성능을 나누는 갈림길
Key Point
데이터베이스의 저장 구조 선택이 쿼리 성능, 압축률, CPU 명령어 최적화에 미치는 근본적 영향을 이해하면 각 시스템의 설계 선택과 한계를 파악할 수 있다.
핵심 요약
- 데이터베이스는 행(row) 중심 또는 열(column) 중심으로 데이터를 저장하는데, 이는 물리적 배치 방식일 뿐 SQL 쿼리와 결과는 동일하다.
- 행 중심 저장소(Postgres, MySQL)는 각 레코드의 모든 필드를 함께 보관해 개별 레코드 조회·수정에 유리하고, 열 중심 저장소(DuckDB, ClickHouse)는 같은 타입의 데이터를 모아 보관해 분석 쿼리에 유리하다.
- AVG 같은 분석 쿼리에서 필요한 열만 접근할 때, 행 중심 방식은 48바이트 레코드에서 4바이트 값만 필요해도 전체 48바이트를 캐시 라인으로 가져와야 하는 비효율이 발생한다.