전체 사례로 돌아가기

컨설팅산업 공통

실제로 실행하는 쿼리에 맞춘 모델링

디지털 신원 인증 서비스 기업

파티션 키와 클러스터링 순서를 재설계해 무한히 커지는 파티션을 없애고, 모든 노드를 건드리던 보조 인덱스 쿼리를 제거했습니다.

개요

한 신원 인증 서비스 기업은 관계형 테이블을 설계하듯 Cassandra 테이블을 모델링한 뒤, 기본 키로 처리할 수 없는 쿼리를 위해 보조 인덱스를 추가해 왔습니다. 일부 파티션은 기가바이트 단위로 커졌고, 인덱스 기반 쿼리는 링의 모든 노드로 퍼져 나갔습니다. AceMQ는 데이터 모델 재설계를 맡았습니다.

과제

Cassandra는 쿼리 패턴 중심의 모델링에는 보상을, 엔터티 중심의 모델링에는 대가를 치르게 합니다. 재설계는 파티션 증가에 상한을 두고, 플랫폼의 주요 쿼리를 단일 레플리카 세트에서 처리하게 하며, 점진적으로 도입할 수 있어야 했습니다. 이 기업은 테이블을 통째로 다시 만들기 위해 쓰기를 멈출 수 없었기 때문입니다.

환경

신원 확인 및 자격 증명 수명 주기 서비스를 뒷받침하는 Kubernetes 기반 Apache Cassandra.

접근 방식

AceMQ는 애플리케이션이 실행하는 모든 쿼리를 목록화하고, 이를 처리하는 데 필요한 테이블을 역으로 도출했으며, 팬아웃을 없앨 수 있는 곳에서는 비정규화를 받아들였습니다. 파티션 크기는 현재 데이터량이 아니라 수년간의 증가를 기준으로 예측했고, 마이그레이션은 이중 쓰기(dual write) 방식으로 설계해 전환 시 다운타임이 없도록 했습니다.

해결책

  1. 애플리케이션의 실제 쿼리 패턴을 목록화하고 이를 바탕으로 필요한 테이블 설계를 도출
  2. 수년간의 증가 예측을 기준으로 시간 및 해시 버킷팅을 도입해 파티션 증가에 상한을 설정
  3. 보조 인덱스 쿼리를 용도에 맞게 설계한 비정규화 테이블로 대체해 클러스터 전체 팬아웃을 제거
  4. 메모리 내 정렬 없이 범위 스캔과 페이지네이션을 처리하도록 클러스터링 키와 정렬 순서를 선택
  5. 쓰기 중단 없이 전환할 수 있도록 이중 쓰기 및 백필 마이그레이션 경로를 설계
  6. 향후 개발 과정의 회귀를 잡아내도록 파티션 크기 및 행 수 가드레일과 모니터링을 설정

성과

클러스터 전체로 퍼지던 팬아웃 쿼리가 핫 패스에서 사라졌고, 가장 큰 파티션들도 권장 상한의 한 자릿수 배 이내로 돌아왔습니다. 읽기 지연은 파티션 크기에 따라 들쭉날쭉하지 않고 키 공간 전체에서 예측 가능해졌습니다.

기술

Apache CassandraKubernetesKafkaPrometheus

Apache Cassandra 아키텍처 가이드가 필요하신가요?

AceMQ의 시니어 Apache Cassandra 엔지니어는 바로 이런 유형의 프로젝트를 수행한 경험이 있습니다. 아키텍처 가이드, 실무 문제 해결, 지속적인 매니지드 파트너십 등 무엇이 필요하든 도와드릴 준비가 되어 있습니다.