이 페이지의 내용
Elasticsearch 업그레이드는 처음 보기보다 리스크가 크고 운영 부담이 많다는 평판이 있으며, 실제 사례도 이를 뒷받침합니다. 문서로 남은 한 사례에서는 Elasticsearch 업그레이드가 원래 일정을 훌쩍 넘겨 18개월 동안 멈춰 있었습니다. 처음에 충분히 고려하지 못한 중간 릴리스 요건과 지속적인 운영 부담이 원인이었습니다.
이 글에서는 Elasticsearch 업그레이드가 실제로 멈추는 원인과, 멈추지 않는 업그레이드를 계획하는 방법을 다룹니다.
Elasticsearch 업그레이드는 왜 다른 인프라 업그레이드에 비해 자주 멈출까요?
두 가지 구조적 요인이 있으며, 실제로 멈춘 업그레이드 사례에서 둘 다 그대로 나타났습니다.
- 중간 버전 요건. 성숙한 분산 시스템이 대개 그렇듯, Elasticsearch도 오래된 메이저 버전에서 최신 버전으로 바로 건너뛰는 것을 항상 지원하지는 않습니다. 중간 업그레이드 단계가 필요한 경우가 많고, 단계마다 별도의 검증, 테스트, 그리고 (대개) 유지보수 시간대가 필요합니다. 실제 사례에서는 업그레이드 도중에 Elasticsearch 중간 업그레이드 릴리스 요건이 논의 사항으로 떠올랐습니다. 즉 팀이 작업 중간에 경로가 한 번에 건너뛸 수 있는 것이 아님을 알게 된 것인데, 작업 시작 전에 전체 버전 경로를 정리해 두면 피할 수 있는 흔한 계획상의 공백입니다.
- 인력 확보와 우선순위. 반드시 해야 하는 것이 아닌 업그레이드(일정을 강제하는 임박한 EOL이 없는 경우)는 다른 업무와 같은 엔지니어링 시간을 다툴 때 가장 먼저 뒤로 밀립니다. 멈춘 사례에서는 관련 팀원 한 명의 병가가 지연의 직접적인 원인으로 꼽혔습니다. 외부의 확정 기한이 없는 인프라 업그레이드 프로젝트의 인력 여유가 얼마나 빠듯한지 잘 보여 줍니다.
여러 버전을 건너뛰는 Elasticsearch 업그레이드를 시작하기 전에 무엇을 확인해야 할까요?
- 시작 버전과 목표 버전만이 아니라 전체 버전 경로부터 정리하십시오. 목표 업그레이드에 중간 단계가 필요한지 확인하고, 전체 도약을 하나의 연속된 프로젝트로 계획하고 실행할 수 있다고 가정하지 말고 각 중간 버전을 별도의 검증 체크포인트로 다루십시오.
- 최종 목표 버전만이 아니라 모든 중간 버전에서 클라이언트와 애플리케이션 호환성을 확인하십시오. 이전 Elasticsearch 클라이언트 라이브러리로 만든 애플리케이션은 최종 목표 버전과는 결국 호환되더라도, 중간 버전의 API에서는 다르게 동작하거나 아예 실패할 수 있습니다.
- 재인덱싱 시간과 리소스 비용을 반영하십시오. Elasticsearch의 메이저 버전 업그레이드에서는 데이터를 새 인덱스 형식으로 재인덱싱해야 하는 경우가 많습니다. 대용량 인덱스라면 금방 끝나는 작업이 아닙니다. CPU, 메모리, 디스크 I/O를 상당히 소모하므로, 부수적인 단계가 아니라 하나의 프로젝트 단계로서 일정과 리소스를 배정해야 합니다.
- 다른 우선순위와 경쟁하는 겸임이 아니라, 업무 시간이 보장된 전담 책임자를 지정하십시오. 18개월간 멈춘 사례는 업그레이드 책임이 보호받지 못할 때 어떤 일이 생기는지 그대로 보여 줍니다. 프로젝트가 극적으로 실패하는 것이 아니라, 그저 조용히 진척이 없을 뿐입니다.
메이저 버전 업그레이드는 업그레이드 작업 외에 어떤 운영 부담을 실제로 가져올까요?
Elasticsearch 업그레이드는 이전 버전에서는 아무것도 막지 않던 클러스터 구성, 인덱스 관리, 모니터링의 잠재적 문제를 드러내는 경향이 있으며, 이런 문제는 새 버전에서 눈에 띄거나 새로 문제가 됩니다. 다음 항목에 시간을 확보하십시오.
- 인덱스 수명 주기 관리(ILM) 정책 검증 — 이전 버전의 기본값에서 잘 동작하던 설정이 새 버전의 기본값에서는 다르게 동작할 수 있습니다
- 플러그인 및 연동 호환성 — 특정 Elasticsearch 버전에 묶인 Logstash, Kibana, 서드파티 연동은 각각 호환성을 확인해야 합니다
- 클러스터 상태 모니터링 변경 — 새 버전에서는 API 수준에서 '정상'의 모습이 달라지기도 하며, 이전 버전의 상태 의미를 전제로 한 기존 알림 규칙이 오작동할 수 있습니다
현재 위치에서 업그레이드해야 할까요, 새 클러스터를 구축해 마이그레이션해야 할까요?
둘 다 유효하며, 어느 쪽이 맞는지는 현재 클러스터의 안정성이 감당할 수 있는 운영 리스크의 크기와, 병렬 배포에 쓸 수 있는 인프라 예산에 달려 있습니다.
- 인플레이스 롤링 업그레이드는 소규모 클러스터에서는 대체로 더 빠르게 실행할 수 있고 중복 인프라가 필요 없지만, 운영 클러스터가 업그레이드 경로에 직접 놓이므로 업그레이드 도중 문제가 생겼을 때 깔끔하게 롤백할 여지가 적습니다.
- 재인덱싱 후 전환하는 병렬 클러스터 방식은 깔끔한 롤백 지점을 확보할 수 있습니다(새 클러스터를 확신할 때까지 기존 클러스터가 계속 운영됩니다). 대신 일시적으로 인프라를 중복 운영해야 하고, 전환 시점까지 새 클러스터를 최신 상태로 유지하기 위한 데이터 동기화 또는 재인덱싱 전략이 필요합니다.
특히 앞서 언급한 멈춘 사례처럼 중간 버전 호환성이 이미 알려진 리스크인, 여러 메이저 버전을 건너뛰는 업그레이드라면 병렬 클러스터 방식이 더 안전한 경우가 많습니다. 전환할 준비가 될 때까지 업그레이드 리스크를 실제 운영 트래픽과 완전히 분리할 수 있기 때문입니다.
Elasticsearch 업그레이드가 18개월씩 멈추는 프로젝트가 되지 않으려면 어떻게 해야 할까요?
- 일정을 확정하기 전에 모든 중간 단계를 포함한 전체 버전 경로를 먼저 범위로 정하십시오. 프로젝트 도중에 중간 버전 요건을 발견하는 일이 없어야 합니다.
- 이미 다른 업무로 가득 찬 사람의 부수 업무로 업그레이드를 다루지 말고, 업무 시간이 보장된 전담 책임자를 지정하십시오. 그 책임자가 자리를 비우게 되면(질병, 업무 재배치, 퇴사) 프로젝트가 조용히 멈추도록 두지 말고 어떻게 이어 갈지 명시적인 계획을 세워 두십시오.
- 가능하다면 실제로 일정을 강제하는 요인과 연결된 확정 기한을 정하십시오. 다가오는 EOL 날짜, 보안 요건, 다른 프로젝트의 의존성 등이 그런 요인입니다. 외부 기한이 없는 업그레이드일수록 무기한 뒤로 밀리기 쉽습니다.
- 기계적인 업그레이드 단계뿐 아니라 재인덱싱과 검증 시간을 명시적으로 예산에 반영하십시오. 메이저 버전 업그레이드에서 실제로 시간이 드는 부분은 대개 여기입니다.
Elasticsearch 업그레이드가 이미 멈춰 있다면 어떻게 할까요?
중단된 지점부터 그냥 다시 시작하지 말고 범위 재검토부터 하십시오. 프로젝트가 멈춘 이후 버전 상황(새로운 중간 버전 요건, 새로운 EOL 일정, 연동 호환성 변화)이 바뀌지 않았는지 확인하고, 책임자를 명확히 다시 지정하고, 인력이 배정된 구체적인 일정을 세운 다음 실행을 재개하십시오. 범위를 다시 검토하지 않고 재개한 업그레이드는 같은 근본 원인으로 다시 멈추기 쉽습니다.
다운타임 없는 인프라 메이저 버전 업그레이드 계획에 관해서는 다운타임 없이 RabbitMQ 3.x에서 4.x로 업그레이드하기를 참고하십시오. 롤링 방식과 병렬 방식의 트레이드오프가 그대로 적용됩니다.
멈췄거나 앞으로 진행할 Elasticsearch 업그레이드에 관한 도움 받기
멈춰 있거나 앞으로 진행할 Elasticsearch 메이저 버전 업그레이드를 준비 중이신가요? AceMQ는 일정을 확정하기 전에 모든 중간 단계를 정리하고, 클라이언트와 플러그인 호환성을 검증하고, 재인덱싱 시간을 산정하는 버전 경로 진단을 수행합니다. Elasticsearch 기술 지원을 받거나 업그레이드 경로에 대해 AceMQ 엔지니어와 상담하십시오.
자주 묻는 질문
Elasticsearch 업그레이드는 왜 다른 인프라 업그레이드보다 자주 멈추나요?
두 가지 구조적 요인 때문입니다. 하나는 중간 버전 요건으로, 업그레이드가 여러 단계로 나뉘고 단계마다 별도의 검증과 유지보수 시간대가 필요해집니다. 다른 하나는 빠듯한 인력으로, 확정된 지원 종료(EOL) 기한이 없는 업그레이드는 다른 프로젝트와 엔지니어링 시간을 다툴 때 가장 먼저 뒤로 밀립니다. 실제 사례에서는 미처 파악하지 못한 중간 버전 요건과 팀원의 병가가 겹쳐 프로젝트가 18개월간 멈췄습니다.
여러 버전을 건너뛰는 Elasticsearch 업그레이드를 시작하기 전에 무엇을 확인해야 하나요?
시작 버전과 목표 버전만 보지 말고, 모든 중간 단계를 포함한 전체 버전 경로부터 정리하십시오. 각 중간 버전에서 클라이언트와 애플리케이션 호환성을 확인하고, 재인덱싱에 드는 시간과 리소스 비용을 명시적으로 반영하며, 부수 업무로 취급하지 말고 업무 시간이 보장된 전담 책임자를 지정하십시오.
Elasticsearch 메이저 버전 업그레이드는 업그레이드 작업 외에 어떤 운영 부담을 가져오나요?
인덱스 수명 주기 관리(ILM) 정책 검증에 시간을 확보하십시오. 이전 버전의 기본값이 새 버전에서는 다르게 동작할 수 있기 때문입니다. 특정 버전에 묶인 Logstash, Kibana, 서드파티 도구의 플러그인 및 연동 호환성도 확인해야 합니다. 클러스터 상태 모니터링 변경도 대비해야 합니다. 새 버전에서는 API 수준에서 '정상'의 의미가 달라져 기존 알림 규칙이 오작동할 수 있습니다.
Elasticsearch를 현재 위치에서 업그레이드해야 하나요, 아니면 새 클러스터를 구축해 마이그레이션해야 하나요?
둘 다 유효한 방법입니다. 인플레이스 롤링 업그레이드는 소규모 클러스터에서는 더 빠르지만, 운영 환경이 업그레이드 경로에 직접 놓이고 롤백 여지가 적습니다. 재인덱싱 후 전환하는 병렬 클러스터 방식은 일시적으로 인프라를 중복 운영하는 비용이 들지만 깔끔한 롤백 지점을 확보할 수 있습니다. 특히 중간 버전 호환성이 이미 알려진 리스크인, 여러 메이저 버전을 건너뛰는 업그레이드라면 대개 병렬 클러스터 방식이 더 안전합니다.
Elasticsearch 업그레이드가 18개월씩 멈추는 프로젝트가 되지 않으려면 어떻게 해야 하나요?
일정을 확정하기 전에 모든 중간 단계를 포함한 전체 버전 경로를 먼저 범위로 정하십시오. 업무 시간이 보장된 전담 책임자를 지정하고, 그 사람이 자리를 비울 경우의 연속성 계획을 명시해 두십시오. 실제로 일정을 강제하는 요인과 연결된 확정 기한을 정하고, 재인덱싱과 검증 시간을 기계적인 업그레이드 단계에 뭉뚱그리지 말고 별도로 예산에 반영하십시오.
Elasticsearch 업그레이드가 이미 멈춰 있다면 어떻게 해야 하나요?
중단된 지점부터 그냥 다시 시작하지 말고 범위 재검토부터 하십시오. 프로젝트가 멈춘 이후 새로운 중간 버전 요건, 새로운 EOL 일정, 연동 호환성 변화 등 버전 상황이 바뀌지 않았는지 확인하고, 책임자를 명확히 다시 지정하고, 인력이 배정된 구체적인 일정을 세운 다음 실행을 재개하십시오.
멈춘 Elasticsearch 업그레이드가 기술적인 막다른 길인 경우는 드뭅니다. 거의 언제나 범위 설정과 책임 소재의 공백 문제입니다. 다시 시작하기 전에 전체 버전 경로를 정리하고, 책임자의 업무 시간을 보장하고, 실제 기한을 정하십시오.