개요
북미 최대의 파이프라인 운영사인 이 회사는 여러 운영 거점 간 SCADA 데이터 동기화를 RabbitMQ 페더레이션에 의존하고 있습니다. 페더레이션 장애로 인해 파이프라인 모니터링 데이터 전달이 위험할 정도로 지연되고 있었습니다.
과제
RabbitMQ 페더레이션 재구축 시간이 크게 늘어났으며, 매우 많은 수의 토픽 익스체인지 바인딩이 문제를 키우고 있었습니다. 컨슈머는 알람을 피하려면 3분 이내에, 의무 가동 중단을 피하려면 10분 이내에 데이터를 받아야 합니다. 지난 1년 동안 페더레이션 장애가 여러 건 발생해 파이프라인 안전을 직접적으로 위협했습니다.
환경
페더레이션을 사용하는 RabbitMQ 3.13.7, 엔터프라이즈 SCADA 시스템, 매우 많은 수의 토픽 익스체인지 바인딩.
접근 방식
AceMQ는 2~4일간의 진단을 포함한 긴급 대응을 제공한 뒤 지속적인 기술 지원으로 이어 갔습니다. 팀은 페더레이션 아키텍처와 바인딩 최적화, 그리고 바인딩을 줄이기 위한 RabbitMQ Streams를 포함한 대안적 접근 방식을 분석했습니다.
해결책
- 과도한 토픽 익스체인지 바인딩과 연관된 페더레이션 장애의 근본 원인 진단
- 바인딩 최적화를 위한 RabbitMQ Streams를 포함한 대안 아키텍처 권고
- 긴급 대응 범위 산정과 즉각적인 로그 분석 제공
- 향후 인수합병과 시스템 확장에 대비한 장기 확장성 로드맵 설계
- 계층별 응답 시간을 갖춘 지속적인 기술 지원 계약 체결
성과
고객사는 페더레이션 안정성을 높이고 명확한 확장성 로드맵을 확보해, 파이프라인 모니터링 데이터 전달이 안전에 직결되는 시간 요건을 충족하도록 했습니다.