On this page
그렇습니다. Redis 메시지 큐는 현실적인 선택지이며, 만드는 방법은 세 가지입니다. 단순한 작업 분배를 위한 리스트, 아무것도 저장하지 않는 보내고 잊는(fire-and-forget) 브로드캐스트를 위한 Pub/Sub, 그리고 ack와 at-least-once 전달을 지원하는 컨슈머 그룹을 위한 Streams입니다. 이 중 실제 브로커처럼 동작하는 것은 Streams뿐입니다. 어느 방식을 택하든 포기해야 하는 것은 라우팅, 메시지별 TTL, 우선순위, 데드레터 처리이며, 결국 이 기능들을 직접 작성하게 됩니다.
문제는 Redis가 이 일을 할 수 있느냐가 아닙니다. 할 수 있습니다. 문제는 처음으로 무언가 실패했을 때 어떤 일이 벌어지느냐입니다.
리스트 vs Pub/Sub vs Streams
| 리스트 | Pub/Sub | Streams | |
|---|---|---|---|
| 패턴 | 작업 큐 | 브로드캐스트 | 컨슈머 그룹을 갖춘 로그 |
| 키스페이스에 영속화 | 예 | 아니요 | 예 |
| 전달 보장 | 기본적으로 at-most-once | at-most-once | 그룹 사용 시 at-least-once |
| ack | 내장 기능 없음 | 없음 | XACK 및 대기 목록 |
| 컨슈머 그룹 | 아니요 | 아니요 | 예 |
| 이력 재생 | 불가 — 꺼낸 항목은 사라짐 | 불가 | 가능, ID 범위 기준 |
| 여러 독립 리더 | 아니요 | 예, 모두 사본을 받음 | 예, 그룹별 |
| 주요 용도 | 백그라운드 작업 | 캐시 무효화, 알림 | 내구성이 필요한 이벤트 처리 |
이 글에서 한 가지만 기억하신다면 이것입니다. Pub/Sub는 설계상 메시지를 잃으며, 이는 버그가 아닙니다. Redis 공식 문서도 이를 분명히 밝히고 있습니다.
Redis 리스트를 메시지 큐로 쓸 수 있을까?
네, 그리고 이것은 가장 오래된 Redis 메시지 큐 패턴으로, 지금도 많은 백그라운드 작업 처리에 알맞은 답입니다.
프로듀서는 LPUSH로 넣습니다. 워커는 폴링 대신 항목이 들어올 때까지 기다리는 BRPOP으로 블로킹합니다. 같은 키에 여러 워커가 붙으면 서로 경쟁하며, 각 항목은 정확히 그중 하나에게 전달됩니다. 이미 운영 중인 인프라 위에서 명령 두 개로 작업 큐가 완성됩니다.
LPUSH jobs:email '{"to":"user@example.com","template":"welcome"}'
BRPOP jobs:email 0장애 유형은 뻔합니다. BRPOP은 항목을 제거해 워커에게 넘깁니다. 처리 도중 그 워커가 죽으면 항목은 사라집니다. 처리 중이었다는 사실을 아는 곳도, 다시 전달해 줄 곳도 없습니다.
완화책은 신뢰성 큐(reliable queue) 패턴입니다. 항목을 꺼내는 대신 BLMOVE(또는 이전 버전의 BRPOPLPUSH)로 워커별 처리 중 리스트에 원자적으로 옮기고, 작업이 끝나면 그 리스트에서 삭제합니다. 처리 중 리스트에 남겨진 항목은 복구할 수 있습니다.
이 방식은 잘 동작하며, 많은 운영 시스템이 이 위에서 돌아갑니다. 다만 무엇을 만들었는지 짚어 보십시오. ack 메커니즘, 방치된 처리 중 리스트를 찾아내는 정리 프로세스, 그리고 재시도 정책입니다. 이것들은 브로커의 기능인데, 이제 귀사 애플리케이션 안에 들어와 귀사 팀이 유지보수하고, 귀사가 테스트한 만큼만 검증된 상태가 됩니다.
Redis Pub/Sub는 전달을 보장할까?
아닙니다. 그리고 이것은 Redis 메시지 큐로 가장 자주 오해받으면서도 그 용도에 가장 맞지 않는 메커니즘입니다.
SUBSCRIBE는 채널에 대한 관심을 등록하고, PUBLISH는 현재 구독 중인 모든 대상에게 보냅니다. Redis 문서는 이것이 무엇을 의미하는지 분명하게 밝힙니다.
Redis의 Pub/Sub는 at-most-once 메시지 전달 시맨틱을 따릅니다. 이름 그대로, 메시지는 전달되더라도 한 번만 전달됩니다. Redis 서버가 메시지를 보내고 나면 다시 보낼 기회는 없습니다. 구독자가 메시지를 처리하지 못하면(예: 오류나 네트워크 연결 끊김) 그 메시지는 영원히 사라집니다.
아무것도 저장되지 않습니다. 재시작 중이거나, 배포 중이거나, 잠시 네트워크가 분리되었거나, 단지 느린 구독자는 그동안 발행된 모든 메시지를 영구히 놓치며, 그런 일이 있었다는 신호조차 받지 못합니다.
그래서 Pub/Sub는 캐시 무효화, 실시간 대시보드 업데이트, 접속 상태 알림처럼 다음 메시지가 놓친 메시지를 무의미하게 만드는 좁은 범위의 작업에는 훌륭합니다. 반대로 주문 처리, 결제, 또는 나중에 누군가 경위를 설명하라고 요구할 만한 모든 작업에는 맞지 않습니다.
유용한 세부 사항 두 가지가 있습니다. Pub/Sub는 키스페이스와 무관하므로, 데이터베이스 10에서 발행한 메시지가 데이터베이스 1의 구독자에게도 도달합니다. 환경별로 구분해야 한다면 채널 이름에 접두사를 붙이십시오. 또한 클러스터 배포에서 샤딩된 Pub/Sub(SSUBSCRIBE, SPUBLISH)는 메시지를 클러스터 버스 전체에 전파하지 않고 하나의 샤드 안에 한정하며, 이것이 Pub/Sub를 수평 확장하는 방법입니다.
Redis Streams를 쓰면 Redis가 진짜 메시지 큐가 될까?
가장 근접한 방법입니다. Streams에 이르러 Redis는 억지로 큐처럼 쓰는 데이터 구조에서 벗어나, 작업 파이프라인을 무리 없이 운영할 수 있는 무언가가 됩니다.
XADD는 엔트리를 추가하고 <milliseconds>-<sequence> 형식의 시간순 ID를 반환합니다. 엔트리는 키스페이스에 영속화됩니다. XREAD는 새 엔트리를 기다리며 블로킹할 수 있습니다. 컨슈머는 XRANGE로 과거 범위를 읽을 수 있습니다.
핵심 기능은 컨슈머 그룹입니다.
XGROUP CREATE events mygroup $
XREADGROUP GROUP mygroup consumer1 STREAMS events >
XACK events mygroup 1692632086370-0각 엔트리는 그룹 안의 컨슈머 하나에게 전달되며, 여러 그룹이 같은 스트림을 독립적으로 소비할 수 있습니다. 전달된 엔트리는 XACK로 ack될 때까지 해당 그룹의 Pending Entries List에 남습니다. 백로그는 XPENDING으로 확인합니다. 처리되지 않은 엔트리를 남긴 채 컨슈머가 죽으면, 다른 컨슈머가 XCLAIM이나 XAUTOCLAIM으로 소유권을 가져와 작업을 마무리할 수 있습니다.
이 조합으로 at-least-once 전달이 가능해집니다. 컨슈머가 실패해도 아무것도 유실되지 않지만, 크래시 직전에 처리된 엔트리는 다시 전달될 수 있습니다. 따라서 컨슈머는 멱등성을 갖춰야 합니다. 이는 at-least-once 브로커라면 어디든 요구하는 조건이며 Redis의 결함이 아닙니다. 다만 중복 결제를 보기 전까지는 다들 잊고 지내는 조건입니다.
Streams는 상한을 두지 않으면 끝없이 커집니다. XADD는 MAXLEN을 받으며, XTRIM은 사후에 이를 처리합니다. ~ 형식은 근사치로 트리밍하며 정확한 트리밍보다 훨씬 저렴합니다. MINID는 개수가 아니라 엔트리 ID 기준으로 트리밍하므로 시간 기반 보존에 적합합니다. 설계 단계에서 하나를 정하십시오. 인메모리 저장소에서 상한 없는 스트림은 시한폭탄 같은 메모리 고갈 장애입니다.
진짜 브로커와 비교해 무엇을 포기하게 될까?
Redis Streams는 전달 보장의 격차를 메워 줍니다. 다른 격차까지 메워 주지는 않습니다.
- 라우팅. RabbitMQ는 퍼블리셔와 큐 사이에 익스체인지를 둡니다. direct, topic, fanout, headers 익스체인지가 라우팅 키와 속성을 바탕으로 메시지가 도착할 곳을 설정으로 결정합니다. Redis에는 이에 해당하는 기능이 없으며, 퍼블리셔는 이름이 정해진 키에 씁니다. 콘텐츠 기반 라우팅은 모두 직접 작성하는 코드가 되고, 토폴로지와 계속 동기화해야 하는 또 하나의 관리 대상이 됩니다.
- 메시지별 TTL. RabbitMQ는
expiration속성을 통한 메시지별 TTL과 큐별 TTL을 지원하며, 둘 다 설정되면 더 낮은 값을 적용합니다. 까다로운 점도 솔직하게 문서화되어 있습니다. "만료된 메시지는 큐의 맨 앞에 도달했을 때에만 실제로 폐기됩니다." Redis의 TTL은 키 전체에 적용될 뿐, 개별 리스트 항목이나 스트림 엔트리에는 적용되지 않습니다. 메시지 하나만 만료시키고 이웃한 메시지는 그대로 두는 일을 Redis는 하지 않습니다. - 우선순위. RabbitMQ는 우선순위 큐를 지원합니다. Redis에는 리스트 항목이나 스트림 엔트리에 대한 우선순위 개념이 없습니다. 이를 흉내 내려면 여러 키와 그것을 순서대로 확인하는 워커가 필요한데, 이는 브로커가 이미 해결한 기아(starvation) 문제를 다시 끌어들입니다.
- 데드레터 처리. RabbitMQ는 거부, TTL 만료, 큐 길이 제한, 쿼럼 큐의 전달 횟수 한도 초과 시 자동으로 데드레터 처리합니다. Redis Streams는 원재료만 제공합니다.
XPENDING으로 멈춘 항목을 볼 수 있고 전달 횟수도 추적되지만, 독성 메시지(poison message)를 격리용 스트림으로 보내고, 재시도 횟수를 제한하고, 이에 대한 알림을 거는 일은 전부 귀사 코드의 몫입니다. - 전달 횟수 집계와 재시도 정책. 앞 항목과 관련 있지만 따로 짚을 가치가 있습니다. 브로커는 전달 한도를 설정값으로 제공합니다. Redis에서는 카운터를 읽고 어떻게 할지 직접 결정해야 하며, 그것도 모든 곳에서, 일관되게, 앞으로도 계속 해야 합니다.
그렇다고 Redis가 잘못된 선택이 되는 것은 아닙니다. 선택이 일종의 거래가 될 뿐입니다. 시스템을 하나 더 운영하지 않는 대가로, 다른 곳에서는 기본으로 제공되는 기능을 직접 책임지는 것입니다.
영속성 측면의 주의 사항은 무엇일까?
Redis는 디스크에 기록하는 인메모리 저장소입니다. 크래시 시 얼마나 잃는지는 설정에 따라 결정되며, Redis가 직접 공개한 수치를 알아 둘 가치가 있습니다.
- RDB는 설정된 저장 시점마다 특정 시점 스냅샷을 만듭니다. Redis 문서는 노출 위험을 직접적으로 설명합니다. "보통 5분 이상 간격으로 RDB 스냅샷을 생성하므로, 어떤 이유로든 Redis가 정상 종료 없이 멈추면 최근 몇 분간의 데이터를 잃을 각오를 해야 합니다." 스냅샷 생성은 프로세스를 fork하기도 하는데, 데이터셋이 크면 이 fork로 서버가 잠시 멈출 수 있습니다. 이는 실제 운영에 영향을 주는 현상으로, Redis 고가용성 관련 작업에서 다른 장애 유형과 함께 다루고 있습니다.
- AOF는 모든 쓰기 명령을 기록하며, fsync 정책이 세 가지 있습니다.
appendfsync always는 가장 안전하지만 가장 느립니다.appendfsync everysec는 권장 기본값이며, Redis는 "재해가 발생하면 1초 분량의 데이터를 잃을 수 있다"고 설명합니다.appendfsync no는 커널에 맡깁니다.
관계형 데이터베이스에 준하는 내구성을 원한다면 둘 다 사용하라는 것이 Redis의 권고입니다. 큐잉 관점에서는 두 가지 결과가 따릅니다.
- 프로듀서에게 ack된 메시지가 반드시 디스크에 기록된 것은 아닙니다.
everysec에서는 언제든 최대 1초 분량의 수락되었지만 기록되지 않은 작업이 존재합니다. - 복제는 비동기입니다. 프라이머리에 장애가 나면 ack되었지만 아직 복제되지 않은 쓰기를 잃을 수 있습니다. Redis가 속도를 위해 모든 곳에서 택하는 것과 같은 절충입니다.
요구 사항이 "이 메시지는 절대 잃어서는 안 된다"라면 Redis를 그에 가깝게 설정할 수는 있지만, 지연 시간으로 대가를 치르게 되며, 설정을 가정하지 말고 반드시 검증해야 합니다.
Redis가 정말 올바른 선택인 경우는 언제일까?
다음과 같은 경우 큐잉에 Redis를 사용하십시오.
- Redis가 이미 아키텍처에 있고, 브로커를 추가하면 운영 부담이 하나 더 늘어나는 경우
- 토폴로지가 단순한 경우 — 프로듀서에서 워커 풀 하나로, 콘텐츠 기반 라우팅 없음
- 전달 보장보다 지연 시간이 중요하고, 유실된 작업을 다시 실행해도 괜찮은 경우
- 처리량이 많고 메시지 수명이 짧은 경우 — 인메모리 저장소가 바로 이를 위해 만들어졌습니다
- 팀이 ack, 재시도, 데드레터 로직을 애플리케이션 코드로 직접 관리하는 데 익숙한 경우
다음과 같은 경우 RabbitMQ를 사용하십시오.
- 라우팅이 단순하지 않아 코드로 짜기보다 설정으로 관리하고 싶은 경우
- 메시지별 TTL, 우선순위, 데드레터 처리가 브로커 기능으로 필요한 경우
- 전달 보장이 컴플라이언스 문서나 고객 계약서에 명시되는 경우
- 같은 퍼블리셔의 메시지 중 서로 다른 부분집합을 컨슈머마다 받아야 하는 경우
- 관리 UI, 큐별 지표, 정책 같은 운영 도구를 직접 만들지 않고 쓰고 싶은 경우
둘은 상호 배타적이지 않으며, 실제로 가장 탄탄한 아키텍처는 둘 다 사용합니다. 캐싱, 요청 속도 제한, 임시 상태, 빠른 프로세스 내 팬아웃에는 Redis를, 보장이 필요한 메시지에는 RabbitMQ를 씁니다. 이렇게 역할을 나누는 방법은 Redis와 RabbitMQ를 함께 운영하기에서 정리했습니다.
함께 살펴볼 만한 비교가 두 가지 더 있습니다. 워크로드가 여러 독립 컨슈머가 각자의 속도로 재생하는 추가 전용(append-only) 이벤트 로그라면, Redis Streams와 RabbitMQ 모두 맞지 않는 구조입니다. RabbitMQ Streams vs Apache Kafka를 참고하십시오. 또한 확실한 전달을 위해 오픈소스 브로커와 상용 브로커를 비교하고 있다면 IBM MQ vs RabbitMQ에서 그 내용을 다룹니다.
저희가 가장 자주 보는 실패 패턴은 Redis를 선택한 것 자체가 아닙니다. Streams가 필요했던 작업에 Redis Pub/Sub를 택하거나, 리스트를 택했다가 아무도 손대고 싶어 하지 않는 3년치 ack 로직이 쌓여 있음을 뒤늦게 발견하는 것입니다. 실제로 필요한 보장 수준에 맞는 메커니즘을 고르고, 어떤 것을 골랐는지 기록해 두십시오.
Redis와 RabbitMQ에 대해 AceMQ와 상담하십시오
Redis가 감당해야 할 몫보다 더 많은 큐잉 책임을 지고 있는지 확신이 서지 않으십니까? AceMQ는 Redis 기술 지원 및 컨설팅과 RabbitMQ 컨설팅으로 양쪽을 모두 다룹니다. AceMQ 엔지니어와 상담하십시오.
자주 묻는 질문
Redis를 메시지 큐로 사용할 수 있나요?
네. Redis는 세 가지 메커니즘을 제공합니다. 단순한 작업 큐를 위한 리스트, 보내고 잊는(fire-and-forget) 브로드캐스트를 위한 Pub/Sub, 그리고 at-least-once 전달을 지원하는 컨슈머 그룹을 위한 Streams입니다. 이 중 브로커와 가장 비슷하게 동작하는 것은 Streams입니다. 그것으로 충분한지는 전달 외에 무엇이 더 필요한지에 달려 있습니다.
Redis는 메시지 브로커인가요?
RabbitMQ와 같은 의미의 브로커는 아닙니다. Redis는 그 위에 큐잉을 구현할 수 있는 데이터 구조를 제공합니다. 익스체인지 기반 라우팅도, 대기 중인 작업에 대한 메시지별 TTL도, 우선순위 큐도, 내장 데드레터 메커니즘도 없습니다. 이것들은 브로커의 기능이며, Redis에서는 애플리케이션 코드가 됩니다.
Redis Pub/Sub와 Redis Streams의 차이는 무엇인가요?
Pub/Sub는 at-most-once이며 아무것도 저장하지 않습니다. Redis 공식 문서에도 구독자가 메시지를 처리하지 못하면 "그 메시지는 영원히 사라진다"고 적혀 있습니다. Streams는 엔트리를 키스페이스에 영속화하고, ack를 지원하는 컨슈머 그룹을 제공하며, at-least-once 전달을 보장합니다. 메시지 유실이 중요하다면 이 차이가 곧 결정의 전부입니다.
Redis Pub/Sub는 메시지를 영속화하나요?
아닙니다. 발행된 메시지는 그 순간 구독 중인 대상에게만 전달되고 사라집니다. 연결이 끊겼거나, 재시작 중이거나, 잠시 과부하 상태인 구독자는 그동안 발행된 모든 메시지를 놓치며, 이를 복구할 방법도 없습니다.
Redis Streams 컨슈머 그룹은 어떻게 동작하나요?
XGROUP CREATE로 그룹을 만든 다음, 각 컨슈머가 새 엔트리를 뜻하는 특수 ID >를 지정해 XREADGROUP으로 읽습니다. 전달되었지만 ack되지 않은 엔트리는 XACK가 호출될 때까지 Pending Entries List에 남아 있습니다. 컨슈머가 죽으면 다른 컨슈머가 XCLAIM이나 XAUTOCLAIM으로 대기 중인 엔트리의 소유권을 가져갈 수 있습니다. 이것이 at-least-once를 가능하게 합니다.
Redis에서 메시지가 유실될 수 있나요?
네, 얼마나 유실되는지는 영속성 설정에 달려 있습니다. RDB 스냅샷은 특정 시점 기준이므로, Redis 문서는 비정상 종료 후 최근 몇 분간의 데이터를 잃을 각오를 해야 한다고 경고합니다. AOF와 기본값인 appendfsync everysec 조합에서는 1초 분량의 데이터를 잃을 수 있다고 Redis는 설명합니다. Pub/Sub 메시지는 아예 영속화되지 않습니다.
Redis가 RabbitMQ보다 빠른가요?
순수한 인메모리 연산만 보면 대체로 그렇습니다. 인메모리 데이터 저장소가 바로 그런 용도이기 때문입니다. 하지만 이 비교는 오해를 낳습니다. 보통 ack 없는 인메모리 푸시와, 내구성이 보장되고 라우팅되며 ack까지 받는 전달을 비교하고 있기 때문입니다. 둘을 동등하게 만들기 위해 영속성과 ack를 추가하면 격차는 크게 줄어듭니다.
RabbitMQ 대신 Redis로 큐잉을 해야 하는 경우는 언제인가요?
작업이 워커로의 단순한 팬아웃이고, Redis가 이미 스택에 있으며, 라우팅이 프로듀서 하나에서 컨슈머 풀 하나로 가는 구조이고, 장애로 작업을 잃더라도 다시 실행하면 복구되는 경우입니다. 라우팅 규칙, 메시지별 TTL, 우선순위, 데드레터 처리, 또는 컴플라이언스 문서에 명시할 수 있는 전달 보장이 필요하다면 RabbitMQ를 선택하십시오.
출처
Talk to an engineer
Need a hand with Redis?
Senior engineers who run it in production. Get a quote or a free consultation, no sales pitch.
가이드, 비교, 리서치

