PostgreSQL Message Queue1

• 

  사내 메세지큐 기술 스택 전환: Kafka → PGMQ(PostgreSQL Message Queue) 사내에서 기존 메세지큐 기술 스택으로 Kafka 를 사용하고 있습니다. Confluent사의 라이브러리를 사용하여 Kafka Consumer 와 Publisher 를 구성하고, 각 도메인에 맞는 토픽을 생성해 데이터 흐름을 분리해왔습니다. 메시지는 토픽 단위 스트림으로 발행되고, 컨슈머 그룹이 이를 병렬로 처리하는 구조입니다. 이 방식은 대량 이벤트 처리나 로그 파이프라인처럼 “계속 흘러가는 데이터”를 소비하는 시나리오에서는 매우 강력합니다. 실제로 사내 초기 아키텍처 단계에서 Kafka는 전자상거래 주문 수집 로그, ERP 이벤트 브로드캐스팅 같은 데이터 중심 스트림 처리 영역에서 충분히 역할을 수행해왔습니다. 하지만, 시간이 흐르며 메시지 큐의 용도가 이벤트 스트림을 넘어 “업무 실행(Task E.. Message Queue 2025. 10. 8.