[개발상식] #9. 메세지 큐(MQ)

1.메세지 큐(Message Queue)

• 메세지 지향 미들웨어(MOM)를 구현한 시스템으로 프로그램(프로세스) 간의 데이터를 교환할 때 통신하는 방법
• 메시지를 통해 분산되어 있는 시스템 간 Connector 역할을 하여 결합성을 낮추고 실시간 비동기식 데이터 교환
  → Producer : 메세지를 Queue에 전송하는 곳
  → Consumer : Queue의 메세지를 꺼내 처리하는 곳
  → Consuming : 메세지를 Queue에서 꺼내는 것

1-1. 메세지 지향 미들웨어(Message Oriented Middleware)

• 응용 소프트웨어 간의 데이터(비동기 메세지) 통신을 위한 소프트웨어
• 장점 : 메시지를 전달하는 과정에서 보관 / 라우팅 / 변환할 수 있다.
• 단점
  → 시스템 성능 및 신뢰성 저하
  → 관리가 어렵고, 비용 발생
  → 매커니즘 불일치(애플리케이션 간의 통신 : 동기 / 메시지 기반 통신 : 비동기)

1-2. 큐(Queue)

• 선입선출방식(First In First Out)으로 데이터를 처리하는 자료구조

 

 

2. 메세지큐 사용의 장점

• 비동기(Asynchronous): Queue에 넣기 때문에 나중에 처리가 가능.
• 비동조(Decoupling): Application과 분리할 수 있다.
• 확장성(Scalable): 여러개의 서비스들이 큐에 메세지를 보낼 수 있다.
• 탄력성(Resilience): 일부의 실패가 전체에 영향을 주지 않는다.
• 과잉(Redundancy): 실패시 재실행이 가능하다.
• 보증(Guarantees) : 작업이 처리된 것을 확인할 수 있다.

 

 

3. 사용처

- 다른 곳의 API로부터 데이터 송수신
- 다양한 애플리케이션에서 비동기 통신
- 이메일 발송 및 문서 업로드
- 대용량 프로세스들을 처리하기 위한 배치작업
- 채팅서비스

 

4. 종류

• Kafka, RabbitMQ, ActiveMQ 가 대표적. Amazon SQS, Amazon MQ 등이 있다.
  → Kafka : 처리량이 많은 분산 메시징 시스템에 적합
  → RabbitMQ, ActiveMQ : 신뢰성있는 메시지 브로커가 필요한 경우 적합

 

4-1. Apache Kafka
- 높은 처리량을 요구하는 실시간 데이터 피드처리, 대기시간이 짧은 플랫폼을 제공하는 것을 목표로 함
- TCP 기반 프로토콜 사용

4-2. RabbitMQ
- AMOT 프로토콜을 구현해놓은 프로그램
- 빠르고 쉽게 구성가능, 직관적

4-3. ActiveMQ
- 자바로 만든 오픈소스 메세지 브로커
- 다양한 언어와 프로토콜 지원

 

 

참고) https://sorjfkrh5078.tistory.com/291

메시지 큐(Message Queue)란?

참고) https://steady-snail.tistory.com/165

메시지 큐(Message Queue / MQ)

 

참고) https://programming-and-dt.tistory.com/entry/%EB%A9%94%EC%8B%9C%EC%A7%80-%ED%81%90-%EC%A2%85%EB%A5%98Message-Queue-MQ

메시지 큐 종류(Message Queue / MQ)

참고) https://pamyferret.tistory.com/38

Message Queue란? (AMQP에 기반한 기본 동작 방식 및 용어)