본문 바로가기

broker3

[Kafka] Kafka Broker, Zookeeper, Cluster Ref https://engkimbs.tistory.com/691 https://waspro.tistory.com/645 https://devbksheen.tistory.com/entry/Kafka-Broker-Zookeeper https://epicdevs.com/17 [공부/Kafka] - [Kafka] 카프카 개요 (이전 글) Broker Kafka에서 데이터를 수신, 전달하는 서비스이자 실행되는 Kafka Application Server 하나의 Server 당 하나의 데몬 프로세스로 동작 보통 가용성을 위해 3 Node Broker로 구성함 Zookeeper 분산 코디네이션 시스템, Broker와 1:1 로 구성 (마찬가지로 주로 3 Node Zookeeper 구성) 하는 일 Broker는 상태.. 2022. 7. 19.
[Kafka] 카프카 개요 Ref 실전 아파치 카프카 (사사키 도루 외 4인) 책 (아래 포스팅에 있는 내용(1장)만 추가 정리) https://www.hanbit.co.kr/media/channel/view.html?cms_code=CMS9400468504 https://kuckjwi0928.tistory.com/14 Apache Kafka란? 실시간으로 데이터 스트림을 게시, 구독, 저장 및 처리할 수 있는 분산 데이터 스트리밍 플랫폼 대용량/대규모 메시지 데이터를 빠르게 처리하는 분산 메시징 시스템(플랫폼) 아래 4가지 실현 가능 확장성 (Scale Out) : 데이터 양에 따라 시스템 확장 가능 영속성 (Persistence) : 언제라도 데이터를 읽을 수 있음 유연성 (Flexibility) : 연계할 수 있는 제품이 많.. 2022. 7. 19.
[Pub/Sub] Publish/Subscribe 구조(모델) Pub/Sub 구조는 비동기식 메세징 패턴이다 먼저 비동기식이란 무엇인가? 동기식은 한 번에 한 주문씩 처리하고, 비동기식은 주문을 다 받아놓은 후 차례대로 처리한다 즉 동기식(Synchronous)은 요청을 보낸 후 결과를 받아야지만 다음 동작이 이루어지고, 비동기식(Asynchronous)은 요청을 보낸 후 결과와 상관없이 다음 동작이 이루어진다 동기식이 요청에 대한 응답은 더 빨리 받을 수 있겠지만, 전체적으로 봤을 땐 효율이 매우 떨어진다 그럼 Pub/Sub 구조는 비동기식으로 어떻게 작동하는가? Pub/Sub 구조는 서버리스/마이크로 서비스 아키텍처에서 주로 사용된다 Publisher(발신자)는 Subscriber(수신자)에 대한 정보를 몰라도 그냥 일단 메세지를 채널에 보내놓는다 이 때 메세지.. 2020. 12. 11.