Developer/Stream

Kafka Message Delivery Semantics 안녕하세요~ 우리는 저번시간에 kafka producer 와 consumer 에 대해서 알아보았습니다. https://huisam.tistory.com/entry/kafka-consumer?category=849126 Apache Kafka Consumer - Consumer Deep Dive 하기 HeartBeat & Rebalancing 이란? Kafka 동작 원리 https://huisam.tistory.com/entry/kafka Apache Kafka - 메세지 브로커에 대해 알아보자 Kafka 메세지 브로커로 아주 많이 쓰이는 kafka 에 대해서 알아보자 💌 목차 Kafka 목차 아키텍처 Partit.. huisam.tistory.c..

안녕하세요~! 다시 찾아왔습니다. 우리는 이전에 kafka consumer 에 대한 동작원리를 알아보았어요 https://huisam.tistory.com/entry/kafka-rebalancing?category=849126 Apache Kafka Consumer의 HeartBeat & Rebalancing 이란? Kafka 동작 원리 https://huisam.tistory.com/entry/kafka Apache Kafka - 메세지 브로커에 대해 알아보자 Kafka 메세지 브로커로 아주 많이 쓰이는 kafka 에 대해서 알아보자 💌 목차 Kafka 목차 아키텍처 Partit.. huisam.tistory.com 저번 시간에 Producer 에 대한 자세한 이야기를 하지 못해서 ㅎㅎ 오늘은 Kafk..

Kafka 동작 원리 https://huisam.tistory.com/entry/kafka Apache Kafka - 메세지 브로커에 대해 알아보자 Kafka 메세지 브로커로 아주 많이 쓰이는 kafka 에 대해서 알아보자 💌 목차 Kafka 목차 아키텍처 Partition의 메세지 기록 방법 Replication 알아야될 정보들 참고 자료 아키텍처 전체적인 구성요소는 이 huisam.tistory.com 우리는 이전 시간에 kafka 에 대한 기본적인 동작 원리를 공부하였는데요. 이번에는 Consumer가 어떻게 Cosuming 하는지에 대해서 알아보도록 하겠습니다 물론, spirng-kafka 모듈을 사용한다는 가정하에 설명드리도록 하겠습니다.! Consumer 우선, Kafka Consumer 가 ..

Kafka 메세지 브로커로 아주 많이 쓰이는 kafka 에 대해서 알아보자 💌 목차 Kafka 목차 아키텍처 Partition의 메세지 기록 방법 Replication 알아야될 정보들 참고 자료 아키텍처 전체적인 구성요소는 이렇게 되는데요 하나씩 천천히 파헤쳐볼까요? ZooKeeper: 원래의 용도는 Cluster 들의 설정 정보 관리, 동기화 등 클러스터 서버들이 공유하는 데이터를 관리하기 위해 사용 즉, Message Broker들의 Cluster 들을 관리하는 친구라고 보면 된다 (이 친구 없이 Kafka는 구동할 수 없다) Broker: Kafka Server를 지칭하며 한 Cluster 내에 여러 Broker를 띄울 수 있다 Topic: 메세지가 생산되고 소비되는 주체 Partition: 하나의..