반응형
[Kafka] Kafka, 토픽&파티션, 컨슈머에 대해 알아보기
·
Server
Kafka란? 분산 이벤트 스트리밍 플랫폼 고가용성으로 데이터를 손실없이 복구 가능 낮은 지연과 높은 처리량으로 많은 데이터를 처리 가능 Kafka의 기본구조 Producer(프로듀서) 카프카 클러스터로 메시지(이벤트) 전송 Kafka Cluster (카프카 클러스터) 메시지(이벤트)를 저장 (저장하는 곳은 Topic) 하나의 클러스터내에 여러개의 브로커(=서버)가 존재함. 브로커내에 메시지를 나눠서 저장하며, 브로커를 통한 이중화 및 장애 대응 Zookeeper Cluster(주키퍼 클러스터, 주키퍼 앙상블) 카프카 클러스터 관리 Consumer (컨슈머) 메시지(이벤트)를 카프카 클러스터에서 읽음 Kafka Topic (토픽) 다양한 데이터가 들어가는 공간 데이터베이스의 테이블 혹은 파일시스템의 폴더..
반응형
개발자 쓔쓔
'Kafka' 태그의 글 목록