Opensource/kafka1 [Kafka 1편] Kafka 는 무엇인가? 목차 [Kafka 1편] Kafka 는 무엇인가? Kafka 개념 카프카는 분산 스트리밍, 실시간 스트리밍 데이터를 처리하기 위한 목적으로 설계된 오픈 소스 입니다. 분산 처리 시스템이며, publish, subscribe message 플랫폼입니다. producer 는 하나의 토픽이 데이터를 넣고, 토픽은 여러 개의 partition 으로 이루어집니다. partition 은 consumer group 으로 매핑되며, consumer group 과 partition 이 늘어날수록 처리량이 늘어납니다. 카프카 사용 시 주의사항 중복 메시지 다음과 같은 상황이 있을 수 있습니다. partition 에서 consumer group 이 데이터를 가져가서 처리합니다. consumer group 에서 정상적으로 메.. 2022. 4. 14. 이전 1 다음