퓨처젠씨플래닛

카프카(Kafka)는 고성능 분산 이벤트 스트리밍 플랫폼으로, 파이프라인, 스트리밍 분석, 데이터 통합을 위해 설계되었습니다.

Pub-Sub(게시-구독) 모델의 메시지 큐 형태로 동작하며, 특히 분산 환경에서 효과적으로 동작하도록 고안되었습니다.

국내에서도 많이 사용되고 있는 인기 있는 플랫폼 중 하나입니다.

카프카는 대용량의 데이터 스트림을 안정적으로 처리하고, 데이터의 실시간 흐름을 효과적으로 관리할 수 있는 강력한 도구로 평가 받고 있습니다.

이는 다양한 산업 분야에서 대용량 데이터 처리 및 이벤트 기반 아키텍처에 적합하게 사용될 수 있음을 의미합니다.

모든 이벤트와 데이터의 흐름이 카프카를 중심으로 모이고 퍼짐

이벤트/데이터가 발생했다면, 발생 주체가 카프카로 해당 이벤트/데이터를 전달하며 해당 이벤트/데이터가 필요한 곳에서 직접 가져다 사용함

카프카 외 다른 방식은 다양한 서비스의 데이터를, 하둡, 로그 스태시로 각각 다른 데이터 파이프라인을 통해 데이터를 복잡하게 전송함

카프카 사용시 데이터 흐름을 중앙화한다면, 복잡도가 드라마틱하게 낮아지는 것을 확인할 수 있음