[기술] KAFKA란
kafka는 아파치에서 만든 소프트웨어입니다. 실시간으로 데이터를 처리할 수 있는 분산 데이터 스트리밍 플랫폼입니다. 소스에서 데이터를 처리하고, 여러 사용자에게 전달하도록 설계되어 있습니다. 데이터 분산에 특화되어 있어, 데이터를 어느 곳으로 이동하는것 뿐만 아니로, 모든 곳의 데이터를 동시에 이동시킬 수 있습니다. 초당 수백만 개 이상의 데이터를 처리할 수 있어 빅데이터와 관련된 프로젝트에 매우 적합합니다. 그러나 kafka가 제공하는 많은 기능들은 빅데이터 뿐만 아니라 다른 곳에도 활용할 수 있습니다. 예를 들자면 IT 인프라를 운영하거나, IoT라 불리는 사물 인터넷, 전자상거래 등에서도 많이 활용됩니다. kafka에서는 애플리케이션에 대한 모니터링, 알람, 보고, 데이터 관리, 로그 관리 등의 ..