하루 1,500억 이벤트를 견딘 StreamHub, Kafka 전환 뒤 드러난 병목
하루 1,500억 이벤트를 견딘 StreamHub, Kafka 전환 뒤 드러난 병목AI 뉴스 썸네일Atlassian의 이벤트 스트리밍 플랫폼 StreamHub는 하루 220억 건을 처리하던 시스템에서 하루 1,500억 건을 수집하는 플랫폼으로 커졌어요. Kinesis가 안정적으로 맡아 온 구간을 넘어선 뒤에는 AWS MSK 기반 Kafka와 계층형 저장소를 선택했어요. 전환 뒤에도 브로커 네트워크, S3 요청, 관리형 서비스의 제어 영역이 새 병목으로 나타났어요. 1핵심 요약구분핵심왜 볼 만한가요처리 규모StreamHub는 하루 1,500억 건을 수집하고 2,250억 건 넘게 전달해요평균 초당 168만 건, 최대 초당 320만 건을 다룬 운영 사례예요전환 배경Kinesis의 샤드 비용, 장기 보관 비용,..