kafka 개념정리 (1) 썸네일형 리스트형 Apache Kafka 주요 개념 정리 # Apache Kafka 주요 개념 정리 - 최근 이슈 카프카의 메타데이터 관리 도구인 주키퍼가 제거 될 예정... * 적용 전 고려사항 1) 하나의 파티션을 두개이상의 컨슈머가 소비할 수 없다. 2) 파티션을 늘리면 줄이질 못한다. 파티션을 초기 2, 4로 작게 생성 하고 향후 컨슈머의 LAG 등을 보면서 조금씩 늘리는게 좋다. 3) 브로커를 스케일 아웃을 하면 기존에 사용하고 있던 파티션들의 데이터가 자동으로 신규로 확장된 브로커로 전달되지 않고, 새로운 토픽의 데이터들만 전달 된다. 그래서 기존 토픽 데이터를 새로운 브로커로 전달하기 위해서는 partiton reassign 작업을 진행해 줘야한다. - 추후 고려사항 생기면 계속 업로드 예정... 0. Kafka란? - 고성능 : 프로듀서와 컨슈머.. 이전 1 다음
