브로커가 여러개인 클러스터에서 토픽 생성
321
작성한 질문수 58
kafka topic을 생성할 때 broker 서버를 지정하는 것으로 보이는데요, broker 여러대로 구성된 클러스터에서 한 브로커 서버를 지정해서 파티션 10개의 토픽을 생성하고 토픽 정보를 describe로 확인하면 어떻게 되나요?
10개의 파티션이 분산되어서 해당 브로커 서버의 파티션 개수는 일부만 찍히게 되는건가요?
답변 1
0
안녕하세요.
브로커가 여러개인 클러스터에 토픽을 생성하게 되면 설정한 파티션 개수만큼을 가진 토픽이 여러 브로커에 분산되어 생성됩니다. 토픽 생성시 브로커 한대로 지정하더라도 리더 파티션들은 여러 브로커에 분산 생성된다고 볼 수 있습니다.
그러므로 파티션이 10개인 토픽을 브로커 10대인 클러스터에 만들게 되면 10개의 클러스터에 분산되어 리더 파티션이 생성된다고 볼 수 있습니다.
Kafka 4.0 zk 코드 제거 가이드 요청
0
43
2
consume 이후 lag가 줄어들지 않음
0
171
2
안녕하세요. 강의의 카프카 버전과 현재 시점의 카프카의 차이점 문의 드립니다.
0
241
2
멱등성 프로듀서 retries 관련 질문입니다.
0
182
2
채팅 서비스 개발 시 주의점이 있을까요?
0
177
2
충분히 큰 파티션 생성시 궁금증이 존재합니다.
0
169
2
KTable 키가 없는 레코드 처리
0
143
2
컨슈머 테스트 코드 작성
0
149
2
리밸런스 onPartitionRevoked이 필요한 상황
0
140
2
카프카 클러스터에서 감당 가능한 파티션(레플리카) 수 문의
0
198
2
reset offset 질문
0
140
2
KStreamJoinKTable 실행시 오류
0
133
2
auto.commit.interval.ms 옵션 관련 질문 드립니다.
0
201
2
파티션, 컨슈머 그룹, 컨슈머 관련 질문
0
158
1
java, kotlin
0
189
2
shutdownThread 에 대한 문의 입니다.
0
212
2
zookeeper실행시 오류가 발생합니다.
0
343
2
커스텀 소스 커넥터에서 Thread.sleep (1000) 은 왜 하는거에요?
0
223
2
처리량을 늘리기 위해서 파티션을 늘리고 컨슈머를 늘려야한다고 설명하셨는데요
0
259
3
파티션 개수와 컨슈머 개수의 처리량 관련 질문
0
242
2
동영상 및 이미지 처리 관련 문의 드립니다.
0
288
2
주키퍼 없이 사용 문의 드립니다.
0
362
1
kafka 를 띄우니 오류가 발생하고 종료합니다.
0
359
3
zookeeper 실행시 오류 .. 무엇을 해야 할까요?
0
278
2