레코드-키값에 따른 파티셔닝
150
작성한 질문수 2
레코드 강의 듣다가 궁금한 점이 있어 질문드립니다~
복제 강의에서
프로듀서나 컨슈머는 오직 리더 파티션과 통신하는것으로 이해했습니다.
하지만 레코드-키 값으로 파티셔닝이 처리된다면
리더 파티션이 아닌 팔로워 파티션과도 통신이 이루어지는건가요?
답변 1
1
안티푸라민님,
메시지 키가 셋팅된 레코드를 전송시 전달되는 파티션은 반드시 리더 파티션입니다. 즉, 프로듀서는 반드시 리더 파티션과 통신하며 팔로워 파티션과 통신하는 일은 절대 없다고 보시면 됩니다.
0
잘 이해가지 않는 부분이 있어서요
메시지-키는 파티셔너에 따라 토픽의 파티션 번호가 정해진다
메시지-키가 null이면 특정 토픽의 파티션에 라운드 로빈으로 전달된다
위는 레코드 강의 내용입니다
예를 들어
| 리더 파티션 0 | 팔로워 파티션 1 | 팔로워 파티션 2 | 일 때
파티셔너에 따라 파티션 번호가 2로 정해지면 팔로워 파티션2로 통신,
파티션 번호가 null 이라면 0 > 1 > 2 > 0 .... 라운드 로빈으로 통신
하는것으로 보여서요
항상 리더파티션과 통신한다면, 강의 내용에서 말하는 파티션은 어떤 파티션인가요?
0
메시지키가 null인 레코드가 토픽에 레코드를 보내면 여러 리더 파티션에 라운드 로빈으로 전송하게 되는 것입니다. 예를 들어 2개 파티션으로 이루어진 토픽이 있다고 한다면 0번 파티션(리더)와 1번 파티션(리더)에 번갈아가면서 전송하는 것이죠. 그리고 파티션 번호가 null로 설정되는 경우는 없습니다.
카프카 ISR 개념 부분 질문
0
487
1
카프카 커넥터를 두가지 사용하는 이유
0
909
1
브로커, 토픽, 파티션관계
0
687
1
커넥트(소스), 커넥트(싱크)
1
546
1
카프카 isr 질문 있어요
0
340
1
파티션 질문 있어요
0
393
1
명령어 관련 문의드립니다.
0
436
2
토픽의 레코드가 라운드로빈으로 배정되는 방식 질문있습니다.
0
435
2
레코드에 json 형태의 데이터 넣는법 질문
0
436
2
카프카 도커로 실행
1
447
1
CCDAK 질문입니다!
0
1368
1
스트림즈 조인에 관련해서 질문드립니다.
0
307
1
min.insync.replicas에서 설정값만큼의 브로커 다운시
0
259
1
브로커로 메시지를 보낼때 null값인 경우
0
475
1
zookeeper 실행시 에러
1
788
1
온프레미스 환경 설치에 대해 질문있습니다.
0
358
1
리밸런싱 시, 메시지 중복 처리 문제
0
1074
1
강사님, Idempotence / transaction의 차이가 궁금합니다.
0
377
1
브로커 장애 발생시 질문
0
339
1
에러 핸들링과 관련하여 질문 드립니다
0
316
1
토픽 생성시 파티션이 배치되는 방법
0
367
1
질문있습니다!
0
141
1
카프카 스트림즈 에러 핸들링 질문 드립니다
0
402
1
카프카 클러스터 질문이 있습니다.
0
186
1