inflearn logo
강의

강의

N
챌린지

챌린지

멘토링

멘토링

N
클립

클립

로드맵

로드맵

지식공유

[아파치 카프카 애플리케이션 프로그래밍] 개념부터 컨슈머, 프로듀서, 커넥트, 스트림즈까지!

kafka-console-consumer.sh

토픽의 레코드가 라운드로빈으로 배정되는 방식 질문있습니다.

427

초보개발

작성한 질문수 9

0

안녕하세요

말씀해주신 내용들로 간단히 테스트를 진행중인데요

먼저 해당 토픽을 생성하고 파티션을 10개로 늘렸습니다.

key.seprator설정을 하지 않고 기본값으로 메세지를 발행시켰는데요. 그럼 파티션 0번부터 배정이 되어있을줄 알았는데 확인해보니 5번 파티션에 메세지가 들어가있더라구요. 혹시 이렇게 배정이 된 이유를 알 수 있을까요?

 

스크린샷 2023-01-10 오전 12.11.05.png

Kafka 데이터 엔지니어링

답변 2

0

초보개발

아하 친절한 설명 감사합니다~

0

데브원영 DVWY

안녕하세요

카프카 프로듀스가 레코드를 전송하는 것은 라운드로빈과 유사하지만 완벽하게 라운드로빈을 따라가지 않습니다. 왜냐하면 Sticky partitioning strategy가 기본 파티셔너로 설정되기 때문입니다. 그렇기 때문에 5번에 배정될 가능성도 있습니다.

만약 완전한 라운드 로빈을 원하신다면 RoundRobinPartitioner를 사용하시면 됩니다. https://kafka.apache.org/24/javadoc/org/apache/kafka/clients/producer/RoundRobinPartitioner.html

카프카 ISR 개념 부분 질문

0

484

1

카프카 커넥터를 두가지 사용하는 이유

0

903

1

브로커, 토픽, 파티션관계

0

679

1

커넥트(소스), 커넥트(싱크)

1

538

1

카프카 isr 질문 있어요

0

332

1

파티션 질문 있어요

0

390

1

명령어 관련 문의드립니다.

0

427

2

레코드에 json 형태의 데이터 넣는법 질문

0

431

2

카프카 도커로 실행

1

442

1

CCDAK 질문입니다!

0

1351

1

스트림즈 조인에 관련해서 질문드립니다.

0

303

1

min.insync.replicas에서 설정값만큼의 브로커 다운시

0

256

1

브로커로 메시지를 보낼때 null값인 경우

0

466

1

zookeeper 실행시 에러

1

784

1

온프레미스 환경 설치에 대해 질문있습니다.

0

352

1

리밸런싱 시, 메시지 중복 처리 문제

0

1063

1

강사님, Idempotence / transaction의 차이가 궁금합니다.

0

372

1

브로커 장애 발생시 질문

0

335

1

에러 핸들링과 관련하여 질문 드립니다

0

313

1

토픽 생성시 파티션이 배치되는 방법

0

356

1

질문있습니다!

0

138

1

카프카 스트림즈 에러 핸들링 질문 드립니다

0

397

1

카프카 클러스터 질문이 있습니다.

0

183

1

현재 kafka stable 버전이 3.3.1이라고 되어 있습니다.

0

416

1