inflearn logo
강의

Course

Instructor

[DevOneYoung] Apache Kafka for beginners

The Future of Apache Kafka

카프카 프로듀서, 컨슈퍼 속도

497

gg12415

37 asked

0

안녕하세요! 여기에 질문을 올려도 괜찮을지.. ㅠ-ㅠ

 

궁금한게 있습니다.

프로듀서쪽에서 데이터를 무수히 많이 계속 계속

쉴틈없이 계속 토픽, 파티션에 넣어준다면

컨슈머입장에서는 좀 더 느리게 하나하나 읽어가서 가공을 한다고 생각해보면

 

계속 lag의 차이가 점점 엄청 커지고 딜레이가 넓어질텐데

이런 경우에는 어떻게 처리를 해야하는걸까요?

파티션을 늘려서 데이터를 좀 더 분산시키고 컨슈머 그룹에 컨슈머를 좀더 늘려서 좀 더 빠르게 처리르 해야하는걸까요?

 

데이터 엔지니어링 Kafka

Answer 0

강의가 부족한 것이 아니라, 누구나 쉽게 이해할 수 있도록 매우 단순하게 설계된 것입니다.

0

42

0

소스 코드 자료를 다운을 받았는데 압축 파일에 문제가 생긴 것 같습니다.

0

698

1

application.yml args에러발생이유

3

725

1

mac os ) zip 파일 dataframe 오류

0

701

1

카프카 ISR 개념 부분 질문

0

505

1

스프링 시큐리티 문의 (webSecurityConfigurerAdapter 취소선)

0

1866

1

catalog 테이블 자동 create-drop 가 안됩니다.

0

1057

2

카프카 커넥터를 두가지 사용하는 이유

0

931

1

H2 최신 버전 사용 시 server mode 사용에 따른 application.yml 파일 설정(테이블은 생성됐는데 data.sql INSERT 안될 시 참고)

13

1297

2

Kafka Docker-compose기동시 connect는 어떻게 설정하나요?

0

1175

1

mysql 입문 질의드려요

0

842

1

멀티브로커에서 consumer 사용하기

0

654

1

후속 강의 Webflux가 듣고 싶습니다.

0

650

1

질문있습니다!

2

460

1

브로커, 토픽, 파티션관계

0

706

1

ModuleNotFoundError : No module named 'mmlspark' - 20230218

0

644

1

커넥트(소스), 커넥트(싱크)

1

561

1

Spring Boot 최신 3.XX 버전 Security 설정 공유드립니다.

18

10142

7

gradle

1

774

1

여러 창 키고한번에 명령어 실행시키는 부분 어떻게 했는지 알려주실수잇을까요?

1

560

1

카프카 복구를 위한 offset 관련해서 질문이 있습니다.

1

331

0

책을 구매했는데 책에서는 zookeeper로 broker 클러스터링 내용이 안나오는걸까요?

0

379

0

안녕하세요 kafka 동시요청 관련 문의 드립니다.

0

413

0

controller와 leader의 차이점

0

276

0