inflearn logo
강의

Course

Instructor

[DevOneYoung] Apache Kafka for beginners

The Future of Apache Kafka

카프카 프로듀서, 컨슈퍼 속도

480

gg12415

37 asked

0

안녕하세요! 여기에 질문을 올려도 괜찮을지.. ㅠ-ㅠ

 

궁금한게 있습니다.

프로듀서쪽에서 데이터를 무수히 많이 계속 계속

쉴틈없이 계속 토픽, 파티션에 넣어준다면

컨슈머입장에서는 좀 더 느리게 하나하나 읽어가서 가공을 한다고 생각해보면

 

계속 lag의 차이가 점점 엄청 커지고 딜레이가 넓어질텐데

이런 경우에는 어떻게 처리를 해야하는걸까요?

파티션을 늘려서 데이터를 좀 더 분산시키고 컨슈머 그룹에 컨슈머를 좀더 늘려서 좀 더 빠르게 처리르 해야하는걸까요?

 

데이터 엔지니어링 Kafka

Answer 0

강의가 부족한 것이 아니라, 누구나 쉽게 이해할 수 있도록 매우 단순하게 설계된 것입니다.

0

19

0

소스 코드 자료를 다운을 받았는데 압축 파일에 문제가 생긴 것 같습니다.

0

671

1

application.yml args에러발생이유

3

711

1

mac os ) zip 파일 dataframe 오류

0

659

1

카프카 ISR 개념 부분 질문

0

480

1

스프링 시큐리티 문의 (webSecurityConfigurerAdapter 취소선)

0

1840

1

catalog 테이블 자동 create-drop 가 안됩니다.

0

1025

2

카프카 커넥터를 두가지 사용하는 이유

0

899

1

H2 최신 버전 사용 시 server mode 사용에 따른 application.yml 파일 설정(테이블은 생성됐는데 data.sql INSERT 안될 시 참고)

13

1269

2

Kafka Docker-compose기동시 connect는 어떻게 설정하나요?

0

1154

1

mysql 입문 질의드려요

0

816

1

멀티브로커에서 consumer 사용하기

0

630

1

후속 강의 Webflux가 듣고 싶습니다.

0

634

1

질문있습니다!

2

432

1

브로커, 토픽, 파티션관계

0

677

1

ModuleNotFoundError : No module named 'mmlspark' - 20230218

0

616

1

커넥트(소스), 커넥트(싱크)

1

533

1

Spring Boot 최신 3.XX 버전 Security 설정 공유드립니다.

18

10068

7

gradle

1

756

1

여러 창 키고한번에 명령어 실행시키는 부분 어떻게 했는지 알려주실수잇을까요?

1

546

1

카프카 복구를 위한 offset 관련해서 질문이 있습니다.

1

312

0

책을 구매했는데 책에서는 zookeeper로 broker 클러스터링 내용이 안나오는걸까요?

0

365

0

안녕하세요 kafka 동시요청 관련 문의 드립니다.

0

398

0

controller와 leader의 차이점

0

262

0