inflearn logo
강의

강의

N
챌린지

챌린지

멘토링

멘토링

N
클립

클립

로드맵

로드맵

지식공유

[아파치 카프카 애플리케이션 프로그래밍] 개념부터 컨슈머, 프로듀서, 커넥트, 스트림즈까지!

카프카 활용 아키텍처 사례 분석

에러 핸들링과 관련하여 질문 드립니다

313

jiwon Yang

작성한 질문수 1

0

안녕하세요 선생님!

좋은 강의를 만들어주셔서 잘 듣고 있습니다 :)

카프카의 에러 핸들링 패턴에 대해 더 알아보다가 아래의 글을 봤습니니다.

https://www.confluent.io/blog/error-handling-patterns-in-kafka/

Error 큐, Retry 큐, Redirect 큐 등 여러가지 큐를 두고 재시도하는 전략들이 있더라구요

혹시 실무에서는 보통 어떤 전략을 취하는지 알 수 있을까요?

감사합니다 :)

 

Kafka 데이터 엔지니어링

답변 1

0

데브원영 DVWY

안녕하세요!

실무에서는 상황에 따라, 데이터의 사용 방식에 따라 다르게 처리할 수 있습니다. 예를 들어 결제 데이터라면 error handling을 위해서 error만 따로 두는 queue를 사용할 수 있겠죠. 왜냐면 절대로 사라져서는 안되고 재처리가 필요한 데이터로 취급하기 때문입니다. 반대 되는 예시로는 실시간 추천 서비스가 있겠습니다. 이런 서비스에서는 실시간 반영이 중요하고 시간이 지난 에러 데이터에 대해서는 중요하게 다루지 않을 수 있습니다. 이러한 경우에는 에러가 발생한 메시지는 로깅만 하고 재처리는 하지 않을 수도 있겟죠.

그러므로 사용하는 데이터의 종류를 파악하시고 결정하시면 되겠습니다.

카프카 ISR 개념 부분 질문

0

484

1

카프카 커넥터를 두가지 사용하는 이유

0

903

1

브로커, 토픽, 파티션관계

0

679

1

커넥트(소스), 커넥트(싱크)

1

538

1

카프카 isr 질문 있어요

0

333

1

파티션 질문 있어요

0

390

1

명령어 관련 문의드립니다.

0

427

2

토픽의 레코드가 라운드로빈으로 배정되는 방식 질문있습니다.

0

427

2

레코드에 json 형태의 데이터 넣는법 질문

0

432

2

카프카 도커로 실행

1

443

1

CCDAK 질문입니다!

0

1352

1

스트림즈 조인에 관련해서 질문드립니다.

0

303

1

min.insync.replicas에서 설정값만큼의 브로커 다운시

0

256

1

브로커로 메시지를 보낼때 null값인 경우

0

466

1

zookeeper 실행시 에러

1

784

1

온프레미스 환경 설치에 대해 질문있습니다.

0

352

1

리밸런싱 시, 메시지 중복 처리 문제

0

1065

1

강사님, Idempotence / transaction의 차이가 궁금합니다.

0

372

1

브로커 장애 발생시 질문

0

335

1

토픽 생성시 파티션이 배치되는 방법

0

356

1

질문있습니다!

0

138

1

카프카 스트림즈 에러 핸들링 질문 드립니다

0

397

1

카프카 클러스터 질문이 있습니다.

0

183

1

현재 kafka stable 버전이 3.3.1이라고 되어 있습니다.

0

416

1