Flink vs. Kafka Streams
안녕하세요.
강의를 통해서 Kafka에 대한 개념을 다 잡을 수 있었습니다.
Flink와 Kafka Streams 비교를 위하여 질문 드리고자 해요.
현재 업무 중 CDC를 이용하여 받아온 데이터를 Kafka에 인입하고 있고, 해당 데이터를 Flink로 가공하여 다시 Kafka Topic에 넣고 있어요.
여기서 든 생각이 이럴거면 Kafka Streams를 쓰는 것이 어떨까라는 생각이 들더라구요.
Kafka Streams를 Flink 대신 사용하여 얻을 수 있는 이점에 대해서 궁금합니다.
감사합니다.
답변 1
1
Simple님, Flink와 Kafka Streams 둘다 훌륭한 스트림 프로세싱 도구이고 많이 사용되고 있습니다. 사용하시는 부분이 토픽의 데이터를 가공하여 다시 토픽으로 넣고 계시는 것으로 보이는데요. 이 경우에는 사실상 Flink와 Kafka Streams 둘 다 거의 동일하고 바꿔서 얻을 수 있는 이점은 크게 보이지 않네요.
Flink와 Kafka Streams의 차이점 및 비교에 대해 자세히 알고 싶으시다면 다음 내용들을 참고하세요
카프카 ISR 개념 부분 질문
0
487
1
카프카 커넥터를 두가지 사용하는 이유
0
907
1
브로커, 토픽, 파티션관계
0
685
1
커넥트(소스), 커넥트(싱크)
1
542
1
카프카 isr 질문 있어요
0
339
1
파티션 질문 있어요
0
392
1
명령어 관련 문의드립니다.
0
432
2
토픽의 레코드가 라운드로빈으로 배정되는 방식 질문있습니다.
0
433
2
레코드에 json 형태의 데이터 넣는법 질문
0
436
2
카프카 도커로 실행
1
445
1
CCDAK 질문입니다!
0
1363
1
스트림즈 조인에 관련해서 질문드립니다.
0
305
1
min.insync.replicas에서 설정값만큼의 브로커 다운시
0
258
1
브로커로 메시지를 보낼때 null값인 경우
0
472
1
zookeeper 실행시 에러
1
785
1
온프레미스 환경 설치에 대해 질문있습니다.
0
355
1
리밸런싱 시, 메시지 중복 처리 문제
0
1070
1
강사님, Idempotence / transaction의 차이가 궁금합니다.
0
375
1
브로커 장애 발생시 질문
0
337
1
에러 핸들링과 관련하여 질문 드립니다
0
314
1
토픽 생성시 파티션이 배치되는 방법
0
364
1
질문있습니다!
0
139
1
카프카 스트림즈 에러 핸들링 질문 드립니다
0
401
1
카프카 클러스터 질문이 있습니다.
0
184
1