Flink vs. Kafka Streams
안녕하세요.
강의를 통해서 Kafka에 대한 개념을 다 잡을 수 있었습니다.
Flink와 Kafka Streams 비교를 위하여 질문 드리고자 해요.
현재 업무 중 CDC를 이용하여 받아온 데이터를 Kafka에 인입하고 있고, 해당 데이터를 Flink로 가공하여 다시 Kafka Topic에 넣고 있어요.
여기서 든 생각이 이럴거면 Kafka Streams를 쓰는 것이 어떨까라는 생각이 들더라구요.
Kafka Streams를 Flink 대신 사용하여 얻을 수 있는 이점에 대해서 궁금합니다.
감사합니다.
답변 1
1
Simple님, Flink와 Kafka Streams 둘다 훌륭한 스트림 프로세싱 도구이고 많이 사용되고 있습니다. 사용하시는 부분이 토픽의 데이터를 가공하여 다시 토픽으로 넣고 계시는 것으로 보이는데요. 이 경우에는 사실상 Flink와 Kafka Streams 둘 다 거의 동일하고 바꿔서 얻을 수 있는 이점은 크게 보이지 않네요.
Flink와 Kafka Streams의 차이점 및 비교에 대해 자세히 알고 싶으시다면 다음 내용들을 참고하세요
카프카 ISR 개념 부분 질문
0
503
1
카프카 커넥터를 두가지 사용하는 이유
0
928
1
브로커, 토픽, 파티션관계
0
703
1
커넥트(소스), 커넥트(싱크)
1
560
1
카프카 isr 질문 있어요
0
353
1
파티션 질문 있어요
0
411
1
명령어 관련 문의드립니다.
0
454
2
토픽의 레코드가 라운드로빈으로 배정되는 방식 질문있습니다.
0
455
2
레코드에 json 형태의 데이터 넣는법 질문
0
455
2
카프카 도커로 실행
1
463
1
CCDAK 질문입니다!
0
1388
1
스트림즈 조인에 관련해서 질문드립니다.
0
324
1
min.insync.replicas에서 설정값만큼의 브로커 다운시
0
271
1
브로커로 메시지를 보낼때 null값인 경우
0
501
1
zookeeper 실행시 에러
1
801
1
온프레미스 환경 설치에 대해 질문있습니다.
0
373
1
리밸런싱 시, 메시지 중복 처리 문제
0
1099
1
강사님, Idempotence / transaction의 차이가 궁금합니다.
0
390
1
브로커 장애 발생시 질문
0
350
1
에러 핸들링과 관련하여 질문 드립니다
0
330
1
토픽 생성시 파티션이 배치되는 방법
0
384
1
질문있습니다!
0
152
1
카프카 스트림즈 에러 핸들링 질문 드립니다
0
424
1
카프카 클러스터 질문이 있습니다.
0
192
1