MSA 환경에서의 카프카 공통 설정 관리
99
1 asked
안녕하세요. 현재 카프카 도입을 고려하고 있는데, 데브원영님의 강의로 공부를 시작하고 있습니다. 강의가 정말 많은 도움이 됩니다. 감사합니다.
수강 중 MSA 환경에서 카프카 공통 설정을 어떻게 처리하는지 의문이 들어 여쭙는 질문입니다.
MSA 환경에서 카프카를 사용한다면, 카프카 관련 설정 내용들을 각 서버에 넣어야 할 텐데요. 카프카 관련 설정들을 공통 모듈로 만들고 주입받는 형태로 진행한다면, 그 범위를 어디까지 해야 할지 궁금합니다.
consumer/producer factory나 kafka template를 먼저 넣을 수 있을 것 같고, 다른 (dlq, retry 혹은 공통 사용하는 dto라든지) 설정들을 어디까지 공통화하면 좋을지 고민이 많습니다. 혹시 유사한 구조를 경헌하신 적이 있다면 어떻게 구성하셨는지 궁금합니다.
Answer 1
0
안녕하세요, 인프런 AI 인턴입니다.
kuma38837님께서 MSA 환경에서 카프카 설정 관리에 대해 질문 주셨네요. MSA 환경에서는 각 마이크로서비스가 독립적이면서도 공통된 설정을 효과적으로 관리하는 것이 중요합니다. 따라서, 다음과 같은 방법을 고려해볼 수 있습니다:
Configuration Server 활용: Spring Cloud Config와 같은 구성 서버를 사용하여 모든 서비스가 중앙 집중화된 위치로부터 설정을 가져오도록 할 수 있습니다. 이를 통해 설정 관리의 일관성을 유지할 수 있습니다.
공통 모듈: 카프카 설정을 공통 모듈로 빼내어 각 서비스에 주입시키는 방법이 유용할 수 있습니다. 이러한 공통 모듈에는 Consumer/Producer Factory, KafkaTemplate뿐만 아니라 공통으로 사용하는 DTO, DLQ(Dead Letter Queue), 재시도 로직 등도 포함할 수 있습니다.
환경별 분리: Development, Staging, Production과 같은 환경에 따라 설정을 다르게 관리하여 유연성을 높이고 각 환경에 맞는 최적의 설정을 적용할 수 있습니다.
기록 및 모니터링: Kafka 운영에 필요한 메트릭을 수집하여 모니터링하고, 필요 시 경고를 설정하여 잠재적인 문제를 사전에 감지합니다.
다양한 경험과 사례에 따라 다를 수 있으나, 손쉬운 변경을 지원하면서도 공통 설정을 잘 관리하는 것이 전체적인 아키텍처의 안정성에 기여할 것입니다. 추가적으로, 카프카 설정의 특정 사례나 구조는 Kafka Multi-Tenancy Overview 문서를 참고하시면 도움이 될 것입니다.
궁금한 점이 더 있으시면 언제든지 질문해 주세요!
섹션4 AWS NAT Instance생성하는 과정에서 오류가 지속해서 발생합니다.
0
12
1
astro dev start - python 라이브러리 설치 fail
0
22
1
맥북 환경구성 에러
0
19
2
라이브 운영중인 환경의 테이블에 인덱스 추가시 고려사항
0
36
2
user-service jwt
0
32
2
consumer에서 에러가 발생할 경우 데이터 유실 문의
0
38
2
게시글 테스트 데이터 삽입
0
43
2
강의가 검은 화면으로 나옵니다.
0
48
1
virtual box 설치 문제
0
59
2
맥북용 자료 부탁드립니다.
0
37
2
nosql -> sql 비교
0
34
1
파이참 25.3.4 버전에서 한폴더에 두개 프로젝트 생성하는 방법은?
0
32
2
주제영역3 데이타 조회 문의
0
36
2
studio 3t 설치시 문의
0
37
1
2. Kafka 설치 파일 다운받기 404 Not Found 오류 관련
0
59
2
카프카 서버 구축 관련 문의
0
62
2
astro project 실무 적용 질문
0
48
1
제 3정규화 관련 질문
0
49
3
pykrx 회원제 전환으로 인한 실습 불가
0
103
2
오라클
0
55
1
안녕하세요. kafka 실행중에 다음과같은 connection refused가 나는대 왜그런걸까요??
0
689
1
Hbase sink connector
0
320
1
안녕하세요 kafka 동시요청 관련 문의 드립니다.
0
398
0
controller와 leader의 차이점
0
262
0