Hbase sink connector
330
작성자 없음
안녕하세요강의 다 잘들었습니다.처음 만들어보는중인데 최종목표는 PostgreSQL과같은 rdb의 데이터를CDC로Apache atlas로 표현하기 위해 Hbase로 전달하고싶은게 목표입니다 Hbase sink connector를 검색해도 잘안나와서 가능한지와 json으로 어떻게 변환해서 넣어야하느지 궁금합니다
답변 1
0
안녕하세요, 인프런 AI 인턴입니다.
성호님의 질문에 대해 아쉽게도 제공된 정보 내에서 Hbase sink connector에 대한 구체적인 언급이 없어 질문에 직접적으로 답변드리기 어렵습니다. 하지만, 일반적으로 Apache Kafka를 이용하여 다양한 데이터 소스에서 데이터를 수집하고 이를 다른 시스템으로 전달하는 경우, Kafka Connect를 사용할 수 있습니다. Kafka Connect는 소스(Source)와 싱크(Sink) 커넥터를 통해 다양한 데이터 시스템 간의 데이터 이동을 단순화합니다. PostgreSQL과 같은 RDB에서 데이터를 추출하는 경우, Kafka Connect를 활용하여 데이터를 Kafka topic에 저장한 후 필요한 데이터를 처리하고 Hbase로 전송하는 싱크 커넥터를 구성할 수 있습니다.
Hbase sink connector의 경우, Apache Kafka 공식 문서나 주요 기술 커뮤니티, GitHub 등에서 관련 프로젝트나 구현 사례를 검색해보는 것이 좋습니다. 또한, 데이터를 JSON 형식으로 변환하여 넣는 방법은 사용하고자 하는 커넥터의 문서나 해당 시스템을 다루는 개발자 가이드를 참조하는 것이 도움이 될 수 있습니다.
Apache Kafka와 관련하여 다른 궁금증이 있으시다면 추가적인 질문을 해주시기 바랍니다.
mtputty.com 사용하실 때 주의하세요(질문X/공유)
0
5
1
VirtualBox가 아닌 VMware를 사용해도 되나요
0
9
2
Jib 이미지 빌드에서 docker credential 관련으로 이슈가 있다면
1
17
1
스크립트에 대해 질문 있습니다.
1
13
1
같은 사용자가 연속된 중복 호출할 경우 어떻게 되는지 궁금합니다!
1
12
1
조건 검색 질문
0
12
1
샘플데이터 요청
1
25
2
테이블 적재 Task 작성 실습
0
35
2
smithery filesystem mcp server
0
43
2
WebFlux & Web MVC 혼용해서 사용했을 때 스레드에 대한 질문
0
28
1
supabase url, key 값 확인방법
1
51
3
댓글 삭제 로직에서 동시성 문제 발생 가능성
0
33
1
재고 감소와 쿠폰 발급은 왜 서로 다른 방식으로 동시성을 제어하나요?
0
44
2
누락된 소스코드가 있는 것 같아서 공유합니다.
0
31
1
service-discovery 프로세스 가동 이유
0
40
1
인덱스 강의 혹은 해당 강의 전 듣어야 하는 사전강의 문의
0
54
2
DLQ의 수동 커밋에 대해서 질문있습니다.
0
61
2
astro dev start 시 오류 발생
0
56
2
JWT토큰 발급 시, subject 값을 다양하게 넣어서 여러 개의 토큰을 만드는 이유
0
51
2
ansible playbook 오류
0
61
2
MSA 환경에서의 카프카 공통 설정 관리
0
121
1
안녕하세요. kafka 실행중에 다음과같은 connection refused가 나는대 왜그런걸까요??
0
726
1
안녕하세요 kafka 동시요청 관련 문의 드립니다.
0
411
0
controller와 leader의 차이점
0
276
0