inflearn logo
강의

講義

知識共有

カフカパーフェクトガイド - コネクト編

JDBC Source Connector Plugin インストール方法

http http://localhost:8083/connector-plugins 시 플러그인이 보이지 않습니다.

187

cksohn

投稿した質問数 1

0

connect를 재가동해도 보이지가 않네요..

경로 문제일까요?

 

아래와 같이 결과가 나옵니다.

(cdc_source_connector/, jdbc_connector/ 위치에 jar 파일들은 모두 있습니다.)

http http://localhost:8083/connector-plugins

HTTP/1.1 200 OK

Content-Length: 296

Content-Type: application/json

Date: Fri, 15 Nov 2024 07:35:40 GMT

Server: Jetty(9.4.44.v20210927)

[

{

"class": "org.apache.kafka.connect.mirror.MirrorCheckpointConnector",

"type": "source",

"version": "1"

},

{

"class": "org.apache.kafka.connect.mirror.MirrorHeartbeatConnector",

"type": "source",

"version": "1"

},

{

"class": "org.apache.kafka.connect.mirror.MirrorSourceConnector",

"type": "source",

"version": "1"

}

]

 

kafka 데이터-엔지니어링

回答 2

0

dooleyz3525

안녕하십니까,

강의 실습 코드대로 하신건지요? 아님 별도의 디렉토리로 설정해서 하신건지요?

/home/min/connector_plugins/jdbc_connector 쪽에 jar 파일이 있는게 아니라 cdc_source_connector/, jdbc_connector/ 에 jar 파일이 있다는 말씀이신지요?

만약 그렇다면 강의 실습대로 다시 connector 환경을 맞춰서 구성해보시겠습니까?

그리고 jdbc 말고 spooldir source connector 설치 하실때는 잘 되신 건가요? 강의 영상에서도 말씀드리자면 connect-distributed.properties 파일을 여셔서 plugin.path를 /home/min/connector_plugins 로 변경해야 합니다. 이 부분이 잘 되었는지 확인해 보시고, 안되었으면 이전 섹션에서 spooldir soruce connector plugin 설치 영상을 보시고 다시 설정해 보시기 바랍니다.

감사합니다.

0

communityai8509

안녕하세요, 인프런 AI 인턴입니다.

cksohn님의 질문에 대해 답변드리겠습니다. Kafka Connect에서 플러그인이 표시되지 않는 문제는 여러 원인으로 발생할 수 있습니다. 현재 플러그인이 보이지 않는 상황에서 고려해볼 몇 가지 사항은 다음과 같습니다:

1. Plugin Path 설정 확인

  • connect-distributed.properties 파일에서 plugin.path 설정을 올바르게 지정했는지 확인해보세요. 이 경로에 플러그인 JAR 파일이 제대로 위치해 있는지를 점검해야 합니다.

2. JAR 파일 배포 확인

  • JAR 파일이 설정한 plugin.path의 지정된 디렉토리에 정확하게 배포되어 있는지 확인해보세요. JAR 파일 이름에 오타가 있는지, 파일이 제대로 업로드 되었는지를 체크하는 것이 중요합니다.

3. Connect 재기동 후 로그 확인

  • Connect 작업자(Worker)를 재기동 후, 로그 파일을 확인하십시오. 플러그인이 로드되지 않는 구체적인 이유와 오류 메시지가 기록되어 있을 수 있습니다. 특히, JAR 파일 로딩 중 오류가 발생했는지 여부를 확인하세요.

4. Kafka 버전 확인

  • Kafka와 Connect 버전이 호환되는지 확인하세요. 서로 다른 버전 옵션이 설치되어 있거나 호환되지 않으면 문제가 발생할 수 있습니다.

유사한 문제와 관련된 기존의 논의는 아래 링크에서 확인하실 수 있습니다:

  • “커넥트 스타트시 오류”: 이 질문에서 플러그인 관련 초기화 및 설정 문제를 다루고 있습니다. 플러그인이 보이지 않거나 연결 설정에 문제가 발생할 때 취할 수 있는 일반적인 해결책을 제공합니다.

이 외에도 추가적으로 궁금하신 점이 있으시면 이어서 질문해 주세요. 저도 cksohn님의 문제 해결에 도움이 되도록 최선을 다해 지원하겠습니다.

저는 질문자님의 이해를 돕고자 지식공유자님의 기존 답변을 참고하여 유사한 답변 링크를 추천해드리고 있습니다. 현재 베타 기능으로 답변이 만족스럽지 않을 수 있는 점 양해 부탁드립니다. 🙏

추가적으로 궁금한 점이 있으시면, 이어서 질문해 주세요. 곧 지식공유자께서 답변해 주실 것입니다.

계속 csv파일을 폴더로 인식하는 중입니다.

0

65

2

cdc failover

0

69

2

avro plugin에 안보이는거 같아요

0

68

2

zookeeper가 실행이 안되요

0

73

3

Debezium CDC Source Connector 이벤트 메시지

0

82

2

재 질문! 다른 connector가 동일 토픽 사용

0

63

2

메시지 발행이 안 됩니다.

0

75

2

디비지움 오프셋 리셋

0

94

2

mysql_jdbc_oc_sink_customers_02.json 에서 오류납니다.

0

69

3

io.debezium.connector.mysql.MySqlConnector 질문

0

67

2

Debezium 이벤트 메시지 발행 시 성공여부

0

80

2

connect 구동 오류

0

97

3

CDC Connect 통시에서의 암호화 관련 하여 문의 드립니다.

0

121

2

GCSSinkconnector

0

64

1

debezium source connector에서 `poll.interval.ms` 파라미터

0

142

2

자문자답: JDBC Sink Connector가 PostgreSQL의 Schema를 바라보지 않습니다.

0

212

1

table.name.format에 관하여..

0

196

2

binlog와 offset 관련 추가 질문드립니다

0

149

1

Debezium cdc source for MSSQL-Server [등록오류]

0

190

2

안녕하세요 sink connector 생성 config 관련 질문입니다.

0

159

2

수강환경 VirtualBox -> Docker

0

223

2

일반적인 예시들이 궁금해서 질문 남깁니다.

1

145

2

debezium connector schema 찾지 못하는 오류

0

426

2

offset 커밋 관련 질문

0

159

1