이미지 데이터 학습 및 응답
안녕하세요 강사님
먼저 훌륭한 강의 공유해주셔서 너무 감사합니다
저는 지금 사내 위키를 크롤링해서 그 내용을 학습하고 이에 대한 내용을 GPT에게 질문했을 때 답변하는 챗봇을 개발하고 있습니다.
가이드 문서에는 이미지 파일을 통한 예시와 함께 작성된 가이드 문서가 많은데 이를 어떻게 학습시키거나 이용자에게 뿌려줄 수 있을지 궁금합니다
첨부된 GPT답변을 보시면 예제 스크린샷이라고 나오지만 제가 문제로 예상하는것은 위키가 로그인 된 사용자만 열람이 가능하기 때문에 이미지 링크 파일 또한 로그인되지 않은 상태에서는 접근이 불가능하기 때문입니다.
혹시 답변에 도움이 될까 싶어 제가 구현한 단계를 마지막으로 질문 마치겠습니다
크롤링(selenium)을 통해 wiki를 탐색하며 .txt파일로 긁어옵니다
표 같은경우 강사님 조언대로 table -> markdown
code태그는 ```code``` 태그로 감싼다
image데이터의 경우 src에서 파일 링크를 추출해서 text로 변환 (ex https://cdn.inflearn.com/public/files/courses/324145/9b8f6df3-8278-446f-b0da-394371126807/inflearn_python_07.png)
DirectoryLoader로 파일들을 embedding해서 벡터화
강의 따라가며 나머지 동일하게 구현
답변 1
0
안녕하세요!
보안 이슈로 인해서 인증된 사용자만 스크린샷에 접근 가능하다면, 인증되지 않은 사용자를 대상으로 작성하는 건 불가능합니다(방화벽이슈 등등)
하지만 사진 자체에는 보안이슈가 없다면, 제가 해봤던 방법들 중에 가장 확실한건
사진을 어딘가에 업로드한다(AWS S3 등의 스토리지)
사진의 주소를, 사진에 대한 설명과 같이 저장한다
사진에 대한 설명이 vector search에서 걸리기 때문에 사용자에게 사진이 보여진다
였습니다
사진에 대한 설명은 multimodal을 지원하는 LLM을 활용해서 작성하셔도 되고, 아니면 직접 작성하셔도 무방합니다
소득세법 docx 파일 공유 요청건
0
65
1
EXAONE 모델 불러오기 안되는 문제
0
89
2
[5.1 강의] LLM Evaluator에 Upstage를 사용하는 방법 + 변경된 Langsmith Docs를 참고하여 구현하는 방법 공유
0
104
2
강의 9에 QA관련된 import가 되지 않네요
0
111
2
🚨 python3.14 를 쓰고 계시면 chroma 에서 ConfigError 가 발생합니다.
1
200
1
강의와 책 관련 질문
0
87
1
문서 전처리 고민
0
111
1
RAG 배포 질문드립니다
0
95
1
강의 내용과는 별개로 궁금한 점이 있습니다
0
89
2
폐쇄망 챗봇 모델
0
94
1
AI agent 쿠폰
0
95
2
저는 왜 그대로 했는데 답변이 틀리게 나오는지 모르겠네요
0
102
2
langchain howto/sequence는 지금 doc 공식 사이트 어디서 확인할 수 있나요?
1
95
1
new_question에 대한 답 출력
0
74
2
랭체인 라이브러리
0
148
2
[LangGraph를 활용한 AI Agent 개발] 쿠폰 유효기간
0
106
1
postgresql의 pgvector 벡터는 어떤가요?
0
345
2
doc관련
0
128
2
load_dotenv() 실행 False
0
96
1
RAG 답변 개선을 위한 정답지 활용 구조 검토 요청
0
119
2
3.2 from langchain.chains ~ 에서 모듈을 찾지 못할 때.
1
406
2
강의 완료 오류
0
89
1
hub.pull 이슈
0
131
2
[3.3 강의] Upstage를 사용한 RAG 구현 성공기 공유
1
150
1