Semantic Search 관련 문의
112
1 asked
다음과 같은 양식으로 남겨주세요.
질문을 한 배경 : Semantic Search는 어떻게 가능한가요?
질문내용 : Semantic Search는 어떻게 가능한가요? 허깅페이스에서 외부 모델을 가져와서 한국어 시멘틱 검색이 가능하도록 만들려 하는데 한국어 형태소 분석만 존재해서 이 부분을 물어보고 싶습니다.
Answer 2
0
저도 구현 제대로 안해봐서 잘 모르는데 관련 자료 전달드립니다.
아마 유튜브가 가장 도움되지 않을까 궁금합니다.
https://docs.opensearch.org/docs/latest/vector-search/ai-search/semantic-search/
https://aws.amazon.com/ko/blogs/tech/amazon-opensearch-service-hybrid-query-korean/
0
안녕하세요, 인프런 AI 인턴입니다.
dkwlswk08님, 질문 주신 “Semantic Search”는 최근 자연어 처리 분야에서 많은 관심을 받고 있습니다. Semantics Search를 구현하기 위해 주로 사용되는 방법 중 하나는 자연어 처리 모델을 사용하여 문장의 의미를 벡터화하고, 이를 기반으로 비슷한 의미의 내용을 검색하는 것입니다.
허깅페이스(Hugging Face)는 이러한 Semantic Search를 구현하는 데 유용한 다양한 자연어 처리(NLP) 모델을 제공하고 있습니다. 특히, 한국어 시멘틱 검색을 위해서는 한국어로 미리 학습된 BERT나 GPT 같은 모델을 활용할 수 있습니다.
하지만 한국어 형태소 분석이 필요하다고 하셨는데, 이는 한국어의 특성상 구문 분석에 어려움이 있을 수 있기 때문입니다. 이를 해결하기 위해 KoNLPy 같은 한국어 자연어 처리 라이브러리를 사용하여 형태소 분석을 수행한 후, 이를 모델 입력으로 사용하여 보다 정확한 시멘틱 검색을 구현할 수 있습니다.
관련 답변을 찾을 수 있는 게시글을 제공해 드리지는 못하지만 허깅페이스의 문서나 커뮤니티를 참고하면 보다 더 많은 정보를 얻을 수 있을 것입니다. 또한 아래 URL을 통해 허깅페이스의 모델 라이브러리를 직접 확인해 보실 수 있습니다:
저는 질문자님의 이해를 돕고자 지식공유자님의 기존 답변을 참고하여 유사한 정보를 제공해 드리고 있습니다. 현재 베타 기능으로 답변이 만족스럽지 않을 수 있는 점 양해 부탁드립니다. 🙏 추가적으로 궁금한 점이 있으시면, 이어서 질문해 주세요. 곧 지식공유자께서 답변해 주실 것입니다.
강의자료와 강의 내용의 차이
0
11
2
수강 연장 부탁드립니다.
0
13
2
3,4장 이후 미션 제출 질문
0
12
1
kaggle notebook에 service key 설정이 누락된 것 같습니다
1
21
2
연장 신청 간곡히 부탁드립니다.
0
32
2
addToFile function에서 path를 사용해 새로운 파일을 생성
0
36
1
문의 드립니다.
0
37
2
안녕하세요 선생님 혹시 수강기한 연장도 가능한가요?
0
26
2
[46강] EventEmitter를 활용한 10가지 패턴 중 플러그인 아키텍처
0
31
2
가상 환경과 차이 도커 질문
0
27
1
강의가 누락된것 같습니다.
0
38
2
시험 문제 확인 부탁드립니다.
0
23
1
수강연장 가능할까요 ?
0
36
2
examtopics와 krdumps 차이가 나는데요 ㅠ
0
51
1
수강연장부탁드립니다!
0
30
2
용어 발음법이 계속 바뀌는 것 같은데 이런 부분들 개선이 가능할까요...?
0
48
1
질문입니다
0
25
1
Nat Gateway
0
39
2
강의 업데이트
0
162
2
과금 질문드립니다.
1
283
3
강의에서 사용학신 블로그 url 질문 드립니다
1
193
3
CloudSearch 와 OpenSearch 는 디비에 연결이 안돼나요?
1
494
2
죄송합니다만 AWS CloudSearch 에관한 질문입니다 제가 2번 다시봤는데 이해가 안돼 질문을 드립니다.
1
291
2
수업자료에 대한 설명이 부족해 보입니다.
1
466
1