inflearn logo
강의

강의

N
챌린지

챌린지

멘토링

멘토링

N
클립

클립

로드맵

로드맵

지식공유

LangGraph를 활용한 AI Agent 개발 (feat. MCP)

2.4 생성된 답변을 여러번 검증하는 Self-RAG

무한 rewrite 발생시 대처 방법

해결된 질문

147

gkstls2006

작성한 질문수 1

0

2.3 강의에서 generate 이후 스코어를 통해 rewrite를할지 end를 할지 판단할때, 쿼리 자체에서 document와 관련이 없는 질문을 했을때 무한으로 rewrite에 빠질 경우 어떻게 대처하면 될까요?

프롬프트엔지니어링 llm ai-agent langgraph

답변 2

0

제이쓴

안녕하세요! 좋은 질문 감사합니다.

 

두가지 방법을 고려할 수 있을 것 같습니다.

  1. Rewrite하는 횟수를 확인해서 max attempts를 확인하고 초과하는 경우 답변을 찾을 수 없다는 메시지 전송

  2. Retrieval에 활용할 문서들을 요약하고, 사용자의 질문이 해당 문서들에 있을지 파악하고 rewrite를 시도하지 않는 방안

1번이 비교적 간단할 것 같고, rewrite를 2회정도 한 시점에서 2번을 시도하는 것도 괜찮을 것 같습니다.

0

gkstls2006

넵! 감사합니다

0

인프런 AI 인턴

안녕하세요, 인프런 AI 인턴입니다. gkstls2006님.

쿼리가 문서와 관련이 없을 때 무한으로 rewrite하는 상황은 Loop Handling 문제와 관련이 있습니다. 이를 방지하기 위한 몇 가지 전략을 제안드립니다:

  1. 거절 조건 추가: 일정 횟수 이상 rewrite가 발생할 경우 이를 막는 조건을 추가하는 것이 중요합니다. 예를 들어, rewrite가 5번 발생했다면 자동으로 종료하거나 default 응답을 반환하는 조건을 설정하는 방법이 있습니다.

  2. 초기 필터링: 질문의 초기 단계에서 사용자가 입력한 쿼리를 문서의 주요 주제와 비교해 더 먼저 필터링할 수 있습니다. 예를 들어, NLP 기술을 사용해 질문이 문서의 주제와 관련이 매우 낮으면 미리 경고 메시지를 제공하거나 관련성이 낮은 질문임을 알리는 방법도 있습니다.

  3. 유사도 스코어 활용: 질문과 문서 간의 유사도 스코어를 설정하여, 스코어가 일정 수준 이하로 내려가면 rewrite를 중단하도록 설정할 수 있습니다.

  4. 대체 자료 활용: 관련이 없는 질문이지만 연관된 답변을 생성할 수 있도록 대체 자료나 답변 프레임을 설계하는 것도 하나의 방법입니다.

유사한 상황과 문제 해결에 대한 더 많은 정보를 원하신다면, 비슷한 주제를 다뤘던 다른 게시글을 참고해 보시기를 추천드립니다:

  • 최적의 rewrite 전략: 질문과 문서의 관련성을 기반으로 최적의 rewrite 전략을 적용하는 방법에 대한 설명이 있습니다.

저는 질문자님의 이해를 돕고자 지식공유자님의 기존 답변을 참고하여 유사한 답변 링크를 추천해드리고 있습니다. 현재 베타 기능으로 답변이 만족스럽지 않을 수 있는 점 양해 부탁드립니다. 🙏 추가적으로 궁금한 점이 있으시면, 이어서 질문해 주세요. 곧 지식공유자께서 답변해 주실 것입니다.

max token을 제한하는게 왜 성능을 개선하게 되는걸까요?

0

37

2

pyzerox 유니코드 에러

0

75

2

영상 메타데이터 생성 관련 LLM 활용 질문

0

69

1

종합부동산세 부분 tool 사용 질문 드립니다.

0

74

2

uv sync 파이썬 버전문제 onnxruntime

-1

104

2

MCP를 활용해서 간단한 에이전트를 만들어보세요

0

96

1

PDF 형식

0

65

1

5.3 langchain-mcp-adpater를 활용한 MCP 도구 사용 tool_list 지연 사유

0

91

2

3.6 human_in_the_loop 3rd case

0

81

1

summary 를. 시스템메세지에 추가하는 부분에 관하여

0

70

3

병렬 처리 중 retrieve 관련 궁금한 사항

0

76

1

query 에 대한 answer 결과값이 나오지 않습니다.

0

94

2

사람과 관련된 표현이 없는데 rewrite 로 이동하지 않는경우

0

75

1

retriever 관련 질문

0

65

1

인터룹 관련 질문

0

49

2

2.4 Self-RAG 결과가 달라요!

0

77

2

md vs txt 차이..

0

134

2

OpenAI API 호출 때문에 발생하는 Error code: 429 문제

0

113

2

단순 도구 사용과 도구를 가진 에이전트를 사용하는 것의 차이가 궁금합니다.

0

88

1

LangChain과 LangGraph v1

0

137

1

2.4 강의 관련 질문(답변을 검증하는 self rag)

0

74

2

후속강의 문의

0

73

2

3.6 강의 관련 질문(interrupt 관련)

0

50

1

그래프 구현 조언 부탁드립니다!

0

76

2