선생님 안녕하세요, LLM 모델의 Tool calling 성능비교를 해봤는데요.
# 도구 호출이 필요한 LLM 호출을 수행
query = "스테이크와 어울리는 와인을 추천해주세요."
ai_msg = llm_with_tools.invoke(query)
아래 2개 LLM 모델로 성능비교를 해봤습니다. 그런데 (2) 모델의 경우 Content 와 tool_calls 모두 나오는데요. 그러면 (1), (2) 모델 중에 무엇이 더 좋은 성능인가요? 그리고 Content 와 tool_calls 동시에 나오는 경우는 왜 그런건가요?
(1) gpt-4o-2024-05-13
----------------------------------------------------------------------------------------------------
''
----------------------------------------------------------------------------------------------------
[{'args': {'query': 'best wine to pair with steak'},
'id': 'call_p7PJFCZUWXEwyCmK4nzLjx9g',
'name': 'search_web',
'type': 'tool_call'}]
----------------------------------------------------------------------------------------------------
(2) claude-3-7-sonnet-20250219
----------------------------------------------------------------------------------------------------
[{'text': '스테이크와 어울리는 와인에 대한 정보를 찾아보겠습니다.', 'type': 'text'},
{'id': 'toolu_01Uc2BwXXyW26n7L78zZ6wGf',
'input': {'query': '스테이크와 어울리는 와인 추천'},
'name': 'search_web',
'type': 'tool_use'}]
----------------------------------------------------------------------------------------------------
[{'args': {'query': '스테이크와 어울리는 와인 추천'},
'id': 'toolu_01Uc2BwXXyW26n7L78zZ6wGf',
'name': 'search_web',
'type': 'tool_call'}]
----------------------------------------------------------------------------------------------------
