평가지표 F1 스코어 질문드립니다.

작성한 질문수 6

0

평기 기준은 명확하게 출제 됩니다.

F1 스코어만 요청했다면 이진 분류이고, F1 스코어만 사용하면 됩니다.

추가 옵션이 있는 경우 다중 분류이고 F1 스코어에서 제시된 옵션값을 추가하면됩니다.

단, 평가 기준은 실제 채점과는 관련이 없습니다.

자체적으로 검증데이터로 자가 평가하는 용도입니다. (모의시험)

0

안녕하세요, 인프런 AI 인턴입니다. 한광욱님!

F1 스코어를 계산할 때 average 파라미터는 다중 클래스(targets가 여러 범주를 가지는) 문제에 대한 평가 방법을 지정합니다. 여기서 각 옵션들은 각각 다른 맥락에서 사용됩니다:

1. micro: 전체 데이터를 대상으로 한 전반적인 평가를 의미합니다. 모든 개별 클래스를 고려하지 않고 전체 true positive, false negative, false positive를 토대로 평가하기 때문에 각 클래스를 동등하게 고려하지 못할 수 있습니다. 다중 클래스에서 여러 정보를 통합하여 단일 평가를 얻을 때 사용됩니다.

2. macro: 각 클래스를 개별적으로 평가하고 평균을 내는 방식입니다. 모든 클래스에 동일한 가중치를 부여하기 때문에 특정 클래스에 데이터가 편중되는 경우 더 공정하게 평가할 수 있습니다. 다중 클래스 문제에서 각 클래스 간의 차이를 자세히 보고 싶을 때 사용합니다.

3. weighted: 각 클래스의 크기에 비례하여 가중평균을 계산합니다. 데이터 비중이 큰 클래스일수록 더 큰 영향을 받기 때문에, 클래스 간 불균형 문제를 보완할 수 있습니다.

문제에서 특별히 요구하지 않는 경우, 데이터의 특성과 평가 목적에 따라 어떤 average 설정을 사용할지를 결정하는 것이 좋습니다. 일반적으로 데이터가 균형 잡힌 다중 클래스 문제에서는 macro가 자주 사용되며, 특정 클래스에 데이터가 많이 편중되어 있으면 weighted를 사용하여 평형을 맞추는 것이 좋습니다.

아래 기존의 유사한 질문 및 답변이 한광욱님의 상황에 도움이 될 수 있습니다:

• 4회 기출-2유형 macro-f1 score 관련: different average 옵션이 있을 때의 사용법에 대한 설명이 잘 나와 있습니다.
  
• 오늘시험 작업형2 f1 score 관련 질문드려요: 각 average 옵션 사용 시 특수한 주의점을 설명하고 있는 가이드가 도움될 수 있습니다.
  

저는 질문자님의 이해를 돕고자 지식공유자님의 기존 답변을 참고하여 유사한 답변 링크를 추천해드리고 있습니다.
현재 베타 기능으로 답변이 만족스럽지 않을 수 있는 점 양해 부탁드립니다. 🙏
추가적으로 궁금한 점이 있으시면, 이어서 질문해 주세요. 곧 지식공유자께서 답변해 주실 것입니다.