inflearn logo
강의

강의

N
챌린지

챌린지

멘토링

멘토링

N
클립

클립

로드맵

로드맵

지식공유

[퇴근후딴짓] 빅데이터 분석기사 실기 (작업형1,2,3)

작업형2 질문있습니다

해결된 질문

75

chi0157

작성한 질문수 1

0

안녕하세요

작업형2번 풀때 결측치 처리를 해줬을때보다 안해줬을때 roc_auc 스코어가 더 높게 나오면 결측치 처리를 안해주고 답을 내는게 맞을까요?

 

또 train과 test split을 해줬을때보다 안해줬을때 스코어가 더 높으면 안해준 상태로 답을 제출하는게 맞을까요?

점수가 크면 장땡인지 궁금합니다!!

python 머신러닝 빅데이터 pandas 빅데이터분석기사

답변 2

0

퇴근후딴짓

장땡까진 아니지만

우리가 객관적으로 판단할 기준은 검증데이터 평가입니다.

이 것이 좋은 점수를 기준으로 제출하는 것을 추천합니다.

0

인프런 AI 인턴

안녕하세요, 인프런 AI 인턴입니다.

chi0157님의 질문은 머신러닝 모델링 과정에서 결측치 처리와 데이터 분할(train과 test split)의 필요성을 점수 중심으로 평가해도 되는지 질문하고 계십니다.

결론부터 말씀드리면, 점수가 높은 것이 최종 목표긴 하지만, 모델의 일반화 성능도 반드시 고려해야 합니다.

  1. 결측치 처리: 결측치를 처리하지 않고도 점수가 높다면, 데이터 간 편향이 존재하거나 불완전한 데이터에서 모델이 의도치 않게 규칙을 학습할 가능성이 있습니다. 일반적으로, 결측치 처리는 데이터의 품질을 높이고, 모델의 신뢰성을 확보하는 데 도움이 되므로 신중한 판단이 필요합니다.

  2. 데이터 분할(No split vs split): 데이터를 분할하지 않고 높은 점수를 얻는 것은 모델이 훈련 데이터에 과적합(overfitting)되었을 가능성이 큽니다. 실제 데이터에서 좋은 성능을 보장할 수 없기 때문에, 일반적으로 데이터를 train과 test로 나누어 모델을 평가하는 것이 바람직합니다.

유사한 질문을 다룬 게시물이 있어서 참고하시면 도움이 될 것 같습니다:
- 예시문제 작업형2(신 버전): roc_auc_score와 같은 평가 지표를 사용하여, 확률 값 (predict_proba)을 사용하는 것이 성능 향상에 도움이 될 수 있음을 언급하고 있습니다.

저는 질문자님의 이해를 돕고자 지식공유자님의 기존 답변을 참고하여 유사한 답변 링크를 추천해 드리고 있습니다.
현재 베타 기능으로 답변이 만족스럽지 않을 수 있는 점 양해 부탁드립니다. 🙏
추가적으로 궁금한 점이 있으시면, 이어서 질문해 주세요. 곧 지식공유자께서 답변해 주실 것입니다.

수강 연장 문의드립니다.

0

20

2

강의 연장 문의

0

25

2

수강 신청 연장 문의드립니다.

0

32

2

작업형 1번문제... 환경관련

0

29

2

12회 기출은 언제 업데이트 될까요??

0

36

2

8/6 작성한 연장문의 질문글에 대한 재요청

0

38

2

수강기간 연장 문의

0

39

2

수강기간 연장문의

0

37

2

수강기간 연장 요청 문의드립니다

0

38

2

수강 기간 연장 문의

0

47

2

수강연장 가능 문의 (기간 약 한달반)

0

60

2

수강기간 연장 가능할까요 선생님

0

74

2

Section15. 수업에 사용하는 데이터 주소가 다 보이지 않아서 실습을 위한 데이터를 다운 받지 못하고 있습니다.

0

56

3

수강연장요청 문의

0

90

2

아무래도 다음 시험 연장은 어렵겠죠?

0

108

2

빅분기 12회 결과 관련 문의

0

112

1

책이랑 강의랑 순서나 예제가 다른것 같네요

0

81

2

수강연장 문의

0

105

2

재검토 요청 방법 좀 알려주셔요...-.-;;

0

106

2

12회 실기 질문(작업형 2)

0

92

2

뒤로가기 버튼 같은 것이 있나요?

0

66

1

강의 연장 문의

0

99

2

출력값 질문

0

72

2

수업노트가 어디에 있나요?

0

63

1