결측치 채우기 질문
안녕하세요
수치형 변수 결측치를 채울 때
X_test 데이터에는 X_test의 age 평균값이 들어가야 한다고 생각했는데
X_test['age'] 에 X_train['age']의 평균값을 넣는데 이유가 있을까요?
주당 근무시간에 대해서도 test 데이터에 train 데이터의 중앙값을 넣어주던데 같은 질문입니다!
답변 2
0
일반적으로 train의 통계값을 넣습니다만
빅분기 실기는 코드를 평가하지 않기 때문에 train또는 test의 평균, 중앙 등을 넣어도 큰 문제가 되진 않을 것 같아요!
선택 기준은 평가지표 점수로 판단하시죠!!
0
안녕하세요, 인프런 AI 인턴입니다.
현지원님의 질문에 대한 답변은, 수치형 변수의 결측치를 처리하는 방법과 관련하여 X_test 데이터의 ‘age’와 ‘hours.per.week’ 컬럼에 X_train의 평균값 혹은 중앙값을 사용하는 이유에 대해 다루고 있습니다. 결측치 처리 시 X_train의 통계값을 사용하는 것은 데이터 누수(Data Leakage)를 방지하기 위한 표준 관행입니다. 데이터 분석 및 머신러닝 모델을 구축할 때, 모델의 일반화 능력을 평가하기 위해 데이터를 훈련 세트와 테스트 세트로 분할합니다. 이 때, 모델 학습에 사용되지 않는 테스트 데이터에 대한 정보가 훈련 과정에 영향을 미치지 않도록 해야 합니다. 따라서, 테스트 데이터의 결측치를 훈련 데이터의 통계치(평균, 중앙값 등)로 채우는 것은 모델을 더욱 견고하게 만들기 위한 방법입니다.
현지원님의 상황에 접근하는 방식을 다룬 유사 질문들을 참고하시면 도움이 될 것 같습니다:
- “3-3 age 컬럼 평균값으로 채울 때 질문“에서는 X_train의 평균값으로 결측치를 채우는 이유에 대해 설명합니다.
이러한 배경 지식은 데이터 전처리 단계에서 매우 중요하며, 모델의 성능에도 큰 영향을 미칠 수 있습니다. 실제로 작업형 데이터 분석 및 머신러닝 프로젝트에서는 이와 같은 전처리 방법이 일반적으로 사용됩니다.
저는 질문자님의 이해를 돕고자 지식공유자님의 기존 답변을 참고하여 유사한 답변 링크를 추천해드리고 있습니다. 현재 베타 기능으로 답변이 만족스럽지 않을 수 있는 점 양해 부탁드립니다. 🙏 추가적으로 궁금한 점이 있으시면, 이어서 질문해 주세요. 곧 지식공유자께서 답변해 주실 것입니다.
1유형 강의 다 나간 후 어떻게 할까요?
0
15
1
점수차가 많이 나는데 따로 하신게 있으신가요?
0
12
1
작업형1 모의문제 4번에 3)문제 질문
0
21
2
이상치 전처리 작업
0
25
2
평가결과값 문의
0
29
2
시계열 데이터 날짜와 시간 format
0
35
2
평가지표 F1 스코어 질문드립니다.
0
27
2
작업형 2 기출7회분에서
0
38
2
작업형2 모의문제1 (30강)
0
34
2
수강 기간 연장 문의 드립니다.
0
42
2
수강 계획과 관련해 문의 드립니다.
0
30
2
작업형1 - 연습문제 16~39 풀이는 몇강을 보면 되나요?
0
50
2
작업형 1 -연습문제 4-6
0
38
2
작업형 1 유형 부분
0
42
2
작업형 1 (삭제예정, 구 버전)
0
51
2
수강기간 연장 문의드립니다.
0
38
2
2유형 레이블 인코딩 VS 원핫 인코딩
0
37
3
수강기간 연장 문의드립니다.
0
45
2
인덱스 슬라이싱
0
37
2
질문 드립니다.
0
50
2
강의 내용 관련 질문드립니다~
0
46
2
수강 연장 문의
0
63
2
강의자료 일괄 다운로드
0
62
2
수강기간 연장 문의드립니다
0
48
2