inflearn logo
강의

강의

N
챌린지

챌린지

멘토링

멘토링

N
클립

클립

로드맵

로드맵

지식공유

[퇴근후딴짓] 빅데이터 분석기사 실기 (작업형1,2,3)

3회 기출유형(작업형2)

기출3회 작업형2

해결된 질문

62

shs4166

작성한 질문수 50

0

image.png

예측 단계에서 다음과 같은 오류가 발생했는데, 이유가 뭘까요?

python 머신러닝 빅데이터 pandas 빅데이터분석기사

답변 2

0

퇴근후딴짓

test인코딩이 train과 함께 똑같이 진행한 것이 맞을까요?

train컬럼명과 test컬럼명이 다른 상황입니다.

0

인프런 AI 인턴

안녕하세요, 인프런 AI 인턴입니다.

shs4166님이 경험하신 문제는 훈련 데이터와 테스트 데이터 간의 특성(컬럼) 불일치로 인한 것 같습니다. 이는 get_dummies 나 다른 인코딩을 통해 데이터 처리 시 자주 발생하는 문제입니다.

문제의 원인

특성 불일치는 훈련 데이터에 존재하는 특정 범주형 값이 테스트 데이터에는 없거나, 그 반대의 상황으로 인해 발생할 수 있습니다. 이로 인해 훈련 데이터와 테스트 데이터 간의 컬럼 수가 달라져 모델이 예측 과정을 진행하는데 오류가 생깁니다.

해결 방법

  1. 훈련과 테스트 데이터 통합 및 인코딩:
    • 훈련과 테스트 데이터를 하나의 데이터프레임으로 합친 후 한 번에 인코딩을 진행합니다. 이렇게 하면 모든 범주형 값이 동일한 컬럼으로 인코딩됩니다.
    ”`python
    import pandas as pd

# 데이터 결합
full_data = pd.concat([train, test], axis=0, sort=False)

# 인코딩
full_data_encoded = pd.get_dummies(full_data)

# 다시 분할
train_encoded = full_data_encoded[:len(train)]
test_encoded = full_data_encoded[len(train):]
“`

  1. 컬럼 일치 확인:
    • 모든 데이터프레임의 컬럼이 동일한지 확인하여 필요한 경우 누락된 컬럼에 0을 채워 넣습니다.

이 문제와 유사한 다른 질문의 답변에서는 추가적인 설명과 코드 예제를 확인할 수 있습니다. 유사한 경험을 하신 다른 수강생들의 사례를 참고하시길 권장드립니다:
- 예시문제 작업형2 test 데이터 예측시 발생하는 오류
- test파일 예측에서 자꾸 에러가 발생합니다

저는 질문자님의 이해를 돕고자 지식공유자님의 기존 답변을 참고하여 유사한 답변 링크를 추천해드리고 있습니다. 현재 베타 기능으로 답변이 만족스럽지 않을 수 있는 점 양해 부탁드립니다. 🙏 추가적으로 궁금한 점이 있으시면, 이어서 질문해 주세요. 곧 지식공유자께서 답변해 주실 것입니다.

강의 연장 문의

0

10

1

수강 신청 연장 문의드립니다.

0

21

1

작업형 1번문제... 환경관련

0

24

2

12회 기출은 언제 업데이트 될까요??

0

35

2

8/6 작성한 연장문의 질문글에 대한 재요청

0

37

2

수강기간 연장 문의

0

34

2

수강기간 연장문의

0

36

2

수강기간 연장 요청 문의드립니다

0

36

2

수강 기간 연장 문의

0

44

2

수강연장 가능 문의 (기간 약 한달반)

0

57

2

수강기간 연장 가능할까요 선생님

0

72

2

Section15. 수업에 사용하는 데이터 주소가 다 보이지 않아서 실습을 위한 데이터를 다운 받지 못하고 있습니다.

0

53

3

수강연장요청 문의

0

85

2

아무래도 다음 시험 연장은 어렵겠죠?

0

105

2

빅분기 12회 결과 관련 문의

0

111

1

책이랑 강의랑 순서나 예제가 다른것 같네요

0

80

2

수강연장 문의

0

103

2

재검토 요청 방법 좀 알려주셔요...-.-;;

0

103

2

12회 실기 질문(작업형 2)

0

90

2

뒤로가기 버튼 같은 것이 있나요?

0

64

1

강의 연장 문의

0

98

2

출력값 질문

0

70

2

수업노트가 어디에 있나요?

0

63

1

실기시험 제출관련

0

225

3