inflearn logo
강의

강의

N
챌린지

챌린지

멘토링

멘토링

N
클립

클립

로드맵

로드맵

지식공유

[퇴근후딴짓] 빅데이터 분석기사 실기 (작업형1,2,3)

2회 기출유형(작업형2)

데이터프레임 만드는데서 오류가 납니다.

해결된 질문

116

은영조

작성한 질문수 5

0

python 머신러닝 빅데이터 pandas 빅데이터분석기사

답변 2

0

퇴근후딴짓

  • 모델을 만들 때 피처(컬럼)과 test의 컬럼이 달라 에러가 발생했어요

  • 타겟을 합치는 경우 concat보다는 X_train['target'] = y_train['Reached.on.Time_Y.N']이 쉬울 것 같아요

  • train과 test를 합친 것이 아니라 X_train과 y_train을 합친 상황이에요 갑자기 df가 왜 나왔는지 질문을 이해하기 어렵습니다.

은영님 이번주가 시험이라 지금 이해도가 많이 낮은 것으로 보입니다. 작업형2는 매우 중요하고 반드시 40점을 확보해야함으로 임시방편으로 우선 꿀팁 섹션에 "작업형2 한가지 방법으로 풀기"로 학습을 진행해 주세요!

0

인프런 AI 인턴

안녕하세요, 인프런 AI 인턴입니다. 은영조님의 질문에 답변드리겠습니다.

질문해주신 내용은 데이터프레임을 생성할 때의 오류와, 라벨 인코딩 과정을 이해하는 데에 어려움이 있는 것 같습니다. 우선 은영조님께서 겪고 있는 오류와 데이터 처리 절차를 하나씩 정리해드리겠습니다.

1. 데이터프레임 생성 및 오류 이해

은영조님께서 주신 에러 메시지는, 모델을 훈련할 때 사용한 피처 이름과 예측 시 사용하는 피처 이름이 불일치할 때 발생하는 ValueError 입니다. 이는 훈련 데이터와 테스트 데이터의 컬럼이 다를 때 자주 발생하는 문제입니다. 주어진 에러 메시지에서 ID 컬럼은 훈련 시 사용되지 않았고, Gender, Mode_of_Shipment 등 다른 컬럼들은 예측 시 사용되지 않았다는 것을 알 수 있습니다.

이를 해결하려면 다음과 같은 방법이 필요합니다:

  • 일관된 피처 사용: pd.get_dummies() 등으로 범주형 변수를 변환할 때 train과 test 데이터에 동일한 컬럼 구조를 유지해야 합니다.

2. 데이터 통합 및 라벨 인코딩

은영조님의 코드를 보면 다음과 같은 부분이 있습니다:

df = pd.concat([X_train, y_train['Reached.on.Time_Y.N']], axis=1)

이 코드는 X_train과 y_train을 수평으로 결합하여 새로운 df를 만들고자 한 것입니다. 그러나 이후 라벨 인코딩을 할 때, X_train[col]으로 접근하고 있어 혼란스러우셨던 것 같습니다.

X_train[col]을 사용하는지에 대한 설명은 다음과 같습니다:

  • 합친 데이터 df vs 개별 사용: df는 주로 EDA(탐색적 데이터 분석) 등의 경우에 잠깐 사용되고, 이후 실제 모델 학습 과정에서는 X_train을 사용하는 경우가 많습니다. 이는 데이터의 일관성과 코드의 명확성을 유지하기 위한 방법입니다.
  • X_train 또는 df의 선택은 주로 이후 사용 목적에 달려 있습니다. 만약 concat으로 합친 df를 계속 사용하려면, 이후 작업에서도 일관되게 df를 사용해야 합니다.

관련된 질문의 해결 방법

은영조님께서 겪고 있는 문제는 데이터 준비 단계에서 빈번하게 나타날 수 있는 오류입니다. 이와 유사한 문제를 해결한 다른 질문의 예를 여러 개 소개합니다:

  1. 에러 이유: 기본적인 열 불일치 문제와 해결 방법을 다루고 있습니다.
  2. concat 후 라벨인코딩시 질문이에요: 데이터 조합과 레이블 인코딩의 처리 방법에 대해 다루고 있습니다.
  3. 데이터프레임 만드는데서 오류가 납니다.: 데이터프레임 생성 시의 일반적인 오류 해결에 대한 정보가 포함되어 있습니다.

여기에서 제시한 방법들을 참고하여 코드를 개선하면 문제가 해결될 가능성이 큽니다.

저는 질문자님의 이해를 돕고자 지식공유자님의 기존 답변을 참고하여 유사한 답변 링크를 추천해드리고 있습니다. 현재 베타 기능으로 답변이 만족스럽지 않을 수 있는 점 양해 부탁드립니다. 🙏 추가적으로 궁금한 점이 있으시면, 이어서 질문해 주세요. 곧 지식공유자께서 답변해 주실 것입니다.

작업형 1 유형 부분

0

9

1

작업형 1 (삭제예정, 구 버전)

0

28

2

수강기간 연장 문의드립니다.

0

20

1

2유형 레이블 인코딩 VS 원핫 인코딩

0

21

3

수강기간 연장 문의드립니다.

0

26

1

인덱스 슬라이싱

0

27

2

질문 드립니다.

0

45

2

강의 내용 관련 질문드립니다~

0

43

2

수강 연장 문의

0

54

2

강의자료 일괄 다운로드

0

49

2

수강기간 연장 문의드립니다

0

40

2

list 문제 질문드립니다~

0

34

2

빅분기 실기 12회 재도전

0

52

2

강의 기간 연장 가능여부 검토 요청건

0

38

2

수강기간 연장 문의 드립니다

0

43

2

수강기간 연장 문의드립니다

0

50

2

질문이요

0

55

2

수강기간 연장 문의드립니다.

0

58

2

문제 3-2 질문드립니다

0

47

2

수강기간 연장 문의 드립니다.

0

61

2

변수, 칼럼 , df 구분

0

51

2

수강기간 연장 문의드립니다.

0

50

2

수강기간 연장 문의

0

49

2

수강기간 연장 문의드립니다.

0

42

2