inflearn logo
강의

강의

N
챌린지

챌린지

멘토링

멘토링

N
클립

클립

로드맵

로드맵

지식공유

[퇴근후딴짓] 빅데이터 분석기사 실기 (작업형1,2,3)

작업형2 모의문제2

원핫인코딩 코드 질문

해결된 질문

48

HOJUN CHOI

작성한 질문수 8

0

# 원핫인코딩
train = train.drop('price', axis = 1)
train = pd.get_dummies(train)
test = pd.get_dummies(test)
X_tr, X_val, y_tr, y_val = train_test_split(train,
                                            target,
                                            test_size = 0.2,
                                            random_state = 0
)

python 머신러닝 빅데이터 pandas 빅데이터분석기사

답변 2

0

퇴근후딴짓

네 맞습니다. 타겟을 먼저 분리하고 작업하면 됩니다. 정확합니다.

네, 전체 흐름을 합쳐서 정리하면 아래와 같습니다.



그리고 카테고리가 달라 합쳐야 하는 상황이 생긴다면 아래 처럼 합칠 수 있습니다.


방법 1 - train/test 합친 후 원핫인코딩 후 분리


# price 컬럼 먼저 저장
target = train.pop('price')

# train/test 합치기
n_train = len(train)
data = pd.concat([train, test], axis=0)

# 원핫인코딩
data = pd.get_dummies(data)

# 다시 분리
train = data.iloc[:n_train]
test = data.iloc[n_train:]

# 검증데이터 분리
X_tr, X_val, y_tr, y_val = train_test_split(train,
                                            target,
                                            test_size=0.2,
                                            random_state=0)

방법 2 - 원핫인코딩 후 컬럼 맞추기


# price 컬럼 먼저 저장
target = train.pop('price')

# 원핫인코딩
train = pd.get_dummies(train)
test = pd.get_dummies(test)

# train/test 컬럼 수 맞추기
train, test = train.align(test, join='left', axis=1, fill_value=0)

# 검증데이터 분리
X_tr, X_val, y_tr, y_val = train_test_split(train,
                                            target,
                                            test_size=0.2,
                                            random_state=0)

0

인프런 AI 인턴

안녕하세요, 인프런 AI 인턴입니다. HOJUN CHOI님.

원핫 인코딩을 수행할 때에는 pd.get_dummies() 함수를 사용하여 범주형 데이터를 이진화된 형태로 변환할 수 있습니다. 질문하신 코드에서 몇 가지 수정이 필요할 수 있습니다.

원핫 인코딩 코드 설명

  1. pd.get_dummies() 함수의 사용 방식: 이 함수는 주어진 데이터프레임의 범주형 컬럼을 원핫 인코딩하여 반환합니다. 주의할 점은 train[cols]와 같이 인코딩하면 결과가 여러 컬럼으로 확장되므로, 이를 새로운 데이터프레임으로 저장해야 기존 데이터프레임의 다른 컬럼들과 합쳐질 수 있습니다.

  2. 인코딩 컬럼 지정:

    • 원래 코드에서는 train[cols] = pd.get_dummies(train[cols])을 사용하셨는데, 이 경우 기존 데이터프레임의 다른 수치형 컬럼이 손실될 수 있습니다. 데이터프레임에 한 번에 통합하여 적용하려면 아래와 같은 형태로 진행하는 것이 좋습니다.

수정된 코드 제안

train = pd.concat([train.drop(cols, axis=1), pd.get_dummies(train[cols])], axis=1)
test = pd.concat([test.drop(cols, axis=1), pd.get_dummies(test[cols])], axis=1)

코드 설명

  • train.drop(cols, axis=1): 기존의 범주형 컬럼을 삭제합니다.
  • pd.get_dummies(train[cols]): 인코딩된 새로운 컬럼 세트를 만듭니다.
  • pd.concat([...], axis=1): 삭제된 기존의 컬럼 대신 인코딩된 컬럼이 추가된 데이터를 생성합니다.

이 코드를 사용하면 데이터프레임 내의 다른 수치형 및 비인코딩 컬럼을 보존하면서 범주형 컬럼에 대해 원핫 인코딩을 수행할 수 있습니다.

아래 유사한 질문과 답변에서 좀 더 효과적인 방법 및 다양한 시각을 확인하실 수 있습니다:
- 원핫인코딩에 관해서 질문이 있습니다!
- pd.get_dummies(train[cols])와 (train, columns=cols) 차이가 궁금합니다.

저는 질문자님의 이해를 돕고자 지식공유자님의 기존 답변을 참고하여 유사한 답변 링크를 추천해드리고 있습니다. 현재 베타 기능으로 답변이 만족스럽지 않을 수 있는 점 양해 부탁드립니다. 🙏 추가적으로 궁금한 점이 있으시면, 이어서 질문해 주세요. 곧 지식공유자께서 답변해 주실 것입니다.

빅분기 12회 결과 관련 문의

0

20

0

책이랑 강의랑 순서나 예제가 다른것 같네요

0

49

2

수강연장 문의

0

57

1

재검토 요청 방법 좀 알려주셔요...-.-;;

0

82

2

12회 실기 질문(작업형 2)

0

66

2

뒤로가기 버튼 같은 것이 있나요?

0

49

1

강의 연장 문의

0

69

2

출력값 질문

0

47

2

수업노트가 어디에 있나요?

0

44

1

실기시험 제출관련

0

207

3

6.20 작업형 2 과적합

0

198

3

코딩팡 장업형2 베이스 라인 인코딩 종류 질문

0

68

2

로지스틱회귀, 회귀

0

59

2

회귀 문제를 풀때 질문입니다.

0

66

1

불균형 처리 후 성능이 더 낮아졌다면,

0

74

2

실기 체험 제2유형 에러 문의

0

74

1

LIGHTGBM 으로 하면 pred값이 소수점 6자리까지 나오는게 맞나요

0

62

2

3번문제 등분산 가정

0

54

2

작업형3 target 형 변환 질문

0

44

2

[작업형1] 연습문제 섹션1 ~ 10 의 section4

0

56

3

원핫인코딩과 레이블 인코딩에서 concat

0

68

2

제2유형 질문입니다.

0

51

2

C()

0

51

2

작업형 2에서 strafity 적용 유무

0

62

2