inflearn logo
강의

講義

知識共有

[仕事終わりの趣味] ビッグデータ分析実技 (作業型1,2,3)

第4回 既出問題タイプ(作業型2)

ID 삭제 필수 인가요?

解決済みの質問

6

sexyguybhc

投稿した質問数 2

0

ID 삭제하고 돌리면 평가점수가 떨어지는거같은데. 시험 가서는 어떻게 해야할까요?

 

평가점수가 떨어지더라도 ID는 삭제하고 진행해야하는게 맞을지. 무조건 평가점수가 높게 나오는 방향으로 하는게 맞는지 혼란스럽습니다!

 

python 머신러닝 빅데이터 pandas 빅데이터분석기사

回答 3

0

roadmap

데이터가

어떻게 나올지 몰라 판단 기준은 평가 지표 점수로 하는 것이 맞습니다


일반적으로는

의미 없는 데이터여서 삭제하지만 성능이 좋게 검증된다면 그대로 두시죠!!

0

sexyguybhc

코드는 대략 이렇게 썼습니다

0

sexyguybhc

# 데이터 불러오기
train = pd.read_csv("https://raw.githubusercontent.com/lovedlim/inf/refs/heads/main/p4/4_2/train.csv")
test = pd.read_csv("https://raw.githubusercontent.com/lovedlim/inf/refs/heads/main/p4/4_2/test.csv")

train.info()

# print(set(train['Gender']) == set(test['Gender']))
# print(set(train['Ever_Married']) == set(test['Ever_Married']))
# print(set(train['Graduated']) == set(test['Graduated']))
# print(set(train['Profession']) == set(test['Profession']))
# print(set(train['Spending_Score']) == set(test['Spending_Score']))
# print(set(train['Var_1']) == set(test['Var_1']))

target = train.pop("Segmentation")

# train = train.drop('ID', axis=1)
# test = test.drop('ID', axis=1)


print(train.shape)
print(test.shape)

train = pd.get_dummies(train)
test = pd.get_dummies(test)
print(train.shape)
print(test.shape)

from sklearn.model_selection import train_test_split
X_tr, X_val, y_tr, y_val = train_test_split(train, target, test_size=0.2, random_state=0)

from sklearn.ensemble import RandomForestClassifier
rf = RandomForestClassifier(random_state=0)
rf.fit(X_tr, y_tr)
pred_rf = rf.predict(X_val)

import lightgbm as lgb
lg = lgb.LGBMClassifier(verbose=-1, random_state=0)
lg.fit(X_tr, y_tr)
pred_lg = lg.predict(X_val)

from sklearn.metrics import f1_score
f1_rf = f1_score(y_val, pred_rf, average='macro')
f1_lg = f1_score(y_val, pred_lg, average='macro')

print(f1_rf)
print(f1_lg)

7회 기출문제 작업형1번 df 변환 후 저장되는 방식 질문

0

9

1

3 유형 귀무가설, 대립가설

0

12

2

인코딩 관련 질문 있습니다

0

16

2

작업형3 이원분산분석 sm에서불러오기 / anova_lm 차이

0

13

2

2유형 원핫인코딩 오류

0

16

2

시험장에서 주석 단축키 안될 때 많나요?

0

24

2

라벨인코딩 방식

0

21

2

test 재학습 관련

0

14

2

target 빈도 확인

0

16

2

작업형 2 연습문제 섹션 6

0

19

2

F1-score

0

17

2

작업형 2번 섹션 3

0

15

2

작업형 2 인코딩, 결측치, 모델 선택 질문

0

19

1

인코딩 방식 문의

0

24

2

9회 3유형 ==> 7회 3유형 질문드려요

0

15

2

작업형 2관련 질문입니다

0

13

2

작업형2 카테고리

0

24

2

110강 회귀_8번 문의

0

16

2

XGBRegressor 학습 시 warning 출력

0

21

2

데이터 프레임을 변경해도 되나요?

0

17

2

10회 기출 작업형3 문제 2-1 질문

0

24

2

작업형 2 질문

0

25

2

작업형 2 템플릿 확인 요청

0

27

2

작업형2 인코딩 질문

0

28

2