inflearn logo
강의

강의

N
챌린지

챌린지

멘토링

멘토링

N
클립

클립

로드맵

로드맵

지식공유

[퇴근후딴짓] 빅데이터 분석기사 실기 (작업형1,2,3)

당신의 열정을 응원합니다.

random_state 값에 따라서 값이 큰 차이가 나는 경우가 있나여 ?

해결된 질문

455

작성자 없음

작성한 질문수 0

0

안녕하세요

2유형을 공부하는 중에

train_test_split의 random_state 값에 따라서 값의 편차가 크게 차이 나는 것을 발견했습니다.

# random_state = 1 : 0.8643817947300534 # random_state = 2023 : 0.7804496038326884

이 정도로 차이가 나는데 테스트 값에는 크게 영항이 없는 것인가요 ? 다른 코드들은 모두 동일했습니다 !

 

import pandas as pd
import warnings 
warnings.filterwarnings('ignore')
train= pd.read_csv('https://raw.githubusercontent.com/Datamanim/datarepo/main/stroke_/train.csv')
test= pd.read_csv('https://raw.githubusercontent.com/Datamanim/datarepo/main/stroke_/test.csv')

train = train.drop('id',axis=1)
test_id = test.pop('id')
y_train = train.pop('stroke')

# 결측치 채우기 
train['bmi'] = train['bmi'].fillna(train['bmi'].mean())
test['bmi'] = test['bmi'].fillna(train['bmi'].mean())

train['age'] = train['age'].str.replace('*','').astype('int')

# StandarScaler
# print(train.info())
# train.nunique()
cols = ['age','avg_glucose_level', 'bmi']
from sklearn.preprocessing import MinMaxScaler
scaler = MinMaxScaler()
train[cols] = scaler.fit_transform(train[cols])
test[cols] = scaler.transform(test[cols])

# LabelEncoder 
from sklearn.preprocessing import LabelEncoder
le = LabelEncoder()
train['gender'] = le.fit_transform(train[['gender']])
test['gender'] = le.fit_transform(test[['gender']])

# get_dummies
train = pd.get_dummies(train)
test = pd.get_dummies(test)

cols = ['ever_married_No','work_type_Govt_job','Residence_type_Rural','smoking_status_Unknown']
train = train.drop(cols,axis=1)
test = test.drop(cols,axis=1)

from sklearn.model_selection import train_test_split
X_tr,X_val,y_tr,y_val = train_test_split(train,y_train,test_size=0.2,random_state=2023,stratify = y_train)

from sklearn.ensemble import RandomForestClassifier
model = RandomForestClassifier(random_state=2023,n_estimators = 200)
model.fit(X_tr,y_tr)
pred_val = model.predict_proba(X_val)

from sklearn.metrics import roc_auc_score
roc_auc_score(y_val,pred_val[:,1])

# random_state = 1 : 0.8643817947300534
# random_state = 2023 : 0.7804496038326884

python 머신러닝 빅데이터 pandas 빅데이터분석기사

답변 1

0

퇴근후딴짓

제가 제공해드린 데이터가 아니라서 정확하겐 모르겠지만

아마도 토이 데이터여서 데이터 크기가 작아서 그렇지 않을까 추측됩니다. 💪

수업노트가 어디에 있나요?

0

12

1

실기시험 제출관련

0

142

2

6.20 작업형 2 과적합

0

150

3

코딩팡 장업형2 베이스 라인 인코딩 종류 질문

0

47

2

로지스틱회귀, 회귀

0

47

2

회귀 문제를 풀때 질문입니다.

0

53

1

불균형 처리 후 성능이 더 낮아졌다면,

0

61

2

실기 체험 제2유형 에러 문의

0

61

1

LIGHTGBM 으로 하면 pred값이 소수점 6자리까지 나오는게 맞나요

0

48

2

3번문제 등분산 가정

0

46

2

작업형3 target 형 변환 질문

0

34

2

[작업형1] 연습문제 섹션1 ~ 10 의 section4

0

36

3

원핫인코딩과 레이블 인코딩에서 concat

0

58

2

제2유형 질문입니다.

0

46

2

C()

0

44

2

작업형 2에서 strafity 적용 유무

0

51

2

수강 기간 연장 가능 여부 문의드립니다.

0

59

1

ols

0

43

2

2유형 작성관련 질문(일반 심화)

0

39

2

2유형 작성관련 질문

0

41

2

2유형 object컬럼 개수 다르면

0

48

2

코딩팡질문이요ㅠㅠ

0

45

2

관찰값과 기대값의 개념이 헷갈립니다.

0

25

2

작업형2 ID 컬럼 삭제 질문

0

45

2