inflearn logo
강의

강의

N
챌린지

챌린지

멘토링

멘토링

N
클립

클립

로드맵

로드맵

지식공유

[퇴근후딴짓] 빅데이터 분석기사 실기 (작업형1,2,3)

3회 기출유형(작업형2)_ csv 파일 생성 오류 등

해결된 질문

376

가보자고

작성한 질문수 9

0

안녕하세요.

강의 잘 듣고 있습니다. 항상 어의없을 질문에도 친절하게 답해주셔서 정말 감사드립니다.

3회 기출유형(작업형 2)에서 관련해서 문의드립니다.

1. 문제를 보고 회귀인지 분류인지 구분이 잘 안될 땐 모델링을 회귀도 해보고 분류도 해봐서 가장 성능이 좋은 걸 사용하면 되겠죠?

2. 확률을 예측할 때

분류모델이면 proba를 써야하는데

predict=model.predict_proba(x_val)

회귀모델일 경우에는 proba를 사용 안 해도 되나요?

predict=model.predict(x_val)

 

3. Unnamed: 0 변수를 의미없는 값이라고 생각하여 데이터 전처리 과정 중에

train, test 데이터에서 모두 drop을 했습니다.

근데.... 왜 csv 파일 생성할 때, 다시 나타난 걸까요...ㅠㅠ

<출력된 csv 파일..>

 

<코드>

# 라이브러리 및 데이터 불러오기
import pandas as pd
train = pd.read_csv("train.csv")
test = pd.read_csv("test.csv")

# EDA
pd.set_option('display.max_columns',None)
print(train.head())  # target: TravelInsurance  포함되어 있음
print(test.head())

print(train.shape, test.shape)

print(train.info())
print(train.describe())
print(train.describe(include= 'object')) # Employment Type GraduateOrNot FrequentFlyer EverTravelledAbroad

print(train.isnull().sum())

print(train.value_counts('TravelInsurance'))  # 0    965, 1    525

# 데이터 전처리(결측치: 없음, 의미 없는 칼럼 삭제, ID 처리: 없음) # Unnamed: 0  삭제

train = train.drop('Unnamed: 0', axis = 1)
test =test.drop('Unnamed: 0', axis = 1)
print(train.shape, test.shape)

print(train.head())  
print(test.head())

# 피처엔지니어링(범주형)
from sklearn.preprocessing import LabelEncoder

cols = ['Employment Type', 'GraduateOrNot', 'FrequentFlyer', 'EverTravelledAbroad']
for col in cols:
  la = LabelEncoder()
  train[col] = la.fit_transform(train[col])
  test[col] = la.transform(test[col])

# 데이터 분할
from sklearn.model_selection import train_test_split

x_tr, x_val, y_tr, y_val = train_test_split(train.drop('TravelInsurance', axis =1), train['TravelInsurance'], test_size = 0.2, random_state = 2023)
print(x_tr.shape, x_val.shape, y_tr.shape, y_val.shape)   # (1192, 8) (298, 8) (1192,) (298,)



# 모델링(회귀)

# import sklearn
# print(sklearn.__all__)
# print(sklearn.linear_model.__all__)

from sklearn.linear_model import LinearRegression
model = LinearRegression()
model.fit(x_tr, y_tr)
predict=model.predict(x_val)
print(predict)


# 성능평가(roc_auc_score)
from sklearn.metrics import roc_auc_score
r = roc_auc_score(y_val, predict)
print(r) #베이스: 0.7544863861386139

# 예측
predict=model.predict(test)

# 데이터 내보내기
submit = pd.DataFrame(
{
 'y_pred' : predict 
}    

).reset_index().to_csv("1111.csv")

df1 = pd.read_csv("1111.csv")
print(df1.head())

python 머신러닝 빅데이터 pandas 빅데이터분석기사

답변 1

0

퇴근후딴짓

  1. 종류(카테고리)가 구분 된다면 분류, 가격/수요량 등 연속형 숫자면 회귀 입니다

  2. 분류도 proba는 확률값을 물을 때(roc auc로 평가할 때)만 입니다

    predict도 사용해요! (F1, 정확도 등 평가)

    회귀는 확률값이란게 없어 proba가 없어요

  3. to_csv 괄호안 옵션으로 index=False가 필요합니다

화이팅👏👏👏 

평가결과값 문의

0

3

1

시계열 데이터 날짜와 시간 format

0

15

1

평가지표 F1 스코어 질문드립니다.

0

17

2

작업형 2 기출7회분에서

0

32

2

작업형2 모의문제1 (30강)

0

28

2

수강 기간 연장 문의 드립니다.

0

35

2

수강 계획과 관련해 문의 드립니다.

0

26

2

작업형1 - 연습문제 16~39 풀이는 몇강을 보면 되나요?

0

49

2

작업형 1 -연습문제 4-6

0

35

2

작업형 1 유형 부분

0

42

2

작업형 1 (삭제예정, 구 버전)

0

51

2

수강기간 연장 문의드립니다.

0

37

2

2유형 레이블 인코딩 VS 원핫 인코딩

0

37

3

수강기간 연장 문의드립니다.

0

44

2

인덱스 슬라이싱

0

36

2

질문 드립니다.

0

50

2

강의 내용 관련 질문드립니다~

0

46

2

수강 연장 문의

0

63

2

강의자료 일괄 다운로드

0

58

2

수강기간 연장 문의드립니다

0

48

2

list 문제 질문드립니다~

0

38

2

빅분기 실기 12회 재도전

0

63

2

강의 기간 연장 가능여부 검토 요청건

0

51

2

수강기간 연장 문의 드립니다

0

46

2