4-1 작업형 예시 질문 있습니다
문제2
주어진 데이터에서 결측치가 30%이상 되는 컬럼을 찾고 해당 컬럼에 결측치가 있는 데이터(행)를 삭제 함.
그리고 30% 미만, 20% 이상인 결측치가 있는 컬럼은 최빈값으로 값을 대체하고
'f3'컬럼의 'gold' 값을 가진 데이터 수를 출력하세요!
문제가 지금 이런 형식인데요.
제가 궁금한 것은, 결측치의 크기를 판단하는 판단하는 위치입니다.
'f1' 칼럼을 dropna 하게되면 다른 행들도 영향을 받아서 결측치가 들어있는 행도 같이 날라가게 되는데
각 칼럼별 결측치의 크기를 판단하는 위치는 모든 작업을 수행하기 전에 하는 것이 맞을까요?
<제가 푼 코드>
# your code
import pandas as pd
import numpy as np
pd.set_option('display.max_columns', None)
# file load
file_path = "/content/drive/MyDrive/Colab Notebooks/빅데이터 분석기사/1. 작업형1/"
df = pd.read_csv(file_path+"members.csv")
check = []
# find na over 30%
for col in list(df.columns):
check.append(df[col].isnull().sum()/len(df))
for col, check in zip(list(df.columns), check):
if check >= 0.3:
df = df.dropna(subset=col)
elif check < 0.3 and check >= 0.2:
df[col] = df[col].fillna(df[col].mode()[0])
print(len(df[df['f3'] == 'gold']))
<강의에서 알려준 코드>
# 풀이
import pandas as pd
df = pd.read_csv("members.csv")
# print(df.isnull().sum())
# print(len(df) * 0.3)
# f1 삭제
# f3 최빈값
# print(df.shape)
df = df.dropna(subset=['f1'])
# print(df.shape)
# print(df.head())
df['f3'] = df['f3'].fillna(df['f3'].mode()[0])
# print(df.head())
# df.isnull().sum()
print(sum(df['f3'] == 'gold'))
답변 1
0
문제에서 의도한 바는
결측치가 30%이상 과 30~20%를 구분하고자 했어요!
데이터를 가공하기 전의 결측치 비율이 맞습니다.
여러 작업을 한 문제에 담아서 표현하려다보니 말씀하신대로도 생각할 수 있겠네요!
의견 감사합니다. 문장을 다듬어 보도록 하겠습니다.
데이터 전처리 관련
0
5
2
시험에서 문제 불러오기
0
4
2
2번문제 출력값 질문
0
11
2
pd.get_dummies()가 bool로 반환
0
10
2
대응표본검정 레빈
0
16
3
단일표본검정 문제 유형
0
17
2
[작업형 3] 6~7. 카이제곱 검정
0
15
2
9회 작업형3 문제 1-1
0
24
2
최종답안 계산 방식 질문
0
16
1
시험 치기 전 급하게 질문 사항
0
26
2
유형3
0
25
2
작업형 2 연습문제 섹션 3
0
18
2
11 기출문제 ipynb파일
0
25
2
작업형 3 유형
0
24
2
11회 기출 유형(작업형1) 2번 정답
0
22
2
f1 score 질문
0
19
2
10회 작업형 2 인코딩 질의
0
17
2
53번 강의에서 갑자기 수업노트가 없어졌습니다.
0
21
2
28:19 roc_auc이유
0
21
2
수강연장문의
0
23
2
전체적인 머신러닝 순서
0
26
2
빅분기 실기 유형2질문
0
27
1
ID 전처리 이유
0
34
2
데이터제공
0
33
2





