시험에서 minmax scale
해결됨
[퇴근후딴짓] 빅데이터 분석기사 실기 (작업형1,2,3)
스케일링 방법 2 한가지만 딱 알고 시험치러 가도 되나요?
- python
- 머신러닝
- 빅데이터
- pandas
- 빅데이터분석기사
wsyang
댓글 2
좋아요 0
조회수 212
묻고 답해요
173만명의 커뮤니티!! 함께 토론해봐요.
검증 데이터 분리 시 질문입니다.
미해결
[퇴근후딴짓] 빅데이터 분석기사 실기 (작업형1,2,3)
from sklearn.model_selection import train_test_split X_tr, X_val, y_tr, y_val = train_test_split(train.drop('charges',axis=1), train['charges'], test_size=0.15, random_state = 2022) X_tr.shape, X_val.shape, y_tr.shape, y_val.shape 학습 관련 질문을 남겨주세요. 상세히 작성하면 더 좋아요! 먼저 선생님의 코드는 위와 같았습니다. 아래는 제가 수정해서 작성한 코드입니다. from sklearn.model_selection import train_test_split X_train = train.drop('charges', axis = 1) y_train = train['charges'] X_tr, X_val, y_tr, y_var = train_test_split(X_train, y_train, test_size = 0.15, random_state= 2002) -------> 보기 편하려고 이렇게 넣었더니 y_var을 찾을 수 없다는 에러가 나왔음 헷갈리지 않기 위해 이와 같이 변수로 처리한 뒤 train_test_split을 했더니 X_train.head를 찍어도 선생님과 다른 결과가 나오고 평가 수식을 적은 후 linear regression을 하니 y_val이 정의되지 않았다고 에러가 나옵니다. 이유가 무엇인지 한참 고민해도 알아내지 못해서 질문 남깁니다. 답변해 주시면 감사하겠습니다.
- python
- 머신러닝
- 빅데이터
- pandas
- 빅데이터분석기사
김현영
댓글 2
좋아요 0
조회수 114
작업형2 object 삭제
해결됨
[퇴근후딴짓] 빅데이터 분석기사 실기 (작업형1,2,3)
안녕하세요. 선생님은 baseline으로 object를 drop하고 머신러닝 모델을 돌리셨는데 그렇게 하시는 이유가 있나요? object를 삭제하는 것이 일반적인가요 아니면 인코딩해서 포함하는 것이 일반적인지요 시험 때 어떻게 해야할지 조금 헷갈려서요~
- python
- 머신러닝
- 빅데이터
- pandas
- 빅데이터분석기사
김진주
댓글 2
좋아요 0
조회수 111
데이터 전처리 기준 질문드립니다!
해결됨
[퇴근후딴짓] 빅데이터 분석기사 실기 (작업형1,2,3)
선생님 안녕하세요! 현재 작업형2 연습을 하고 있는데 데이터 전처리 과정에서 어떤 문제는 object형 모두를 삭제하고, 어떤 문제에서는 int, float, object형 각각 일부 선택해서 삭제 또는 결측치 입력 후 검증 하던데 선생님은 어떤 기준으로 나누는지 아니면 어떤 기준을 가지고 나누면 도움이 되는지 궁금합니다!
- python
- 머신러닝
- 빅데이터
- pandas
- 빅데이터분석기사
ssy02029
댓글 2
좋아요 0
조회수 159
분석기사
해결됨
[퇴근후딴짓] 빅데이터 분석기사 실기 (작업형1,2,3)
다중분류에서도 똑같이 타겟 y값만 따로 빼두고 train_x 와 test를 합친후 전처리하고 원핫인코딩을 적용한후 다시 분류하면 라벨인코딩을 사용하지 않아도 될까요? 그리고 문제에서 제출 형식을 predict_proba()[:1] 로 하는 경우도 제시해주나요 ?
- python
- 머신러닝
- 빅데이터
- pandas
- 빅데이터분석기사
이승호
댓글 2
좋아요 0
조회수 87
캐글 문제 모음 노션페이지
해결됨
[퇴근후딴짓] 빅데이터 분석기사 실기 (작업형1,2,3)
캐글 문제 모아놓은 노션페이지 강의에서 보여주시는데 어디서 볼수있을까요? 캐글 사이트로 바로들어가면 너무 뒤죽박죽이어서요 ㅠㅠ..
- python
- 머신러닝
- 빅데이터
- pandas
- 빅데이터분석기사
란따
댓글 2
좋아요 0
조회수 85
결측치 처리관련 질문입니다.
해결됨
[퇴근후딴짓] 빅데이터 분석기사 실기 (작업형1,2,3)
안녕하세요 결측치 관련 질문드립니다 1.시험에서 test 데이터가 주어질시 제가 test데이터 행을 삭제하지 않아야 하는것은 인지했습니다. 그러나 test 데이터의 결측치를 제 임의대로 값을 넣어도 되는것인가요? 강의를 보니 이상치를 컨트롤하는 케이스는 거의없으나 결측치는 object는 최빈값 int,float은 중앙값이나 0 을 대입하는데 모든경우에 통일되는 방법인가요? 혹은 시험장에서 여러가지 결측치 처리 방법을 전부 알고가서 하나하나 검증하며 가장 값이 높은걸 넣어야 하나요 시험장에서 A로 평가하겠다 하면 검증을 통해 나오는 수치가 A를통해 보통 몇 이상이 나와야 제출할수 있을까요?
- python
- 머신러닝
- 빅데이터
- pandas
- 빅데이터분석기사
김호준
댓글 3
좋아요 0
조회수 195
예시문제 작업형2
해결됨
[퇴근후딴짓] 빅데이터 분석기사 실기 (작업형1,2,3)
안녕하세요. 강의 잘 듣고 있습니다!! 예시문제 작업형2에서, 예시에서는 pred가 0,1로만 나오는데 제출은 확률값인 0,xxx이런형태로 제출해도 되는 것이 맞나요....? roc_auc_score여서 확률값제출이 맞는 것 같은데, 예제를 볼때는 0/1로만 되어있어 질문드립니다! 감사합니다.
- python
- 머신러닝
- 빅데이터
- pandas
- 빅데이터분석기사
cpfk1004
댓글 2
좋아요 0
조회수 117
Key: 'Gender' 오류 해결
미해결
[퇴근후딴짓] 빅데이터 분석기사 실기 (작업형1,2,3)
drop작업 = 주석 처리 - 진행하지 않으면 key:'Gender' 오류남. 영상 19:02부분 # baseline - object컬럼 제거 cols = train.select_dtypes(include='object').columns # include는 파라미터라서 ==이 아닌 = 로 대입 cols print(train.shape, test.shape) # train.drop(cols, axis=1, inplace=True) train = train.drop(cols, axis=1) test = test.drop(cols, axis=1) print(train.shape, test.shape) # label from sklearn.preprocessing import LabelEncoder for col in cols: le = LabelEncoder() train[col] = le.fit_transform(train[col]) test[col] = le.transform(test[col]) train[cols].head() # one-hot
- python
- 머신러닝
- 빅데이터
- pandas
- 빅데이터분석기사
댓글 2
좋아요 0
조회수 123
머신러닝 질문드립니다.
해결됨
[퇴근후딴짓] 빅데이터 분석기사 실기 (작업형1,2,3)
1. predict와 predict_proba 모두 머신러닝 모델에서 예측할 때 사용하는 함수인데, 빅분기 시험에서 제출할 때 predict_prob함수를 사용해야만 하는 이유가 있나요? 2. random_state 경우 train&test split에도 사용하고 예축 모델에서도 사용하셨는데 빅분기 시험에서는 train&test split만 사용해도 괜찮나요? (그리드서치를 통한 하이퍼 파라미터 탐색에서도 train&test split에서만 random_state를 사용하는 경우가 있는 것 같아서요. -> 각 분할된 데이터셋의 최적의 하이퍼 파라미터 탐색하는 방식)
- python
- 머신러닝
- 빅데이터
- pandas
가영
댓글 2
좋아요 0
조회수 102
코랩에서 코딩 자동 입력 해제
해결됨
[퇴근후딴짓] 빅데이터 분석기사 실기 (작업형1,2,3)
이렇게 자동으로 코딩이 되는거 없앨 수 없나요? 직접 혼자서 적어보려는데 자동입력이 되어 공부가 잘안되는거같습니다..
- python
- 머신러닝
- 빅데이터
- pandas
- 빅데이터분석기사
댓글 2
좋아요 0
조회수 2206
잔차 제곱합 구하는 문제
해결됨
[퇴근후딴짓] 빅데이터 분석기사 실기 (작업형1,2,3)
시험에서 단순선형회귀든 다중선형회귀든 잔차 구할 때, model.resid 구하는 함수로 구해도 되나요? (단순선형회귀 강의에서 잔차를 실제값에서 예측값빼는식으로 구하지 않고)
- python
- 머신러닝
- 빅데이터
- pandas
- 빅데이터분석기사
wsyang
댓글 2
좋아요 0
조회수 200
영상 9분 33초 질문
해결됨
[퇴근후딴짓] 빅데이터 분석기사 실기 (작업형1,2,3)
--------------------------------------------------------------------------- FileNotFoundError Traceback (most recent call last) Cell In[8], line 1 ----> 1 train_data = pd.read_csv("/kaggle/input/titanic/train.csv") 2 train_data.head() 다운이 제대로 받지 않아서 생기는 문제 같은데요... 영상에서는 다운을 받는 과정이 생략되어있는거 같은데 자세하게 알려주세요
- python
- 머신러닝
- 빅데이터
- pandas
- 빅데이터분석기사
유민곤
댓글 2
좋아요 0
조회수 81
귀무가설 채택/기각
해결됨
[퇴근후딴짓] 빅데이터 분석기사 실기 (작업형1,2,3)
단일표본검정 예시 문제에서 귀무가설을 기각하고 채택하는게 헷갈려 질문합니다! 단측검정 "합격원두 상품의 평균 무게는 120g보다 크다"의 경우 코드를 실행했을 때 p-value가 0.01985가 도출됩니다. 그렇다면 유의수준 0.05보다 작기 때문에 귀무가설을 기각하고 대립가설인 "합격원두 상품의 평균 무게는 120g보다 작다"를 채택하는 것이지요? 그런데 해당 표본의 평균은 120g보다 큰 121g인데.... 어디서 제가 잘못이해한걸까요?
- python
- 머신러닝
- 빅데이터
- pandas
- 빅데이터분석기사
김혁수
댓글 2
좋아요 0
조회수 703
전처리
해결됨
[퇴근후딴짓] 빅데이터 분석기사 실기 (작업형1,2,3)
학습 관련 질문을 남겨주세요. 상세히 작성하면 더 좋아요! 질문과 관련된 영상 위치를 알려주면 더 빠르게 답변할 수 있어요 먼저 유사한 질문이 있었는지 검색해보세요 모의3 같은 경우에는 전처리 스케일링 따로 안하셨는데, 시험장에서도 제가 판단하고 하지 말아야할까요? 아니면 라벨링 같은 데이터는 빼고 나머지 숫자 데이터에대해서 전처리하고 해야하는지,, 아니면 라벨링 신경쓰지않고 스켕일링 모두 해도 되는지요?
- python
- 머신러닝
- 빅데이터
- pandas
- 빅데이터분석기사
윰
댓글 2
좋아요 0
조회수 83
2유형 데이터전처리 pop 관련한 질문
해결됨
[퇴근후딴짓] 빅데이터 분석기사 실기 (작업형1,2,3)
train = train.drop('ID', axix=1) test = test.pop('ID') 안녕하세요. 공부하다가 데이터전처리 과정에서 고민이 생겨서요 위코드와 아래코드가 같은걸까요? 둘중 아무거나 써도되는지.. 아님 둘중 하나를 추천하시는지. 이해가 부족해서 고민하다가 질문올립니다. target=train.pop('타겟컬럼명')
- python
- 머신러닝
- 빅데이터
- pandas
- 빅데이터분석기사
유리시나
댓글 2
좋아요 0
조회수 150
LogisticRegression
해결됨
[퇴근후딴짓] 빅데이터 분석기사 실기 (작업형1,2,3)
왜 이런 오류가 나올까요?
- python
- 머신러닝
- 빅데이터
- pandas
- 빅데이터분석기사
shs4166
댓글 2
좋아요 0
조회수 102
작업형1 모의문제1 에러발생
미해결
[퇴근후딴짓] 빅데이터 분석기사 실기 (작업형1,2,3)
작업형1 모의문제1 풀고 있는데요 tuple indices must be integers or slices, not str 라는 에러가 발생하네요ㅠㅠ 첫번째문제 그대로 따라했는데 데이터 문제일까요?
- python
- 머신러닝
- 빅데이터
- pandas
- 빅데이터분석기사
dlwlgusrkgus
댓글 3
좋아요 0
조회수 112
머신러닝 회귀 모델 반복 실행할수록 값 바뀜 현상
해결됨
[퇴근후딴짓] 빅데이터 분석기사 실기 (작업형1,2,3)
# RandomForestRegressor from sklearn.ensemble import RandomForestRegressor model = RandomForestRegressor() model.fit(X_tr, y_tr) pred = model.predict(X_val) rmse(y_val, pred) 머신러닝 회귀 모델에서 스케일링 해둔걸 주석처리하고 이전 셀 실행 후 위 코드를 실행해서 베이스라인 값을 체크하려는데, 강의와 다른 값이 나와서 한번 더 실행했더니 값이 또 바뀌는데 원인이 뭘까요? 이후에도 계속 실행할수록 값이 매번 바뀝니다!
- python
- 머신러닝
- 빅데이터
- pandas
- 빅데이터분석기사
- 회귀
- 분류
- 모델
오벽
댓글 2
좋아요 0
조회수 136
alternative 문의
해결됨
[퇴근후딴짓] 빅데이터 분석기사 실기 (작업형1,2,3)
여러 검정들마다 alternative를 어떤것은 붙이고, 어떤것은 안붙이는 것이 헷갈립니다. 기억을 쉽게 하는 방법이 있을까요
- python
- 머신러닝
- 빅데이터
- pandas
- 빅데이터분석기사
wsyang
댓글 2
좋아요 0
조회수 83
인기 태그
인프런 TOP Writers
주간 인기글
- [부산] AI 세미나 : 9월 수강생 모집 Edun
- 9월 출시 예정 공연 예매 플랫폼 멀티켓과 함께할 백엔드 개발자를 구합니다 sumin
- 🧘♀️ [운동공간] 기획자/디자이너/앱 개발자를 찾습니다 띄띄
- 🚀 끝까지 만들어 본 적 있나요? | 실서비스 완성 + 수익 창출 모임 💰 catalyst collectiv
- 🚀 끝까지 만들어 본 적 있나요? | 실서비스 완성 + 수익 창출 모임 💰 catalyst collectiv