머신러닝 프로젝트를 하고싶습니다.
파이썬으로 시작하는 머신러닝+딥러닝(sklearn을 이용한 머신러닝부터 TensorFlow, Keras를 이용한 딥러닝 개발까지)
삭제된 글입니다
- python
- 머신러닝
- 딥러닝
- keras
- sklearn
chanyoungcplus
댓글 1
좋아요 0
조회수 252
이야기를 나눠요
173만명의 커뮤니티!! 함께 토론해봐요.
작업형2 성별예측 문제
[퇴근후딴짓] 빅데이터 분석기사 실기 (작업형1,2,3)
https://dataq.goorm.io/exam/116674/체험하기/quiz/4 여기서 하는 성별예측 문제에서 import pandas as pd train = pd.read _csv("data/customer_train.csv") test = pd.read _csv("data/customer_test.csv") # print(train.shape, test.shape) # print( train.info ()) # print(train.isnull().sum()) # print(test.isnull().sum()) #결측치 처리 (환불금액) train['환불금액'] = train['환불금액'].fillna(0) test['환불금액'] = test['환불금액'].fillna(0) # print(test.isnull().sum()) # print(train['성별'].value_counts()) #인코딩 target = train.pop('성별') train = pd.get_dummies(train) test = pd.get_dummies(test) #검증 데이터 분리 from sklearn.model_selection import train_test_split X_tr, X_val, y_tr, y_val = train_test_split(train, target, test_size=0.2, random_state=0) # print(X_tr.shape, X_val.shape, y_tr.shape, y_val.shape) from sklearn.ensemble import RandomForestClassifier rf = RandomForestClassifier(random_state=0) rf.fit (X_tr, y_tr) pred = rf.predict_proba(X_val) # print(pred) from sklearn.metrics import roc_auc_score roc = roc_auc_score(y_val, pred[:,1]) #예측 및 파일생성 pred = rf.predict_proba(test) submit = pd.DataFrame({ "pred":pred[:,1] }) submit.to _csv("result.csv", index=False) # print( pd.read _csv("result.csv")) 이렇게 코딩을 했는데 예측 및 파일 생성에서 pred = rf.predict_proba(test) 여기 부분이 오류가 뜨는데 왜 그런가요 ㅠㅠ > Makefile:6: recipe for target 'py3_run' failed make: *** [py3_run] Error 1 Traceback (most recent call last): File "/goorm/Main.out", line 43, in <module> pred = rf.predict_proba(test) File "/usr/local/lib/python3.9/dist-packages/sklearn/ensemble/_forest.py", line 674, in predict_proba X = self._validate_X_predict(X) File "/usr/local/lib/python3.9/dist-packages/sklearn/ensemble/_forest.py", line 422, in validate X_predict return self.estimators_[0]._validate_X_predict(X, check_input=True) File "/usr/local/lib/python3.9/dist-packages/sklearn/tree/_classes.py", line 407, in validate X_predict X = self._validate_data(X, dtype=DTYPE, accept_sparse="csr", File "/usr/local/lib/python3.9/dist-packages/sklearn/base.py", line 437, in validate data self._check_n_features(X, reset=reset) File "/usr/local/lib/python3.9/dist-packages/sklearn/base.py", line 365, in check n_features raise ValueError( ValueError: X has 73 features, but DecisionTreeClassifier is expecting 74 features as input. 이렇게 뜹니다,,
- python
- 머신러닝
- 빅데이터
- pandas
- 빅데이터분석기사
wnguswls2818
댓글 1
좋아요 0
조회수 250
문제2
[퇴근후딴짓] 빅데이터 분석기사 실기 (작업형1,2,3)
안녕하세요. 좋은 강의 감사드립니다. 덕분에 잘 배우고 있습니다. 문제 2. 주어진 데이터에서 결측치가 30%이상 되는 컬럼을 찾고 해당 컬럼에 결측치가 있는 데이터(행)를 삭제 함. 그리고 30% 미만, 20% 이상인 결측치가 있는 컬럼은 최빈값으로 값을 대체하고 'f3'컬럼의 'gold' 값을 가진 데이터 수를 출력하세요! 문제2를 대하고 순간 다음과 같은 고민을 했었습니다. 1번을 수행하여 'f1'컬럼의 결측치 행을 삭제한 후 2번을 하려니 'f3'컬럼의 결측치 갯수가 18개만 남더군요. 그럼 18개는 최초 데이터 100개의 20% 미만일까? 그렇지 않다. 'f1'컬럼 결측치를 제거한 후 데이터 갯수 69개의 20%~30%(14~20)에 해당한다. 그렇다면 'f3'컬럼의 최빈 값은 'f1'컬럼의 결측치를 제거하기 전의 값을 사용해야할까 아니면 결측치 제거 후의 값을 사용해야 할까? 결과적으로는 어떤 방식으로 하던 답은 56으로 일치했지만 주어진 데이터에 따라 다른 값이 나올 수도 있을 것 같습니다. 혼돈을 없애기 위해 문제 2의 문항 순서를 바꾸면 어떨까요? 30% 미만, 20% 이상인 결측치가 있는 컬럼은 최빈값으로 값을 대체하고 주어진 데이터에서 결측치가 30%이상 되는 컬럼을 찾고 해당 컬럼에 결측치가 있는 데이터(행)를 삭제 함. 'f3'컬럼의 'gold' 값을 가진 데이터 수를 출력하세요!
- python
- 머신러닝
- 빅데이터
- pandas
- 빅데이터분석기사
김우현
댓글 1
좋아요 1
조회수 320
docker 관련 질문
따라하며 배우는 도커와 CI환경 [2023.11 업데이트]
ec2에 개별적으로 docker run jpr파일을 띄우고 docker stop을 하고 다 지우고 통합 관리를 위해 docker compose yml에서도 같은 jpr파일을 적어서 docker compose up하면 안됩니다... ec2안데 개별적으로 docker run하면 됩니다. ..
- aws
- docker
- github
- ci/cd
- travis-ci
- 데이터-엔지니어링
kim1234123
댓글 0
좋아요 0
조회수 434
수강기간 연장
15일간의 빅데이터 파일럿 프로젝트
안녕하세요 강사님, 유익하고 좋은 강의를 만들어주셔서 감사드립니다. 수강하지 못한 부분들이 많이 있는데 수강기간 연장을 요청 드리고 싶습니다ㅜㅜ
- 빅데이터
- hadoop
- kafka
- zookeeper
- redis
- flume
- impala
- 데이터-엔지니어링
김도균
댓글 2
좋아요 0
조회수 431
[1유형]
[퇴근후딴짓] 빅데이터 분석기사 실기 (작업형1,2,3)
안녕하세요. 1유형은 부분점수가 있다고 하는데 값을 출력하고 그 때마다 제출 버튼을 눌러야지 채점이 되는건가요? 1유형에도 문제가 3개 있으면 제출 버튼을 3번 누르면 되는 건가요? 2유형은 마지막에 파일 생성하면 끝이 나는 건가요? 3유형도 궁금합니다!!
- python
- 머신러닝
- 빅데이터
- pandas
- 빅데이터분석기사
tlsdk0284
댓글 0
좋아요 0
조회수 297
맥북으로 공부
[퇴근후딴짓] 빅데이터 분석기사 실기 (작업형1,2,3)
안녕하세요 강사님 올해 말 실기 시험 목표로 강의를 수강 중인 학생입니다. 강의 수강 중 문득 걱정이 되는게 있어서 문의 드립니다. 맥북 단축키 같은것도 알려주시고 당장 수강하는데는 별 문제없다고 생각하는데, 시험장에 맥북을 들고 갈 순 없는 노릇이니.. 혹시 맥북으로 공부해 갔을때 발생할 수 있는 문제와 그에 대처방법이 혹시 있을까요?
- python
- 머신러닝
- 빅데이터
- pandas
- 빅데이터분석기사
udinotti
댓글 1
좋아요 0
조회수 374
강의 연장
[퇴근후딴짓] 빅데이터 분석기사 실기 (작업형1,2,3)
안녕하세요 강의 수강생인데요 ㅠ 이번 실기 치르는데 제가 작년부터 강의를 결제해서 듣고 있어서요 혹시 다음주까지 연장할 수 있는 기능이나 방법이 있을까요 ?
- python
- 머신러닝
- 빅데이터
- pandas
- 빅데이터분석기사
안서은
댓글 1
좋아요 0
조회수 368
leafy 까지 듣다가 고민입니다..
개발자를 위한 쉬운 도커
삭제된 글입니다
- docker
- 가상화
- ci/cd
- docker-compose
- github-actions
- docker-volume
- container
googoo9
댓글 1
좋아요 0
조회수 349
BERTopic 분석 방법
빅데이터/텍스트마이닝 분석법 (LDA,BERTtopic,감성분석,CONCOR with ChatGPT)
안녕하세요 선생님 제가 LDA분석방법으로 연구를 진행중인데 이 LDA분석 방법의 단점을 개선한 방법으로 딥러닝 방식인 BERTopic 분석 방법이 최근 등장해서 연구논문에 조금씩 등장하는걸 확인했습니다. 그래서 이 분석 방법에 흥미가 생겨 어떻게 할 수 있는지 인터넷, 책 등을 아무리 찾아봐도 직접적으로 연구에 어떻게 적용해서 하는 건지, 딥러닝 방식이라 학습시키는 데이터(말뭉치)는 또 어떻게 준비하는 건지.. 도통 모르겠고 도움을 받을 수 있는 길이 없는거 같아서 답답한 마음에 한번 여쭤봅니다. 혹시 연구논문에 적용가능한 BERTopic 분석 방법에 대한 강의를 올려주실 계획은 없으실지 궁금합니다!
- 빅데이터
- 텍스트마이닝
우아한 북극곰
댓글 1
좋아요 0
조회수 512
계속 진도를 빼는 게 맞을까요? 나을까요?
[퇴근후딴짓] 빅데이터 분석기사 실기 (작업형1,2,3)
안녕하세요 비전공자 직장인입니다. 퇴근후 딴짓 님 강의를 열심히 듣고 있습니다. 현재 작업형2 모의문제 2를 혼자서 풀고 있는데, 단순한 결측치 찾고, 샘플 찾고, 그런 것들은 하겠는데 이거를 모델링 하는 거에서부터 사실 멘붕입니다. 작업형1 모의문제를 풀 때도 똑같이 강의를 듣던것보다 더 어려워서 멘붕이 왔었습니다. 일단은 모르겠는 부분은 인지한 상태로 다시 반복하겠다는 의지로 계속 강의를 듣는 게 맞겠죠? 반복이 답이겠죠??
- python
- 머신러닝
- 빅데이터
- pandas
- 빅데이터분석기사
뚜디니
댓글 3
좋아요 1
조회수 349
강의 듣고
[퇴근후딴짓] 빅데이터 분석기사 실기 (작업형1,2,3)
강의를 한번 쭉 듣고나서는 이 강의 기출을 반복하면되나요??? 합격하신 분들은 이 강의만 반복적으로 돌려서 합격하셨다는건지 아님 얼른 듣고 추가적으로 더 무엇을 했다는것인지 무엇을 해야하는지 궁금합니다.
- python
- 머신러닝
- 빅데이터
- pandas
- 빅데이터분석기사
joy10780
댓글 1
좋아요 0
조회수 289
꼭 암기해야하는 코드나 파트...
[퇴근후딴짓] 빅데이터 분석기사 실기 (작업형1,2,3)
선생님, 강의 열심히 보고 있는데 제가 5월 중순부터 시작하면서 조금 일찍 시작했는데도 불구하고 암기 할 게 너~~~~~~무 많아서 큰일입니다 ㅠㅠ 단권화 시키려고 실기용 교재를 샀는데 정말 정말 이것만큼은 꼭! 외우고 가야하는 코드나 문법같은거를 정리해주실 수 있나요? (강의나...파일로) 사실 고득점 합격은 바라지도 않고 60점 턱걸이로라도 너무 붙고싶습니다!
- python
- 머신러닝
- 빅데이터
- pandas
- 빅데이터분석기사
moonwrd
댓글 2
좋아요 0
조회수 410
이번 실기일까지 강의를 듣고 싶어요.
[퇴근후딴짓] 빅데이터 분석기사 실기 (작업형1,2,3)
삭제된 글입니다
- python
- 머신러닝
- 빅데이터
- pandas
- 빅데이터분석기사
찰스
댓글 1
좋아요 0
조회수 286
선생님 방탈출 질문 죄송한데요 고민있어요
[코드캠프] 부트캠프에서 만든 고농축 백엔드 코스
선생님 프로젝트 폴더 및 파일 이름을 어떤식으로 주로 지으시나요? 강의에서처럼 01-02-token-api 이런식으로 주로 하시나요? 아니면 01-02-tokenApi 이런식으로 하시나요?? 프로젝트 폴더 및 파일 이름은 같이 작업하는 개발자들끼리 코드컨벤션을 짜서 정하는거라고 하지만,, 아직 취준생이고 혼자 작업하는 일이 많은 저는 어떤방식으로 해야할지 고민입니다. 어떤 방식을 더 선호하시고 추천하시나요? (프론트 백엔드 구분없이 !)
- javascript
- node.js
- docker
- rest-api
- nestjs
반가우면반갑다고해
댓글 0
좋아요 0
조회수 491
강의 내용 정리 후 포스팅 문의
실리콘밸리 엔지니어와 함께하는 Redis
삭제된 글입니다
- 빅데이터
- redis
- 데이터-엔지니어링
- database
형빈
댓글 1
좋아요 0
조회수 449
혹시 환불이 가능할까요.?
대세는 쿠버네티스 (초급~중급편)
삭제된 글입니다
- docker
- kubernetes
대전남자
댓글 1
좋아요 0
조회수 367
실습 코드들 개인 깃허브에 업로드 가능한가요??
[파이토치] 실전 인공지능으로 이어지는 딥러닝 - 기초부터 논문 구현까지
안녕하세요!! 공부한 기록을 남기고싶은데, Github에 강의중에 실행한 코드들이나 압축파일에 있는 코드파일들 올려도 되나요..?
- python
- 머신러닝
- 딥러닝
- 인공신경망
- pytorch
miyang
댓글 1
좋아요 0
조회수 433
컨테이너 구성에서 궁금한 것이 있습니다.
개발자를 위한 쉬운 도커
안녕하세요! 강의 정말 잘보고 있습니다. 쉽게 궁금증이 해결될 수 있는 부분인데 제가 혼자 싸매고 있는 걸 수 있습니다! 도커 컨테이너 내부를 그림으로 자주 표현해 주실 때 OS 레이어 부분의 궁금증입니다. 실제 도커는 컨테이너를 만드는 기술이 아니라 컨테이너를 만드는 기술을 쉽게 사용할 수 있도록 하는 것으로 이해했습니다. 그리고 컨테이너는 호스트 OS의 커널을 공유한다고 이해했습니다. 그렇다면, 이미지에서 보여주시는 OS 레이어 부분은 실제 OS 의 파일들이 들어있다는 의미인가요? 아니면 호스트 OS의 일부분이며 커널이라고 이해해도 괜찮을까요? 혹시 일부분이라면 도커의 이미지를 만들 때 호스트 OS를 건드릴 수 있는 부분들이 포함되어 있는건가요?
- docker
- 가상화
- ci/cd
- docker-compose
- github-actions
- docker-volume
- container
산성
댓글 1
좋아요 0
조회수 482
웹크롤링 강의
[무료]기초 텍스트마이닝: 앱 리뷰 분석 with 파이썬(40분 완성)
안녕하세요 선생님 빅데이터 분석에 관심이 있어 파이썬을 1도 모르는 상태에서 시작해 현재 선생님의 강의를 통해 많은 도움을 받고 있습니다. 현재 텍스트 마이닝 분석 방법으로 쓴 논문들을 보면 쇼핑몰 댓글 부터 해서 각종 SNS(페이스북, 인스타그램 등)의 댓글을 분석한 논문들을 많이 살펴볼 수 있는데 현재 파이썬 초보로서 데이터를 수집하는 과정(웹크롤링)이 제일 중요하고도 어려운 것 같습니다. 현재 텍스톰이나 빅카인즈 같은 웹사이트를 이용하는 것 말고 파이썬 으로 다양한 데이터를 직접 웹크롤링 해서 데이터를 수집하는 방법을 집중적으로 다룬 강의는 거의 찾아보기 어렵더라구요..ㅠㅠ 블로그 등에 검색해보면 코드가 공개된 것도 있지만 여기저기 코드 방식이 다 다양하고 막상 적용해서 실행해보면 또 에러 생기고 이유는 모르겠고 답답하더라구요. SNS 채널 및 쇼핑몰 댓글 등을 웹크롤링 하는 과정을 하나하나 다 보여주는 강의가 있으면 좋겠다고 생각하고 있는데 혹시 이렇게 여러 채널의 웹크롤링 과정만 다룬 강의를 올려주실 계획은 없으신지요?
- 빅데이터
- NLP
- 텍스트마이닝
- 데이터-리터러시
우아한 북극곰
댓글 1
좋아요 0
조회수 486
인기 태그
인프런 TOP Writers
주간 인기글
- [부산] AI 세미나 : 9월 수강생 모집 Edun
- 9월 출시 예정 공연 예매 플랫폼 멀티켓과 함께할 백엔드 개발자를 구합니다 sumin
- 🧘♀️ [운동공간] 기획자/디자이너/앱 개발자를 찾습니다 띄띄
- 🚀 끝까지 만들어 본 적 있나요? | 실서비스 완성 + 수익 창출 모임 💰 catalyst collectiv
- 🚀 끝까지 만들어 본 적 있나요? | 실서비스 완성 + 수익 창출 모임 💰 catalyst collectiv