결측값 채우지관련해서
해결됨
[퇴근후딴짓] 빅데이터 분석기사 실기 (작업형1,2,3)
안녕하십니까? 결측값 채우기 중 최빈값 관련해서,, m = X_train['workclass'].mode()[0] 여기서 mode()과 mode()[0]의 차이는 무엇인지요? 즉 [0]의 쓰임이 무엇인지? 다른 중앙값, 평균 등은 이런게 없는데 왜 최빈값만 이런게 뒤에 붙는지요?
- python
- 머신러닝
- 빅데이터
- pandas
- 빅데이터분석기사
176만명의 커뮤니티!! 함께 토론해봐요.
해결됨
[퇴근후딴짓] 빅데이터 분석기사 실기 (작업형1,2,3)
안녕하십니까? 결측값 채우기 중 최빈값 관련해서,, m = X_train['workclass'].mode()[0] 여기서 mode()과 mode()[0]의 차이는 무엇인지요? 즉 [0]의 쓰임이 무엇인지? 다른 중앙값, 평균 등은 이런게 없는데 왜 최빈값만 이런게 뒤에 붙는지요?
해결됨
[퇴근후딴짓] 빅데이터 분석기사 실기 (작업형1,2,3)
인프런 문제를 열심히 풀고 있습니다. 7회 기출문제 풀이는 언제 볼수있을까요?
미해결
[핵집] 2025 빅데이터 분석기사(필기)_과목 1~2
안녕하세요 금일부터 강의를 수강하게 되어 아래와 같이 요청 및 문의 드립니다. 통합 강의자료 요청 (이메일: moontomis@gmail.com ) 안내되어 있는 2024 빅데이터분석 기사 필기 한권완성 교재를 사면 어떤 도움이 되나요? 이상입니다. 감사합니다.
해결됨
[퇴근후딴짓] 빅데이터 분석기사 실기 (작업형1,2,3)
라이브러리 및 데이터 불러오기 그리고 EDA 수업내용중에 15분 36초 경에 보면 남성과 여성의 수를 확인하는데, 그때 남성의 수를 cond_male이라는 변수에 담았기 때문에 len(cond_male) 이렇게만 하면 안되나요? 왜 train[cond_male]이렇게 해주어야 하는지가 궁금합니다. 보통 데이터 프레임 안에서 컬럼을 선택할때 데이터프레임명['컬럼명'] 이런식으로 할때나 사용하는데, 변수로 지정후에도 왜 train으로 감싸나요??
해결됨
[퇴근후딴짓] 빅데이터 분석기사 실기 (작업형1,2,3)
학습 관련 질문을 남겨주세요. 상세히 작성하면 더 좋아요! 질문과 관련된 영상 위치를 알려주면 더 빠르게 답변할 수 있어요 먼저 유사한 질문이 있었는지 검색해보세요 안녕하세요? 시계열 자료 강의에서 년월일 등을 추출하는 강의가 있는데요.. 여기서 dt가 갑자기 나와서요.. 이것도 그냥 함수인가요.. 아님 뭐 datetime의 약자 뭐 그런건지요? dt관련해서 이거 뭐하는 함수인지 궁긍합니다.
미해결
연구논문 작성을 위한 빅데이터·텍스트마이닝 분석 실전 - ChatGPT를 활용한 LDA·BERTopic·감성분석·CONCOR
안녕하세요. 파이썬 초보인데 강의보면서 어려워도 따라해보고 있습니다. 2강 까지 title_content 열에 제목+본문 내용의 형태소 추출 하는 것 까지 하고 나서 3강에서 추출된 내용을 df=head()로 확인했을때 딱 title_content 부분만 나오던데 이거는 하는 방법이 따로 있나요? 저는 전체 열이 다 나오는데 엑셀에서 파일을 지우는 건지 아니면 따로 title_content 열만 나오게 하는 코딩을 해야 하는지 궁금합니다!
미해결
[핵집] 2025 빅데이터 분석기사(필기)_과목 1~2
필기 1~2 및 3~4 수업자료 통합본 발송 부탁 드립니다.kiwol@naver.com
해결됨
[퇴근후딴짓] 빅데이터 분석기사 실기 (작업형1,2,3)
3. 연도별로 총 범죄 건수(범죄유형의 총합)의 월평균 값을 구한 후 그 값이 가장 큰 연도를 찾아, 해당 연도의 총 범죄 건수의 월평균 값을 출력하시오. (반올림하여 정수로 출력) 문제에서 df['총범죄건수'] = df.iloc[:, 1:7].sum(axis=1) iloc 를 활용해서 열의 합을 구할 때는 sum 괄호 안에 axis=1 이라고 작성을 하는데 result = df.groupby('연도')['총범죄건수'].sum(axis=0)/12 연도별로 그룹으로 묶어 행의 합을 구할 때는 sum 괄호 안에 axis=0 이라고 넣으면 오류가 나더라구요! iloc 를 활용해서 합을 구할 때는 sum 괄호 안에 axis 를 작성해도 되지만, groupby 를 활용해서 합을 구할 때는 sum 괄호 안에 axis 를 작성하면 안된다고 외워야 하는 건가요??
미해결
15일간의 빅데이터 파일럿 프로젝트
혹시 docker를 활용해서 실습환경을 구축하여도 문제가 있을까요?
해결됨
[퇴근후딴짓] 빅데이터 분석기사 실기 (작업형1,2,3)
5회 기출 작업형 2에서 3회 기출 작업형 2에서 강사님께서 풀이하신 방식으로 train, test 데이터를 수치형, 범주형으로 나누고 수치형은 robustscaler, 범주형은 dummies를 활용한 후 concat으로 합치려고 했는데요! 아래처럼 코딩을 했는데 사진처럼 오류가 발생합니다ㅠㅠ 혹시 기출 3회 작업형 2는 회귀모형이 아니기 때문에, 기출 3회 작업형 2 풀이 방식을 기출 5회 작업형 2에 활용하지 못하는건가요? import pandas as pd train = pd.read_csv("train.csv") test = pd.read _csv("test.csv") n_train = train.select_dtypes(exclude ='object').copy c_train = train.select_dtypes(include ='object').copy n_test = test.select_dtypes(exclude = 'object').copy c_test = test.select_dtypes(include = 'object').copy from sklearn.preprocessing import RobustScaler cols = ['year', 'mileage', 'tax', 'mpg', 'engineSize'] scaler = RobustScaler() n_train[cols] = scaler.fit_transform(n_train[cols]) n_test[cols] = scaler.transform(n_test[cols]) c_train = pd.get_dummies(c_train) c_test = pd.get_dummies(c_test) train = pd.concat([n_train, c_train], axis=1) test = pd.concat([n_test, c_test], axis=1) print(train) print(test)
미해결
[핵집] 2025 빅데이터 분석기사(필기)_과목 1~2
안녕하세요, 강의 잘 수강하고 있습니다. 필기 1~2 및 3~4 수업자료 통합본 발송 부탁 드립니다. jinseong.choi@hyosung.com 감사합니다.
해결됨
[퇴근후딴짓] 빅데이터 분석기사 실기 (작업형1,2,3)
총 3가지 질문이 있습니다! 교차검증에서 cross_val_score 을 활용하면 from sklearn.metrics import f1_score 을 활용하지 않아도 되는 건가요? (scoring='f1_macro' 라고 되어 있어서 train_test_split 과 f1_score 평가를 동시에 진행하는 방식 같은데..맞나요..?) 문제에서 평가 : Macro f1_score 라고 되어 있는데, 강사님처럼 교차검증에서 cross_val_score을 활용해도 되고, train_test_split +from sklearn.metrics import f1_score 활용해도 되는건가요? 이전 강의에서 f1_score 평가 설명시 from sklearn.metrics import f1_score f1 = f1_score(y_true_str, y_pred, average = 'macro') 라고 알려 주셨는데, metrics 를 불러와서 f1_score을 평가하는 것은 train_test_split 을 통해 X_tr, X_val, y_tr, y_val 로 분리한 경우에만 사용할 수 있는 거죠??(2번 질문과 이어짐) ps. 친절한 강의, 답변 감사합니다!
해결됨
[퇴근후딴짓] 빅데이터 분석기사 실기 (작업형1,2,3)
cross_val_score 풀이에서 from sklearn.model_selection import cross_val_score scores = cross_val_score(rf, train, target, scoring='f1_macro', cv=5) 라고 써주셨는데요. from sklearn.model_selection import cross_val_score print(help(cross_val_score)) 했더니 사진처럼 cross_val_score 활용방법이 안 뜨고 오류만 뜹니다ㅠㅠ scores = cross_val_score(rf, train, target, scoring='f1_macro', cv=5) 을 전부 외우고 있어야 하는 건가요??
해결됨
15일간의 빅데이터 파일럿 프로젝트
안녕하세요 고사양 pc에서는 server01, 02, 03 이 필요한 것으로 알고 있는데 혹시 server03은 어디서 받을 수 있을까요? 섹션 1~2에 업로드된 첨부파일 확인했는데 server03 이미지를 찾지 못하여 문의 드립니다!
해결됨
빅데이터 파이프라인 마스터; 성공을 위한 도구와 기술
4분 50초 경 " rack 전체가 뻗는것 보다 노드 하나 뻗는 확률이 더 올라간다? " 라고 해주셨는데 잘 이해가 가지 않아서 질문드립니다. 제가 이해한 바로는 결국 신뢰성과 가용성 둘중 하나는 포기를 해야하고 그 둘 사이의 타협적 결정을 잘 해야 한다. 가용성을 위해 단일 노드에 모든 복제본을 둘 경우 속도는 빠르지만 신뢰성 보장이 어렵고 장애 대응이 불가능 하다. 신뢰성을 위해 복제본을 모든 데이터 센터 혹은 많은 가상 노드에 복제해둘 경우 신뢰성은 극한으로 올라가지만 데이터를 가져오는데 시간이 너무 오래결려 가용성이 떨어진다. 그래서 그 둘 사이의 타협점을 구한 것이 Replica Placement다. 위처럼 이해하면 될까요??
해결됨
15일간의 빅데이터 파일럿 프로젝트
VirtualBox-5.0.40 윈도우에서는 실행이 안된다고 에러메시지가 뜹니다. 다른분이 질문하신 게시글에서 버츄얼박스는 '흰색남자'님의 OS(Windows 10)에 최적화된 버젼을 설치해 사용 하시면 됩니다. 라고 하셨는데 그 글도 삭제된 것 같아서요 VirtualBox-5.0.40-115130-Win 다른 방안을 알려주시면 감사하겠습니다.
해결됨
[핵집] 2025 빅데이터 분석기사(필기)_과목 3~4
안녕하세요. 1-2, 3-4 강의 신청했습니다. 1-2, 3-4 통합 교안 전달 부탁드립니다. 감사합니다.
미해결
스파크 머신러닝 완벽 가이드 - Part 1
안녕하세요 강사님, 좋은 강의 감사드립니다! 요즘 MLOps 관련 model deploy 및 serving 하는 것이 더 중요해지고 있는데 관련 강의를 준비하고 계신지 궁금합니다. 처음에는 이 강의에 추가로 강의를 올리시는 것도 계획 중이신지 여쭙고 싶었으나, 해당 강의와 model을 deploy하고 serving 하는 것은 강의의 범위에서 벗어나는 것도 같네요 ㅎㅎ Databricks에서도 MLFlow 이용해서 experiment를 하는 것이 꽤 잘 되어 있는 것 같던데 혹시라도 관련 강의 준비하고 계시다면 너무 기대됩니다!
해결됨
[퇴근후딴짓] 빅데이터 분석기사 실기 (작업형1,2,3)
섹션 6. 시험환경 체험링크를 클릭하면 연결이 비공개로 설정되어 있지 않습니다. 공격자가 dataq.goorm.io 에서 정보(예: 비밀번호, 메시지, 신용카드 등)를 도용하려고 시도 중일 수 있습니다. 자세히 알아보기 NET::ERR_CERT_DATE_INVALID 라고 뜨는데 어떻게 해야 하는건가요?ㅠㅠ
미해결
15일간의 빅데이터 파일럿 프로젝트
안녕하세요 VM 통합 환경 구성 중입니다. 현재 인텔 MAC 사용중이고 , HOST,NAC 설정 까지 다 해주었는데 연결이 안돼서 진행을 못하고 있습니다 . ㅠ 추가로 putty 접속도 안되네요.. 원인이 뭘까요??.. 확인 한번 부탁드립니다.. ++ 수정 네트워크를 다음과 같이 변경후 서버 재시작하였더니 이제 refused는 뜨지 않지만 time out 에러가 뜨네요 ㅠ putty도 마찬가지입니다. ++ 수정 server02 는 현재 ssh 접속이 가능합니다..! 정확하게 host정보를 입력한거 같은데 server01은 접속이 안되네요 ! ++ server 01 에서 바로 서비스체크 해보았습니다. 클라우데라 매니저 잘 작동 중이고 ,, 리스타도 해보았는데 여전히 http://server01.hadoop.com/ 치고 들어가면 refused 뜨네요 ㅜㅜ