์บ๊ธ Advanced ๋จธ์ ๋ฌ๋ ์ค์ ๋ฐ์น๊ธฐ
๋ณธ ๊ฐ์๋ Kaggle์ Home Credit Default Risk ๊ฒฝ์ฐ๋ํ ๋จธ์ ๋ฌ๋ ๋ชจ๋ธ์ ๊ตฌํ์ ํตํด, ์ฌ๋ฌ๋ถ์ ์ค์ ์ ์ธ ๋จธ์ ๋ฌ๋ ๊ตฌ์ถ ์ ๋ฌธ๊ฐ๋ก ํ๋จ๊ณ ์ค๋ ฅ์ ์ ๊ทธ๋ ์ด๋ ํ ์ ์๋๋ก ๋ง๋ค์ด์ง ๊ฐ์ ์ ๋๋ค.
์๊ฐ์ 1,557๋ช
๋์ด๋ ์ค๊ธ์ด์
์๊ฐ๊ธฐํ ๋ฌด์ ํ
- ๋ฏธํด๊ฒฐ
sql์ฌ์ฉ
์๋ ํ์ญ๋๊น ๊ฐ์ฌ๋ ์ด ๊ฐ์์์๋ python์ผ๋ก ๋ชจ๋ ํ ์ด๋ธ๋ค์ ์ฒ๋ฆฌํ๋๋ฐ ์ค๋ฌด์ ์ผ๋ก๋ sql์์ ๋ฐ์ดํฐ ๊ฐ๊ณต ํ python์ผ๋ก ๋ชจ๋ธ๋ง ํ๋ ๋ฐฉ๋ฒ์ ์ด๋จ๊น๋ผ๊ณ ์๊ฐ์ ํ๋๋ฐ ๋ง๋์ง ๊ถ๊ธํฉ๋๋ค.<p style=
๋จธ์ ๋ฌ๋kaggleํํํํํ
ใป
6๋ฌ ์
0
45
2
- ๋ฏธํด๊ฒฐ
์ข์ ๊ฐ์ ๊ฐ์ฌ๋๋ฆฝ๋๋ค.
ํผ์ฒ์์ง๋์ด๋ง ๋จ๊ณ์์ ๊ธฐ์กด๋ณ์๋ฅผ ๋ฐํ์ผ๋ก ์๋ก์ด ๋ณ์๋ฅผ ๋ง๋์ จ๋๋ฐ ํน์ ํ ํ๋ก์ ํธ๋ ๋ฌผ๋ก ํ ํ๋ก์ ํธ์์๋ ๋ณ์๋ฅผ ๋ง๋ค์ด์ผํ ํ ๋ฐ ์ด๋ฐ ๋ณ์ ์์ฑ์ ๊ธฐ์ค์ด ์์๊น์? ์๋๋ผ๋ฉด ๊ฒฝํ๋ ์ข์ต๋๋ค. ๊ฐ์ ์ก๊ณ ์ถ์ต๋๋ค..!<
๋จธ์ ๋ฌ๋kaggle๋ฐ์ํ
ใป
9๋ฌ ์
0
73
2
- ๋ฏธํด๊ฒฐ
8๋ถ 40์ด๊ฒฝ LGBClassifier์์ ์ค์ ํด์ฃผ์ ํ๋ผ๋ฏธํฐ๋ค ๊ด๋ จ ์ง๋ฌธ
from lightgbm import LGBMClassifier clf = LGBMClassifier( n_jobs = -1, n_estimators = 1000, learning_rate = 0.02, num_
๋จธ์ ๋ฌ๋kaggle์ ํ์
ใป
0
246
2
- ๋ฏธํด๊ฒฐ
์ฌ์ฉ ๊ฐ๋ฅํ RAM์ ๋ชจ๋ ์ฌ์ฉํ ํ ์ธ์ ์ด ๋ค์ด๋์์ต๋๋ค
sns.distplot(app_train[cond1 & cond_amt]['AMT_INCOME_TOTAL'], label='0', color='blue')์ด ์ฝ๋๋ฅผ ์คํํ๋ฉด colab ํ๊ฒฝ์์ '์ฌ์ฉ ๊ฐ๋ฅํ RAM์ ๋ชจ๋ ์ฌ์ฉํ ํ ์ธ์ ์ด ๋ค์ด
๋จธ์ ๋ฌ๋kagglehenry07
ใป
0
601
1
- ๋ฏธํด๊ฒฐ
์๋ ํ์ธ์ ์ ์๋
์๋ ํ์ธ์ ์ ์๋.. ๊ตฌ๊ธํด๋ผ์ฐ๋๋ก ์๋ ค์ฃผ์ ๊ฒ์ฒ๋ผ ์ฌ์ฉํ๋๋ฐ์ (3์๋ฌ์ฏค)๋ฌด๋ฃํฌ๋๋ง ๋ฐ๊ณ , ํ๋ฃจ์ดํ ์ฌ์ฉํ๋ค๊ฐ ๊ทธ ๋ค์๋ ๊ทธ๋ฅ ๋ก์ปฌ๋ก ์ฌ์ฉํ์ต๋๋ค.๊ทธ๋ฐ๋ฐ ์ค๋๋ณด๋๊น 6๋ง์์ด ๋ฏธ๋ฉ๋ฌ๋ค๊ณ ,. ๊ทธ๋์ ๊ฒฐ์ ๋ฅผ ํ๋ผ๊ณ ํ๋๋ฐ. ์ด๊ฑฐ ๊ฒฐ์ ํด์ผํ๋๊ฑด
๋จธ์ ๋ฌ๋kaggle์์ฑ์ ์์
ใป
0
228
1
- ๋ฏธํด๊ฒฐ
๊ถ์ฒ ๋ฏผ๊ต์๋ ์ง์ฌ์ผ๋ก ๊ฐ์ฌ๋๋ฆฝ๋๋ค.
๊ถ์ฒ ๋ฏผ ๊ต์๋ ๊ฐ์ฌ๋๋ฆฝ๋๋ค. ์ธํ๋ฐ,์ ๋ฐ๋ฏธ,ํจ์บ ๋ฑ ์๋ง์ ๊ฐ์๋ฅผ ๋ค์๋๋ฐ ์ด๋ ๊ฒ ์์ค๋๊ณ ์ดํดํ๊ธฐ ์ฌ์๋ ์ง๋์ ๊ฐ์๋ ์ฒ์์ด์๋๊ฒ ๊ฐ์ต๋๋ค. ๋ค์ํ๋ฒ ๊ฐ์ฌ ๋๋ฆฝ๋๋ค. ์์ผ๋ก๋ ๊ต์๋์ ๋ฐ์์ทจ๋ฅผ ๋ฐ๋ผ๊ฐ๋ฉฐ
๋จธ์ ๋ฌ๋kaggle๋ฎค์ง์ปฌ์๋* ํฅ๋ฏธ๋ก์ด ๋ฎค์ง์ปฌ์ด์ผ๊ธฐ
ใป
0
319
1
- ํด๊ฒฐ
์๋ ํ์ธ์ ์ ์๋
์๋ ํ์ธ์ ์ ์๋ ์ฐ์ ์ข์๊ฐ์ ๊ฐ์ฌ๋๋ฆฝ๋๋ค.๋๊ฐ์ง ์ง๋ฌธ์ด ์๋๋ฐ์.... ์ฐ
๋จธ์ ๋ฌ๋kaggle์์ฑ์ ์์
ใป
0
351
1
- ๋ฏธํด๊ฒฐ
# credit_card_balance ๋ฐ์ดํฐ์ ํผ์ณ์์ง๋์ด๋ง
์ ์๋ ์๋ ํ์ธ์ ํผ์ณ์์ง๋์ด๋ง์ ํ๋ฉด์ ์๋ ๊ถ๊ธ์ฆ์ด ์๊ฒผ์ต๋๋ค. ๋ณดํต dict aggregation์ผ๋ก ํต๊ณ๋ณ์๋ฅผ ์์ฑํ ๋ (์๋ ค์ฃผ์ ๋ฃจํด์ด ์ ๋ง ํจ์จ์ ์ธ ์ฝ๋๋ฅผ ์์ฑํ๋๋ฐ ๋์์ด ๋ฉ๋๋ค.)min,mean,max๋ฅผ ์ฌ์ฉํ์
๋จธ์ ๋ฌ๋kaggle๋ฎค์ง์ปฌ์๋* ํฅ๋ฏธ๋ก์ด ๋ฎค์ง์ปฌ์ด์ผ๊ธฐ
ใป
0
267
1
- ๋ฏธํด๊ฒฐ
์ด๊ฑฐ๋ ๋ฐ์ดํฐ์ ์ Submissionํ๋ ค๋ฉด?
์๋ ํ์ธ์, ์บ๊ธ ๊ณต๋ถํ๋ค๊ฐ ๊ถ๊ธ์ฆ์ด ์๊ฒผ์ต๋๋ค. ์ ๊ฐ ์ฐธ์ฌํ๊ณ ์๋ Closed ๋ํ ๋ฐ์ดํฐ๊ฐ ์๋ ์ปค์ง๋ ๋ชจ๋ธ์ ํฌ๊ธฐ๋ ๊ทธ๋งํผ ์ปค์ง๊ฒ ๋๋๋ฐ, ์ด๋ Kaggle Notebook์ ์ฑ๋ฅ์ด ๊ทธ๋ฅ ์ข์ง ๋ชปํด์ ๋ชจ๋ธ ํ์ต ์๊ฐ์ด ๋๋ฌด
๋จธ์ ๋ฌ๋kaggle์๋ผ
ใป
0
190
1
- ๋ฏธํด๊ฒฐ
Library ๊ด๋ จ ์ง๋ฌธ
#Libraryํ๊ฒฝ ์ ์ pip install "numpy<1.24" pip install lightgbm==3.3.2 pip install --upgrade bayesian-optim
๋จธ์ ๋ฌ๋kaggle๋ฎค์ง์ปฌ์๋* ํฅ๋ฏธ๋ก์ด ๋ฎค์ง์ปฌ์ด์ผ๊ธฐ
ใป
0
350
3
- ๋ฏธํด๊ฒฐ
์ต์ ํ ํจ์ ์๋ฌ
์๋ ํ์ธ์ ์ ์๋ ์ฝ๋ฉ์์ ๋ฒ ์ด์ง์ ์ค์น ์๋์๊ณ ๋ฒ์ ํ์ธ๋ ์ ๋์์ต๋๋ค.๊ทธ๋ฌ๋ ์ต์ ํ ํจ์ ๊ตฌ๋์ค์ ๊ณ์ numpy ์๋ฌ๋ผ๊ณ ์ ๋ ฅ๋ณ์๊ฐ float๊ฐ ๋ฌธ์ ๊ฐ ์๋ค๊ณ ๋์ค๊ณ ์์ต๋๋ค. ์ฑgpt์ ๋ฌธ์
๋จธ์ ๋ฌ๋kaggle๋ฎค์ง์ปฌ์๋* ํฅ๋ฏธ๋ก์ด ๋ฎค์ง์ปฌ์ด์ผ๊ธฐ
ใป
0
589
4
- ๋ฏธํด๊ฒฐ
LightGBM Iteration๊ด๋ จ
์๋ ํ์ธ์ LightGBM Iteration๊ด๋ จ ๋ฌธ์๋๋ฆฝ๋๋ค. ์ค๋ช ํด ์ฃผ์ ์ฝ๋๋ก ์์ฑํ์์ผ๋ ์ดํฐ๋ ์ด์ ๋ง๋ค Score๊ฐ ํ์๋์ง ์์ต๋๋ค verbose๋ฅผ 100์ผ๋ก ์ค์ ํ๋๋ฐ ๋ค์๊ณผ ๊ฐ์ด๋ง ์กฐํ๋ฉ๋๋ค.์ด์ ๊ฐ ๋ฌด์
๋จธ์ ๋ฌ๋kaggle๋ฎค์ง์ปฌ์๋* ํฅ๋ฏธ๋ก์ด ๋ฎค์ง์ปฌ์ด์ผ๊ธฐ
ใป
0
422
2
- ๋ฏธํด๊ฒฐ
์๋ ํ์ธ์ ๊ต์๋ vm ๊ด๋ จํด์ ์ง๋ฌธ์ด ์์ต๋๋ค.
vm ์ฌ์ฉ์ํ ๋๋ ์ข ๋ฃํ๋๊ฒ ์ข๋ค๊ณ ํ์ ์ ์ฒ์ ์ธํ ํ, ์ข ๋ฃํ์๋๋ฐ์. ์ง๊ธ ๋ค์ gcp๋ค์ด๊ฐ์ ํด๋น vm ์์ ๋ฒํผ ๋๋ฌ์ ์คํ์์ผฐ๋๋ฐ putty, winscp์์ ํด๋น ์์ดํผ ์ก์ง๋ฅผ ๋ชปํ๊ณ ์์ต๋๋ค. vm ์์๋ฒํผ ๋ง๊ณ ๋ ์ถ๊ฐ๋ก ์์ ํด์ผ๋ ๊ฒ ์์๊น์??</
๋จธ์ ๋ฌ๋kagglezas6581
ใป
0
203
1
- ๋ฏธํด๊ฒฐ
์ฝ๋๋ฅผ ์คํํ๋๋ฐ ์ค๋ฅ๊ฐ ๋ฐ์ํฉ๋๋ค
LightGBM ์ฝ๋๋ฅผ ์คํํ๋๋ฐ fit() got an unexpected keyword argument 'verbose' ๋ผ๋ ์ค๋ฅ๊ฐ ๋ฐ์ํฉ๋๋ค. ์ด์ ๊ฐ ๋ฌด์์ธ์ง ์ ์ ์์๊น์?
๋จธ์ ๋ฌ๋kaggledongyeobgim2
ใป
0
1,981
2
- ๋ฏธํด๊ฒฐ
bayes_opt ํ๊ท ๋ชจ๋ธ์ ์ ์ฉํ๋ ค๋ฉด..
์๋ ํ์ธ์, ํ๊ท ๋ฌธ์ ์ bayes_opt๋ฅผ ์ฌ์ฉํ์ฌ ํ๋ผ๋ฏธํฐ ํ๋์ ํ๋ ค๊ณ ํฉ๋๋ค.์ด์ ์ ํ์ด์ฌ ๋จธ์ ๋ฌ๋ ์๋ฒฝ๊ฐ์ด๋์์ hyperopt๋ ๋ชฉ์ ํจ์์ ์ต์๊ฐ์ ์ํ ์ ๋ ฅ๊ฐ์ ์ฐพ๊ธฐ ๋๋ฌธ์ ์ด๋ฅผ ํ๊ท์ ์ฌ์ฉํ ๋๋ ๊ทธ๋๋ก ์ฌ์ฉํ๊ณ , <p
๋จธ์ ๋ฌ๋kagglechoemyeonggeun
ใป
0
267
1
- ๋ฏธํด๊ฒฐ
ํ๊ฒ๊ฐ์ ๋ก๊ทธ๋ณํ์ ๋ํด์
์ ์๋ ์๋ ํ์ธ์ ๋จธ์ ๋ฌ๋๊ฐ์(2๊ฐ)์ ์ปดํฐ๋น์ ผ๊ฐ์๋ฅผ ๋ฃ๊ณ ์๋ ํ์ฌ์์ ๋๋ค ใ ์ด๋ฒ์ ๋จธ์ ๋ฌ๋๊ฐ์์ค ํ๊ฒ๊ฐ(5๊ฐ, ์ ์ํํ)์ ๋ก๊ทธ๋ณํ์ ๋ํด์ ์กฐ์ธ์ ๋ฐ๊ณ ์ถ์ด์ ์ง๋ฌธ์ ๋๋ฆฝ๋๋ค ใ ๋ฐ์์๊ฒ์ง๋ง ์กฐ์ธ ์ข ๋ถํ๋๋ฆฌ๊ฒ์ต๋๋ค
๋จธ์ ๋ฌ๋kaggleanycad11
ใป
0
781
1
- ๋ฏธํด๊ฒฐ
์๋์ฝ๋ค ํ๊ฒฝ์ค์
์๋ ํ์ธ์ ์ ์๋์ค์ตํ๊ฒฝ ๊ตฌ์ถ์ด ๋๋ฌด ์ด๋ ค์ด๋ฐ pc ๋ฉ๋ชจ๋ฆฌ๊ฐ 16gb ์ด๋ฉด๊ทธ๋ฅ ์ฃผํผํฐ๋ ธํธ๋ถ์ผ๋ก ์คํํด๋ ๋ฌด๊ดํ ๊น์?
๋จธ์ ๋ฌ๋kaggle๋จ๊ตฌ๊ธฐ
ใป
0
459
1
- ๋ฏธํด๊ฒฐ
๊นํ๋ธ ์ฃผ์ ๋ฌธ์๋๋ฆฝ๋๋ค.
์๋ ํ์ธ์! ์ ์๋ ๊ฐ์ ์ด์ฌํ ๋ฃ๊ณ ์๋ ํ์์ ๋๋ค "Anaconda์ Jupyter notebook ์ ์ ํ๊ธฐ"๋ฅผ ๋ณด๋ฉด ์ ์๋ ๊นํ๋ธ์ ๋ค์ด๊ฐ์ DLCV ํ์ผ์ ๋ค์ด๋ฐ์ผ๋ผ๊ณ ํ์ จ๋๋ฐ, ๊นํ๋ธ ์ฃผ์๊ฐ ์ด๋ป๊ฒ ๋์๋์? <p
๋จธ์ ๋ฌ๋kagglesbp3636
ใป
0
359
1
- ๋ฏธํด๊ฒฐ
์์คํจ์์ ๋ํ ์ง๋ฌธ
์๋ ํ์ธ์ ์ ์๋,๊ณต๋ถ๋ฅผ ํ๋ค๊ฐ ์์คํจ์ ๋ถ๋ถ์ ๋ํด์ ์ง๋ฌธ์ด ์์ด์ ์ด๋ ๊ฒ ๋ฌธ์๋๋ฆฝ๋๋ค ๋ค๋ฆ์ด ์๋๊ณ ์๊ณ์ด ์๋ฃ๋ฅผ ๋ถ์ํ๊ณ ์๋๋ฐ, ์ ์์ฑ์ ํ๋ณดํ๊ธฐ ์ํด์ ์ฐจ๋ถ์ ํ๊ณ LIGHT GBM๊ณผ RANDOM FOREST
๋จธ์ ๋ฌ๋kaggle์ฝ๊ฐํต๊ฐ
ใป
0
342
1
- ๋ฏธํด๊ฒฐ
card_bal ๋ฐ์ดํฐ์ ์๊ฐํ ๊ด๋ จ ์ง๋ฌธ์ ๋๋ค
distplot
๋จธ์ ๋ฌ๋kagglechoemyeonggeun
ใป
0
230
1






