[PyTorch] ์ฝ๊ณ ๋น ๋ฅด๊ฒ ๋ฐฐ์ฐ๋ NLP
๊ธฐ๋ณธ์ ์ธ ์์ฐ์ด์ฒ๋ฆฌ ๊ธฐ๋ฒ(Natural Language Processing)๊ณผ ๋ฅ๋ฌ๋์ ํ์ฉํ ๋ค์ํ ํ ์คํธ task์ ๋ํด ๋ค๋ฃน๋๋ค.
์๊ฐ์ 359๋ช
๋์ด๋ ์ค๊ธ์ด์
์๊ฐ๊ธฐํ ๋ฌด์ ํ

- ๋ฏธํด๊ฒฐ
batch size ์ง๋ฌธ์ด ์์ต๋๋ค!
์๋ ํ์ธ์. ์ข์ ๊ฐ์ ์ด์ด์ฃผ์ ์ ๊ฐ์ฌํฉ๋๋ค.batch size๋ฅผ ํฌ๊ฒํ ๊ฒฝ์ฐ ํ์ต์๋๊ฐ ๋ ๋นจ๋ผ์ง๊ฒ ๊ฐ์๋ฐ, ๋ง๋์? batch size์ ๋ชจ๋ธ ์ฑ๋ฅ๊ณผ์ ์๊ด๊ด๊ณ๋ ์์๊น์?
๋ฅ๋ฌ๋์ธ๊ณต์ ๊ฒฝ๋งpytorchNLPsec.sensor
ใป
0
448
1
- ๋ฏธํด๊ฒฐ
torchtext.data ์๋ฌ
์๋ ํ์ธ์. ๊ฐ์ฌ๋. torchtext ๋ชจ๋ import๊ฐ ์๋ฌ๊ฐ ๋
pytorch๋ฅ๋ฌ๋NLP์ธ๊ณต์ ๊ฒฝ๋ง์ ์์๋
ใป
0
2,006
1
- ๋ฏธํด๊ฒฐ
ํ์ด์ฌ ์ฝ๋ ๋ค์ด๋ก๋ ๋ฐ์ ์ ์๋ ๊ณณ์ด ์์๊น์?
<img src="https://cdn.inflearn.c
์ธ๊ณต์ ๊ฒฝ๋งpytorch๋ฅ๋ฌ๋NLP์ฐจ์ ํธ
ใป
0
518
1
- ๋ฏธํด๊ฒฐ
train๊ณผ test ๊ด๋ จํด์ ์ง๋ฌธ๋๋ฆฝ๋๋ค!
์๋ ํ์ธ์! ์ฌ๋ฐ๊ฒ ์ ๋ณด๊ณ ์์ต๋๋ค! ์ ๊ฐ ์ฐฉ๊ฐํ๋์ง ๋ชจ๋ฅด๊ฒ ๋๋ฐ, ๊ถ๊ธํด์ ์ฌ์ญค๋ด์. Train๊ณผ Test๋๋ ์ ์ค๋ช ํด์ฃผ์ จ๋๋ฐ์, ์์ ์ ์๋ create_cbow_dataset๊ณผ cre
NLP๋ฅ๋ฌ๋์ธ๊ณต์ ๊ฒฝ๋งpytorchlimhj
ใป
0
253
1
- ๋ฏธํด๊ฒฐ
ํน์ audio๊ด๋ จํด์ stt๋ tts๋ฑ pytorch ๊ด๋ จํด์ ๊ฐ์ ํ์ค ์ ์๋์?
๋๋ฌด ์ด๋ ค์์. <div class="type-
pytorch์ธ๊ณต์ ๊ฒฝ๋ง๋ฅ๋ฌ๋NLPnewbee always
ใป
0
352
1
- ๋ฏธํด๊ฒฐ
teacher_force = random.random() < teacher_forcing_ratio
teacher_force =
์ธ๊ณต์ ๊ฒฝ๋งNLPpytorch๋ฅ๋ฌ๋์ ์ฐฌํฌ
ใป
0
316
1
- ๋ฏธํด๊ฒฐ
์ง๋ฌธ๋๋ฆฝ๋๋ค.
1. BucketIterator ํจ์๊ฐ ๋ฐฐ์น์ฌ์ด์ฆ๋ณ๋ก train, label์ ๋ถ๋ฆฌํด์ค๋ค๊ณ ์ดํดํ๋๋ฐ ๊ทธ ๊ฒฐ๊ณผ๊ฐ train_iter์ text[0],[1] ๋๊ฐ์ ์ธ๋ฑ์ค๊ฐ ๋ง๋์? <img src="https://cdn.inflearn.com/publ
์ธ๊ณต์ ๊ฒฝ๋ง๋ฅ๋ฌ๋NLPpytorch์ ์ฐฌํฌ
ใป
0
261
1
- ๋ฏธํด๊ฒฐ
context_size ์ง๋ฌธ๋๋ฆฝ๋๋ค.
1.for _ in range(4): if random.random() = len(text)
๋ฅ๋ฌ๋NLPpytorch์ธ๊ณต์ ๊ฒฝ๋ง์ ์ฐฌํฌ
ใป
0
223
1
- ๋ฏธํด๊ฒฐ
ํ์ด์ฌ for ๋ฌธ ์ง๋ฌธ๋๋ฆฝ๋๋ค.
[y for x in vocab
NLP๋ฅ๋ฌ๋pytorch์ธ๊ณต์ ๊ฒฝ๋ง์ ์ฐฌํฌ
ใป
0
249
1
- ๋ฏธํด๊ฒฐ
Encoder์ Decoder Embedding์์ ๊ฐ์ ๋ฒกํฐ๊ณต๊ฐ์ ์๋ฒ ๋ฉ๋๋๊ฑด๊ฐ์?
Encoder์ Decoder Embedding์์ Encoder-ํ๊ธ Decoder-์์ด๋ผ๋ฉด ๊ฐ๊ฐ ๋ ์ธ์ด๊ฐ ๊ฐ์ ๋ฒกํฐ๊ณต๊ฐ์ ์๋ฒ ๋ฉ๋๋๊ฑด๊ฐ์?
NLPpytorch๋ฅ๋ฌ๋์ธ๊ณต์ ๊ฒฝ๋ง์ ์ง์ฐ[์ํํธ์จ์ดํ๋ถ] ยญ
ใป
0
258
1
- ๋ฏธํด๊ฒฐ
word2vec
1. //i am a boy. But you are a girl //์ด๋ฐ ๋ฌธ์ฅ์ด ์๋ค๊ณ ํ๋ฉด ๋ฌธ์ฅ์ด 2๊ฐ์ ๋๋ค. ์ฌ๊ธฐ์์ ์๋2๋ฒก์ ํ๊ฒ ๋๋ฉด ๋ง์ฝ ์๋์ฐ๊ฐ 2๋ผ๋ฉด ๋ค๋ฅธ ๋ฌธ์ฅ์ผ๋ก ๋์ด๊ฐ๋ ์๊ด์์ด ๊ณ์ ๊ทธ text๊ฐ ๋๋ ๋๊น์ง ์งํ์ด ๋๋์? <
์ธ๊ณต์ ๊ฒฝ๋งpytorchNLP๋ฅ๋ฌ๋๋์ค๋ฆฌ
ใป
0
380
1
- ๋ฏธํด๊ฒฐ
RNN๊ณผ CNN์ ์๋๋ฒ
RNN๊ณผ CNN์ ์๋ ๋ฐฉ๋ฒ๋ ์๋์? ์๋ค๋ฉด ์ด๋ค ๋ฐฉ์์ด๋ ๋ ผ๋ฌธ ,์ฑ ์ ์ฐธ๊ณ ํ๋ฉด ์ข์์ง ํน์ ์๋ค๋ฉด ๊ทธ ์ด์ ๊ฐ ๊ถ๊ธํฉ๋๋ค
rnnNLP๋ฅ๋ฌ๋์ธ๊ณต์ ๊ฒฝ๋งpytorch๋์ค๋ฆฌ
ใป
0
282
2
- ๋ฏธํด๊ฒฐ
13:30์ชฝ ์ฌ์ด๋๊ฐ ๋๋ฌด ๊นจ์ง๋๋คใ ใ
๋ญ๋ผ๊ณ ํ๋์ง ์๋ค๋ ค์...
์ธ๊ณต์ ๊ฒฝ๋งpytorchNLP๋ฅ๋ฌ๋shyram
ใป
3
222
1
- ํด๊ฒฐ
NLP์ RNN์ ์ฌ์ฉํ๋ ์ด์
๋ณธ ๊ฐ์์ NLP ๋ฐฉ๋ฒ์ผ๋ก RNN์ด ๋์์๋๋ฐ ์ธ๊ณต์ง๋ฅ์๋ RNN ๋ฟ๋ง ์๋๋ผ GAN๋ ์๊ณ ๋ญ ์ฌ๋ฌ๊ฐ์ง๊ฐ ์์์์ ๊ทธ ์ค์์ RNN ๊ธฐ๋ฒ์ ๊ผญ ์ฌ์ฉํด์ผ ํ๋ ์ด์ ๊ฐ ์๋์? R&D ์ฌ์ ๊ณํ์ ๊ฐ์ ๊ฑฐ๋ฅผ
๋ฅ๋ฌ๋NLP์ธ๊ณต์ ๊ฒฝ๋งpytorchdorslee
ใป
0
258
1
- ๋ฏธํด๊ฒฐ
์ค์ต๋ฐ์ดํฐ ๋ฌธ์ - [์ค์ต]์์ฐ์ด ์ฒ๋ฆฌ์ ํ์ํ ๊ธฐ๋ณธ ๋ฐฐ๊ฒฝ ์ง์ ์ค์ต
์๋ ํ์ธ์. ํด๋น ์์ ์ ๋ฃ๊ณ ์์ต๋๋ค. ์ค์ต ๋ฐ์ดํฐ๋ ์ด๋์ ์ฐพ์ ์ ์์๊น์..??
NLPpytorch๋ฅ๋ฌ๋์ธ๊ณต์ ๊ฒฝ๋งํดํํด๋ฒ ๋ฆฌ
ใป
0
219
1






