train과 test 관련해서 질문드립니다!
308
1 asked
안녕하세요!
재밌게 잘 보고 있습니다!
제가 착각했는지 모르겠는데, 궁금해서 여쭤봐요.
Train과 Test나눠서 설명해주셨는데요,
앞서 제작된 create_cbow_dataset과 create_skipgram_dataset 함수를 통해서 cbow와 skipgram을 위한 train데이터셋을 구성한 것으로 보입니다!
Test를 하실 때에도 train데이터셋을 넣으셨는데요, 혹시 이렇게 하는 것이 맞는지? 제가 놓치고 있는 것은 있는지 궁금합니다!
Answer 1
0
안녕하세요, Justin입니다.
본 예제는 일정 문장들로 구성된 데이터를 활용하여 word2vec 작동 원리를 살펴보기 위한 예제입니다.
Test를 할 때에는 당연히 Test 데이터셋을 활용하여 진행하는 것이 맞습니다.
단, 학습이 진행된 이후 실질적으로 어떻게 예측하는지 파악하기 위해 코드를 저렇게 구성하였습니다.
감사합니다.
완독 챌린지 도서 인정 방법에 대한 문의
0
64
2
response api를 사용하는것과 codex, cluade code 에이전트를 사용하는것과의 차이
0
38
1
음성
0
50
2
20번 강의 LoRA 실습이 에러가 납니다.
0
65
1
수업자료
0
61
2
기초실습 BERT파인튜닝 예제 오류
0
72
1
130_Transformer.ipynb 오류 대응 부탁드립니다.
0
77
1
02_TENSOR.md자료
0
68
1
소스코드 오탈자 및 누락입니다.
0
98
2
소스코드 오탈자 입니다.
0
98
2
batch size 질문이 있습니다!
0
522
1
torchtext.data 에러
0
2082
1
파이썬 코드 다운로드 받을 수 있는 곳이 있을까요?
0
631
1
혹시 audio관련해서 stt나 tts등 pytorch 관련해서 강의 하실 수 있나요?
0
404
1
teacher_force = random.random() < teacher_forcing_ratio
0
363
1
질문드립니다.
0
309
1
context_size 질문드립니다.
0
289
1
파이썬 for 문 질문드립니다.
0
304
1
Encoder와 Decoder Embedding에서 같은 벡터공간에 임베딩되는건가요?
0
322
1
word2vec
0
427
1
RNN과 CNN을 섞는법
0
350
2
13:30쪽 사운드가 너무 깨집니다ㅠㅠ
3
268
1
NLP에 RNN을 사용하는 이유
0
313
1
실습데이터 문의 - [실습]자연어 처리에 필요한 기본 배경 지식 실습
0
277
1