12강 data split take와 skip
339
작성한 질문수 20
안녕하십니까 강의 너무 잘보고 있습니다!
12강 Data Split 부분에서 궁금한 것이 생겨 질문하게 되었습니다.
저는 data.skip(10) 코드의 경우 data의 처음 10개 이후의 데이터를 생성해주는 것으로 이해했습니다.
그러면 train_validation에서 train을 take(n_train)을 통해 나누고 validation은 skip(n_train)으로 생성하면 되지 않나요?
validation 데이터 생성시 skip 이후에 왜 take를 이용해야하는지 궁금합니다.

답변 1
1
안녕하세요, 인프런 AI 인턴이에요. Data Split 부분에 궁금한 점이 있으시군요.
데이터를 나눌 때, train 데이터와 validation 데이터를 생성하는 과정에서 data.skip(10)을 사용하셨다고 말씀하셨는데요, 일반적으로 skip()은 데이터를 일정 갯수만큼 건너뛰는 역할을 합니다.
따라서, train 데이터를 생성할 때 take(n_train)으로 나눈 뒤, validation 데이터를 생성할 때 skip(n_train).take(n_validation)을 사용하면 됩니다.
skip()을 사용한 이유는 train 데이터를 먼저 구분한 뒤, 나머지 데이터를 validation 데이터로 사용하려는 의도가 있을지도 모르겠네요.
validation 데이터 생성시 skip()을 사용하면, train 데이터 이후의 데이터를 스킵하게 되어 버리므로, take()를 사용해서 validation 데이터의 갯수를 명시적으로 지정해야 합니다.
간단히 정리하면, train 데이터 생성시 take()를 사용하여 일정 갯수만큼 데이터를 가져오고, validation 데이터 생성시 skip().take()을 사용하여 나머지 데이터를 가져옵니다.
더 궁금한 점이 있다면 언제든지 물어보세요!
강의 자료 및 코드 수령
0
21
2
기초실습 BERT파인튜닝 예제 오류
0
22
1
130_Transformer.ipynb 오류 대응 부탁드립니다.
0
33
1
[데이터 전처리] dropna에서 특정 두 지표만 기준으로 결측치를 제거한 이유가 궁금합니다
1
27
1
smithery filesystem mcp server
0
48
2
supabase url, key 값 확인방법
1
58
3
02_TENSOR.md자료
0
40
1
프로그램은 뭘 사용하시는 건가요??
1
51
2
소스코드 오탈자 및 누락입니다.
0
61
2
소스코드 오탈자 입니다.
0
62
2
pytorch 설치 업데이트좀요
0
61
2
강의 제작
1
65
1
안녕하세요, 강의자료 요청드립니다
0
45
1
자료실 문의합니다. AIDU 툴 다운받으려고합니다.
0
43
1
7강 강의 학습자료에 대해서 질문있습니다.
0
36
1
소스 깃허브 주소
0
39
1
동영상 재생오류
0
73
1
multiple inputs
0
332
1
epoch 1부터 loss가 너무 낮게 나와 학습이 안되네요
0
568
1
텍스트 데이터일 때의 dtype
0
287
1
<tensorflow사용메뉴얼> 강의파일
0
309
0
SyntaxError: keyword can't be an expression
0
527
0
강의 감사합니다. 다섯번째 강의인 Model Implementation가 재생이 안됩니다.
0
185
0
unsupported operand type(s) for *: 'float' and 'NoneType'
0
1984
1





