inflearn logo
강의

Course

Instructor

Tensorflow User Manual

12강 data split take와 skip

351

fkid009

21 asked

0

안녕하십니까 강의 너무 잘보고 있습니다!

12강 Data Split 부분에서 궁금한 것이 생겨 질문하게 되었습니다.

저는 data.skip(10) 코드의 경우 data의 처음 10개 이후의 데이터를 생성해주는 것으로 이해했습니다.

그러면 train_validation에서 train을 take(n_train)을 통해 나누고 validation은 skip(n_train)으로 생성하면 되지 않나요?

validation 데이터 생성시 skip 이후에 왜 take를 이용해야하는지 궁금합니다.

딥러닝 tensorflow

Answer 1

1

communityai8509

안녕하세요, 인프런 AI 인턴이에요. Data Split 부분에 궁금한 점이 있으시군요.
데이터를 나눌 때, train 데이터와 validation 데이터를 생성하는 과정에서 data.skip(10)을 사용하셨다고 말씀하셨는데요, 일반적으로 skip()은 데이터를 일정 갯수만큼 건너뛰는 역할을 합니다.
따라서, train 데이터를 생성할 때 take(n_train)으로 나눈 뒤, validation 데이터를 생성할 때 skip(n_train).take(n_validation)을 사용하면 됩니다.
skip()을 사용한 이유는 train 데이터를 먼저 구분한 뒤, 나머지 데이터를 validation 데이터로 사용하려는 의도가 있을지도 모르겠네요.
validation 데이터 생성시 skip()을 사용하면, train 데이터 이후의 데이터를 스킵하게 되어 버리므로, take()를 사용해서 validation 데이터의 갯수를 명시적으로 지정해야 합니다.
간단히 정리하면, train 데이터 생성시 take()를 사용하여 일정 갯수만큼 데이터를 가져오고, validation 데이터 생성시 skip().take()을 사용하여 나머지 데이터를 가져옵니다.
더 궁금한 점이 있다면 언제든지 물어보세요!

0

fkid009

아하 그럼 skip으로는 데이터 생성이 안되는건가요?

안녕하세요 강사님

0

7

1

[시험 준비] AICE Associate 단기간 합격을 위한 모의고사 활용 방법 문의

1

10

1

19강 감정분석 강의처럼 api 돌렸는데

1

59

1

완독 챌린지 도서 인정 방법에 대한 문의

0

67

2

강사님 강의 자료와 코드를 부탁드리고 싶습니다.

0

57

2

16강에서 코드가 계속 안도길래. ai가 고쳐서 일단 supabase에 preditc 한 주가를

2

58

1

16강 구글 colab 에서 코드 실행이 안돼요.

0

67

1

강의자료, 코드 요청드립니다

0

52

2

강의 자료에 대한 질문입니다.

1

64

2

강의의 난이도 및 속도

1

69

2

20번 강의 LoRA 실습이 에러가 납니다.

0

67

1

강의자료 문의

1

76

2

mmcv 문의 드립니다.

0

92

2

강의 자료 및 코드 수령

0

73

2

기초실습 BERT파인튜닝 예제 오류

0

75

1

130_Transformer.ipynb 오류 대응 부탁드립니다.

0

77

1

동영상 재생오류

0

86

1

multiple inputs

0

346

1

epoch 1부터 loss가 너무 낮게 나와 학습이 안되네요

0

581

1

텍스트 데이터일 때의 dtype

0

306

1

<tensorflow사용메뉴얼> 강의파일

0

315

0

SyntaxError: keyword can't be an expression

0

537

0

강의 감사합니다. 다섯번째 강의인 Model Implementation가 재생이 안됩니다.

0

192

0

unsupported operand type(s) for *: 'float' and 'NoneType'

0

1993

1