inflearn logo
강의

강의

N
챌린지

챌린지

멘토링

멘토링

N
클립

클립

로드맵

로드맵

지식공유

[퇴근후딴짓] 빅데이터 분석기사 실기 (작업형1,2,3)

9회 기출유형(작업형2)

test 재학습 관련

해결된 질문

38

12김철분

작성한 질문수 7

0

image.png

안녕하세요 강사님 강의에서는 전부 1번 방식으로 바로 제출하는것으로 방법이 나와있는데

틀린부분을 생성형AI와 같이 학습해본 결과 지속적으로 2번 방식처럼 train, target으로 한번 더 학습하고 테스트 파일을 예측하는게 더 낫다고 나오더라구요

2번으로 하는 경우에는 더 유의미한 차이가 있는걸까요? 아님 그냥 원래 방식대로 1번처럼 진행하는게 나을까요?

 

python 머신러닝 빅데이터 pandas 빅데이터분석기사

답변 2

0

퇴근후딴짓

시험에서 주어진 데이터가 작다보니

2번 방식이 더 좋을 가능성에 동의합니다.


제가 그동안 1번으로 풀어도 40점에 문제가 없었고 또한 코드가 더 늘어나는 것을 방지 하려고 했어요

코딩팡은 채점이 가능하니 1과 2번 방식 결과를 한번 비교해 보시죠!! 화이팅입니다!!

0

인프런 AI 인턴

안녕하세요, 인프런 AI 인턴입니다. 12김철분님.

작업형 문제에서 학습을 진행할 때, 어떤 방식을 선택할지에 대한 질문을 주셨군요. LightGBM과 같은 모델을 활용하여 최종 예측 모델을 만드실 때, 두 가지 방법은 각각 다른 장단점을 갖고 있습니다. 이에 대해 간단하게 설명드리겠습니다.

  1. 1번 방식 (바로 제출):

    • 일반적으로 train 데이터를 훈련 데이터로 사용하고, test 데이터를 예측하는 방식입니다.
    • 장점: 간단하며, 빠르게 예측 결과를 얻을 수 있습니다.
    • 단점: 전체 데이터를 활용한 모델보다는 데이터의 변동에 덜 민감할 수 있습니다. 일부 경우, 트레인과 테스트의 분포가 유사하지 않다면 성능이 떨어질 수 있습니다.
  2. 2번 방식 (재학습 후 예측):

    • train 데이터 외에 target 데이터와 함께 한번 더 학습을 진행한 후 test 데이터를 예측합니다.
    • 장점: 전체 데이터를 학습 후 예측에 활용하기 때문에 잠재적으로 더 많은 데이터에서 학습한 모델로 더 나은 일반화 성능을 얻을 수 있습니다. 특히 데이터가 충분히 많지 않은 경우 도움이 될 수 있습니다.
    • 단점: 추가적인 학습 과정이 필요하기 때문에 시간이 더 소요되며, 과적합(overfitting)의 위험이 있을 수 있습니다.

결론:

  • 양쪽 모두 가지고 있는 상황에 따라 더 적합할 수 있으며, 둘 다 시도하여 성능을 비교하여 선택하는 것이 좋습니다. 일반적으로 하이퍼파라미터 튜닝 및 크로스 밸리데이션(CV)을 병행하면 더 안정적인 성능 평가가 가능합니다.
  • 만약 실행 시간이나 리소스가 제한적이지 않다면 2번 방식으로의 접근도 충분히 고려해볼 만합니다. 하지만 이는 실험 결과를 바탕으로 결정하는 것이 좋습니다.

이를 참고하여 본인의 데이터에 최적화된 방식을 선택해보시길 추천드립니다.

관련 유사 질문 및 답변을 참고할 수 있는 링크는 다음과 같습니다:
- 작업형 2 - 재학습 방법 선택
- 모델 재학습 전략

저는 질문자님의 이해를 돕고자 지식공유자님의 기존 답변을 참고하여 유사한 답변 링크를 추천해드리고 있습니다. 현재 베타 기능으로 답변이 만족스럽지 않을 수 있는 점 양해 부탁드립니다. 🙏 추가적으로 궁금한 점이 있으시면, 이어서 질문해 주세요. 곧 지식공유자께서 답변해 주실 것입니다.

수강 신청 연장 문의드립니다.

0

15

1

작업형 1번문제... 환경관련

0

24

2

12회 기출은 언제 업데이트 될까요??

0

34

2

8/6 작성한 연장문의 질문글에 대한 재요청

0

36

2

수강기간 연장 문의

0

33

2

수강기간 연장문의

0

34

2

수강기간 연장 요청 문의드립니다

0

33

2

수강 기간 연장 문의

0

44

2

수강연장 가능 문의 (기간 약 한달반)

0

57

2

수강기간 연장 가능할까요 선생님

0

71

2

Section15. 수업에 사용하는 데이터 주소가 다 보이지 않아서 실습을 위한 데이터를 다운 받지 못하고 있습니다.

0

49

3

수강연장요청 문의

0

84

2

아무래도 다음 시험 연장은 어렵겠죠?

0

104

2

빅분기 12회 결과 관련 문의

0

110

1

책이랑 강의랑 순서나 예제가 다른것 같네요

0

79

2

수강연장 문의

0

102

2

재검토 요청 방법 좀 알려주셔요...-.-;;

0

102

2

12회 실기 질문(작업형 2)

0

89

2

뒤로가기 버튼 같은 것이 있나요?

0

63

1

강의 연장 문의

0

97

2

출력값 질문

0

69

2

수업노트가 어디에 있나요?

0

61

1

실기시험 제출관련

0

224

3

6.20 작업형 2 과적합

0

228

3