웹카메라 손글씨 영상 인식 예제 실행 시 오류 질문

수강신청하여 차근차근 코드를 보며 따라가고 있는 수강생입니다.

현재 "웹카메라 손글씨 영상 인식 딥러닝 프로그램" 부분의 예제를 수정 없이 따라 가고 있습니다.

아래의 어느분께서 질문 하셨듯이, 종이에 숫자를 적어서 웹카메라 화면에 찍히면, 초록색 박스는 잘 그려지지만, 저 역시 계속 "Number is : 0" 이라는 결과 값만 나타내고 있습니다.

종이에 적힌 숫자가 초록색 박스까지 잘 그려지는 것을 보면, 숫자는 잘 가져 오는 것으로 보여서, 확인 하기 위해, 디버깅 목적으로  "cv2.imshow('img_roi', img_roi)" 코드를 아래와 같이, threshold 를 숫자 영상에 적용시킨 결과 값을 다른 창으로 찍어 보았습니다. 

      img_roi = thresh[y_position:y+h+margin, x_position:x+w+margin]
      num = cv2.resize(img_roi, (SZ,SZ))
      num = num.astype('float32') / 255.
      cv2.imshow('img_roi', img_roi)

결과는 아래와 같이 나옵니다. 이 결과로 미루어 보면, 5라는 숫자가 에지로 잘 깨끗하게 인식되는 것으로 보이므로, 아마도 코드에서 여기까지 실행 되는 것 까지는 문제 없는 것으로 보입니다.

다음 단계로, 이젠 러닝머신 모델을 적용 시키는 곳에 문제가 있는 지 보기 위해, 

      result = model.predict(np.array([num]))

      print(result)

위에 보시는 바와 같이, print(result) 를 이용하여 model 의 예측 값을 찍어 봤는데, 아래 결과와 같이 항상 0 만 가장 높은 값으로 예측을 하고 있었습니다. 

[[21.99546   -7.138553  -5.428708  -7.0515757 -5.142455  -7.3482  -9.117873  -7.2267165 -6.30136   -4.09639  ]]

이러한 현상은 다른 숫자를 가지고 테스트 해도, 항상 0 값만 예측을 하고 있습니다. 

마지막으로 제가 해본 것은 혹시 model 을 불러 들이는 부분이 잘못되었는 가를 체크 하기 위해서, 아래와 같이 

model = tf.keras.models.load_model('digits_model.h5') 함수 이후에, model.summary() 를 추가하여 모델의 상태 체크해 보았습니다. 

model = tf.keras.models.load_model('digits_model.h5')

model.summary()

그 결과는 아래와 같습니다.

여기서 질문이 있습니다. 

노마드님께서 올리신 예제 "RBP_DL12_openCV_get_image.jpynb" 를 jupyter notebook 에서 실행 시키다 보면, model 의 summary 를 print 하는 부분이 동일 하게 존재 하여, step 별로 따라 가면서 실행 시키면, summary 의 결과가 차이점이 있다는 것을 발견 하게 되었습니다. 아래는 "RBP_DL12_openCV_get_image.jpynb" 의 예제의 model.summary()의 결과 입니다. 아래에 보시는 바와 같이  "RBP_DL12_openCV_get_image.jpynb"의 예제에서 print 한 model.summary 에서는 4개의 layer 가 보이고, 위에서 보여진 "RBP_DL_MNIST_camera.py" 의 예제에서 print 한 model.summary 에서는 3개의 layer 만 보입니다. 

혹시 이것이 문제인가요?

만약, 이것이 문제라면, 어떻게 이문제를 풀수가 있는지요?