Transformer 번역기 분석 - Part1 따라치기 질문

Question

안녕하세요.강사님. 지난번에 확인해주신 부분을 잘 완료되고, 이제 transformer 쪽 코드를 현재 따라쳐 보고려고 하는데, version 문제인지 tokenizers = tf.saved_model.load(model_name) 이쪽 코드에서 오류가 나는 상태입니다. 혹시 어떻게 해결해야 할까요? https://www.tensorflow.org/text/tutorials/transformer?hl=ko 사이트에서 "Google Calab 에서 실행" 버튼으로 예제 문제를 실행시켜도 위의 부분에서 오류가 나는데요.. 뭘 잘 못하거나 뭐가 문제가 된 건지 알 수있을까요?

YoungJea Oh · Answer

model_path = "/content/ted_hrlr_translate_pt_en_converter_extracted/ted_hrlr_translate_pt_en_converter" # 저장된 모델 로드 tokenizers = tf.saved_model.load(model_path) 이렇게 수정하시면 됩니다. 최근에 압축 풀리는 폴더명이 바뀐 것 같습니다. 교재에도 수정하여 곧 올리겠습니다. 감사합니다.

인프런 AI 인턴 · Answer

안녕하세요, 인프런 AI 인턴입니다. terranysj123님, Transformer 모델의 코드를 실행하던 중 tf.saved_model.load() 함수에서 오류가 발생한 점 이해합니다. 이 함수는 텐서플로우의 SavedModel 포맷을 사용해 모델을 불러오는 기능을 제공하는데, 다양한 원인으로 오류가 발생할 수 있습니다. 우선 아래 몇 가지 확인 사항을 점검해 보시기 바랍니다. 가능한 해결 방법: TensorFlow 및 관련 라이브러리 버전 확인 : 사용 중인 TensorFlow 버전이 이 예제와 호환되지 않을 수 있습니다. Google Colab의 예제 노트북 에서 사용하는 버전 넘버를 체크하여 동일한 버전을 설치하십시오. 다음의 셀을 Colab 노트북 최상단에서 실행해 보세요: !pip install tensorflow==2.13 모델 URL 및 경로 확인 : 모델 다운로드 링크 또는 경로 설정이 정확한지 확인하세요. 예제에서는 이미 model_name 변수에 모델 경로가 적절히 설정되어 있는지 점검해 보세요. 인터넷 상태 및 연결 확인 : 데이터 다운로드 중 인터넷 연결에 문제가 생길 수 있습니다. 네트워크 연결이 안정적인지 확인해주세요. 참고 사항: 해당 이슈는 버전과 관련된 문제일 가능성이 높기 때문에, tensorflow 및 협력 라이브러리의 최신 버전을 사용하는지, 그리고 구글 Colab 실행 시 요구되는 옵션들이 올바르게 설정되어 있는지를 꼭 확인해 보셔야 합니다. 관련 자료로 아래 커뮤니티 게시글도 문제가 해결하는 데 도움이 될 수 있습니다. BERT를 이용한 문서 분류 문제가 반복되거나 구체적인 오류 메시지가 있다면 추가적인 정보를 제공해 주시면 보다 정확한 진단을 할 수 있을 것입니다. 저는 질문자님의 이해를 돕고자 지식공유자님의 기존 답변을 참고하여 유사한 답변 링크를 추천해드리고 있습니다. 현재 베타 기능으로 답변이 만족스럽지 않을 수 있는 점 양해 부탁드립니다. 🙏 추가적으로 궁금한 점이 있으시면, 이어서 질문해 주세요. 곧 지식공유자께서 답변해 주실 것입니다.