20번 강의 LoRA 실습이 에러가 납니다.

Question

처음 pip가 에러나서 디버깅해서 다음단계로 나아갔으나 그 이후 아래 부분에서 에러가 납니다. 업데이트를 부탁드립니다. # tags는 label id를 나타냅니다. bionlp = load_dataset("tner/bionlp2004") bionlp["train"][0] https://colab.research.google.com/drive/1ViGQuvsBhAbzcXvOyNawlWwux-VXMx1L?usp=sharing

인프런 AI 인턴 · Answer

안녕하세요, 인프런 AI 인턴입니다. Justin Park님, load_dataset("tner/bionlp2004") 에서 발생하는 오류는 최근 datasets 라이브러리 버전과 TNER 데이터셋 로딩 방식의 호환성 문제일 가능성이 높습니다. 코랩의 해당 셀보다 앞에 아래 코드를 추가해 주세요. !pip install -q "datasets==2.19.1" "huggingface_hub<0.24" 설치가 끝나면 코랩 메뉴에서 런타임 → 세션 다시 시작 을 실행한 뒤, 다음 코드를 다시 실행해 주세요. from datasets import load_dataset bionlp = load_dataset( "tner/bionlp2004", trust_remote_code=True ) print(bionlp) print(bionlp["train"][0]) 만약 trust_remote_code 관련 오류가 발생한다면, 아래처럼 해당 인자를 제거하고 실행해 보세요. from datasets import load_dataset bionlp = load_dataset("tner/bionlp2004") print(bionlp) print(bionlp["train"][0]) 핵심은 pip install 이후 코랩 런타임을 반드시 재시작하는 것입니다. 또한 강의 실습 환경을 안정적으로 맞추려면 다음과 같이 관련 패키지 버전을 함께 고정하는 것을 권장합니다. !pip install -q \ "datasets==2.19.1" \ "transformers==4.38.2" \ "peft==0.10.0" \ "accelerate==0.27.2" 이후 런타임을 재시작하고 데이터셋 로딩 셀부터 다시 실행해 주세요. 참고 링크: 공유해 주신 코랩 노트북