t5-base 모델 사용 시 주의사항 및 문제 해결
문제 1: 로컬 모델 전이 시 발생하는 예기치 않은 오류
모델을 직접 다운로드하여 로컬에서 사용할 경우, 토크나이저의 model_max_length 값이 비정상적으로 출력되는 문제가 발생할 수 있습니다. 아래 코드를 실행하면 토크나이저의 최대 길이가 1000000000000000019884624838656과 같은 터무니없는 값으로 표시되지만, 모델 설정의 n_positions는 올바르게 512로 출력됩 ...
6월 3일 01:11에 게시됨