bert기반 amino Sequence pretrained 모델인 esmV2를 사용하여 학습한 코드입니다.
코드의 전체 실행 결과는 1-epochs에 6시간정도 소요가되서 학습 결과 출력부분은 잘라서 발송드립니다.
해당 모델의 경우 LSTM과 비슷한 성능으로 학습시간은 6시간 정도 소요됬습니다.
추가적으로 피드백 주시면 감사하겠습니다.