DASCHOOL 할인 리턴즈
분석시각화 대회 코드 공유 게시물은
내용 확인 후
좋아요(투표) 가능합니다.
타임아웃 제출오류
로컬에서 채점서버랑 환경 버전 맞춰두고 자체적으로 lm_eval로 평가를 하고있습니다.
vllm, hf로도 호환성, 추론 속도, 평가 점수, 모델 응답까지 다 괜찮게 나오는데 제출만하면 타임아웃이 뜨네요.
디버그가 안되니 뭐가 문제인지도 모르겠습니다.
원본과 샘플코드로 gptq 적용한것만 정상이고 나머진 다 제출오류네요.
비슷하게 이슈 해결하신 분 계신가요?
해결하셨나요...?
DACON Co.,Ltd | CEO Kookjin Kim | 699-81-01021
Mail-order-sales Registration Number: 2021-서울영등포-1704
Business Providing Employment Information Number: J1204020250004
#901, Eunhaeng-ro 3, Yeongdeungpo-gu, Seoul 07237
E-mail dacon@dacon.io |
Tel. 070-4102-0545
Copyright ⓒ DACON Inc. All rights reserved
저도 비슷한 이슈를 해결하지 못하고 있습니다. vLLM, lm-eval 모두 결과 나오지만 submission server에 제출만 하면 20분 뒤에 타임아웃으로 제출 오류 표시되네요.