분석시각화 대회 코드 공유 게시물은
내용 확인 후
좋아요(투표) 가능합니다.
Private 3rd | 0.71128 | 5-Model | Hard-Voting
안녕하세요! Private 3등 코드 공유합니다.
Pororo를 활용하여 BackTranslation(영어, 일본어)를 진행하여 데이터셋의 사이즈를 3배로 만들었습니다.
[klue/bert-base | klue/roberta-large | kykim/bert-kor-base | kykim/electra-kor-base | kykim_funnel-kor-base]
BackTranslation데이터셋을 활용하여 5개의 모델에 대해 학습을 진행하였습니다.
하이퍼파라미터 튜닝의 경우, 학습셋 비율을 (0.9/0.1)로 진행하고, 최종 제출에서 (0.999/0.001)로 변경하였습니다.
이외에 batch_size=200, epoch=5, lr=2e-5로 고정하고, 2에폭의 결과 CSV를 총 5개 하드보팅하여 제출하였습니다.
DACON Co.,Ltd | CEO Kookjin Kim | 699-81-01021
Mail-order-sales Registration Number: 2021-서울영등포-1704
Business Providing Employment Information Number: J1204020250004
#901, Eunhaeng-ro 3, Yeongdeungpo-gu, Seoul 07237
E-mail dacon@dacon.io |
Tel. 070-4102-0545
Copyright ⓒ DACON Inc. All rights reserved