[신규 오픈 기념] 데이스쿨 최대 40% 할인 🎁
분석시각화 대회 코드 공유 게시물은
내용 확인 후
좋아요(투표) 가능합니다.
ROUGE 평가시 tokenization에 대해 문의 드립니다.
안녕하세요?
ROUGE 평가시 토큰화가 어떻게 되는지 궁금합니다.
문자단위인지 어절단위인지 아니면 형태소 단위로 되는건지 궁금하네요.
만약 형태소 단위라면 제출시 형태소 단위로 나눈다음에 제출해야 할까요?
데이콘(주) | 대표 김국진 | 699-81-01021
통신판매업 신고번호: 제 2021-서울영등포-1704호
서울특별시 영등포구 은행로 3 익스콘벤처타워 901호
이메일 dacon@dacon.io | 전화번호: 070-4102-0545
Copyright ⓒ DACON Inc. All rights reserved
안녕하세요.
ROUGE평가시 한국어 문장을 Mecab을 이용하여 토큰화 후 평가합니다.