내용 요약(Text Summarization) 성능평가 관련

2021.07.20 21:48 1,758 조회

이제 자연어 처리 관련 공부좀 할려고 하는데요.

내용요약 관련 객관적인 성능평가를 받을 수 있는데가 있나요?

기관이든 아님 회사든 성능이 어느 정도 되어야 좋은건지

혹시 설명 해 주실 수 있는 분이 있으면 글 좀 남겨 주셨으면 좋겠습니다.

로그인이 필요합니다

comment

0 / 1000

최정명

2021.07.20 22:17

Text Summarization 에서 정량적 평가 지표로는 ROUGE를 사용하는 것으로 알고 있습니다.

Text Summarization 관련 연구, 데이터셋들은 여기 참고하시면 될것 같아요.
https://paperswithcode.com/task/text-summarization

데이콘에서도 내용요약 대회가 열린적이 있습니다.
문장생성요약 대회 : https://dacon.io/competitions/official/235673/overview/description
문장추출요약 대회 :https://dacon.io/competitions/official/235671/overview/description

최정명

2021.07.20 22:15

성능이 어느정도 되어야 좋은지는 데이터에 따라 다를것 같아서 저기 papers with code에 다양한 데이터셋 벤치마크를 보면 어느정도 감이 잡힐겁니다.