한국어 문서 추출요약 AI 경진대회

알고리즘 | 텍스트 | 생성요약 | 언어 | ROUGE-N

  • moneyIcon 상금 : 총 1,000만원
  • 1,175명 마감

 

[Dacon 답변요청]단어 임베딩 시 미리 임베딩된 값을 불러와도 되나요 ?

2020.12.09 14:32 2,598 조회

단어 임베딩 시 미리 임베딩된 데이터를 불러와도 되나요 ? 


다른 NLP 대회에서는 임베딩 값을 처리하는 부분이 전처리 단계에서는 사용가능하다고 하였는데 이 대회에서는 어떻게 적용되는지 나와있지 않네요.


끝나는 시점에 급하게 물어보게 됐네요 ㅠㅠ

로그인이 필요합니다
0 / 1000
DACONIO
2021.12.22 14:18

안녕하세요 작성자님.

테스트 데이터는 학습과정에서 사용되서는 안됩니다.

감사합니다.
데이콘 드림.

최정명
2020.12.09 15:21

안녕하세요. 원하는 답변을 받지 못한 것 같아 재질문 합니다.

최근에 끝난 대회를 보면 fasttext, glove, word2vec 처럼 미리 학습되어 공개되어 있는 임베딩 모델을  전처리 과정에서 사용 가능하다 되어 있는데 이 대회는 어떤지 궁금합니다.

DACONIO
2020.12.09 16:32

규칙에 허용된 모델(ETRI-BERT, SKT-BERT, SKT-GPT)의 임베딩된 정보는 활용이 가능하나 테스트 데이터를 이용한 임베딩은 Data Leakage에 해당되어 불가능합니다.