제출 자료 작성을 위해 검증 과정에 대한 설명 부탁드립니다.

건설공사 사고 예방 및 대응책 생성 : 한솔데코 시즌3 생성 AI 경진대회

Jacksian

2025.03.24 11:29 713 Views

3월 28일 코드 및 PPT 제출을 위해 몇가지 질문을 드립니다.

정량 평가의 대상
제출한 CSV 만을 대상으로 평가를 하는가
RAG로 결과를 유추하지 않은 것 같은 답변은 자동 실격인가
정답과 임베딩 값이 서로 다른 경우
하나의 답변으로 전체 정답을 모두 채운 경우
제출 코드의 기준
제출했던 정답지와 완전히 동일한 정답이 나와야 하는가. 아니면 LLM의 특수성을 감안하여 약간의 재현 상 오차는 용인이 되는가
os 와 library의 버전 고정을 위해 docker image 로 제출이 가능한가
서빙 프로세스 정의
서빙 아키텍쳐에 대한 자료 작성이 맞는가 (UI, UX 제외가 맞는가)
서빙 아키텍쳐가 맞다면, On - promise인가 아니면 Cloud 서비스(AWS, Azure 등) 기준인가 혹은 무관한가

1 Comments

comment

0 / 1000

DACON.PSH

2025.03.24 13:39

안녕하세요.
문의하신 질문에 대한 답변입니다.
1. 최종 제출된 파일로 평가하며, 규칙(6.유의사항)에 따라 불이익이 있을 수 있습니다.
2. 최종 제출 점수 재현이 100% 일치하지 않더라도, 순위가 변경되지 않을 수준의 차이는 감안하여 수상자를 결정하게 됩니다.
또한, 코드 제출 규칙에 따라 .py, .ipynb 파일로 개발 환경 및 라이브러리 버전을 기재하여 제출 부탁드립니다.
3. 서빙 프로세스에 대한 제약은 없으므로 자유롭게 진행하시면 됩니다.
감사합니다.

📣 The comment input field has been moved to the top of the comment list!

List

제출에 대한 평가를 문의 드립니다.

Competition - 건설공사 사고 예방 및 대응책 생성 : 한솔데코 시즌3 생성 AI 경진대회

Current

제출 자료 작성을 위해 검증 과정에 대한 설명 부탁드립니다.

Competition - 건설공사 사고 예방 및 대응책 생성 : 한솔데코 시즌3 생성 AI 경진대회

Likes 11