2025 금융 AI Challenge : 금융 AI 모델 경쟁

단일 llm 앙상블 문의

2025.08.07 14:06 508 Views

복수의 LLM을 앙상블하거나 입력 유형(4지선다, 5지선다, 주관식)에 따라 다른 LLM을 사용하는 것은 허용되지 않는다고 확인했습니다.


그렇다면 단일llm을 다른 설정으로 생성한 결과물에대한 앙상블은 허용이 되는지 궁금합니다.

Login Required
0 / 1000
DACON.GM
2025.08.07 14:43

하나의 LLM 모델을 기반으로 하되, 동일한 모델을 설정값만 달리하여 여러 번 호출하고 이를 앙상블하는 방식은 허용됩니다.
단, 같은 LLM이라 하더라도 복수의 인스턴스를 각각 다른 변수에 선언하여 사용하는 경우는 ‘복수의 LLM 사용’으로 간주되어 규칙 위반에 해당합니다.
즉, LLM은 하나의 인스턴스만을 사용해야 하며, 다양한 설정으로 여러 번 호출하는 것은 허용되지만, 복수 인스턴스를 병렬적으로 선언하거나 활용하는 것은 허용되지 않습니다.

겸이다
2025.08.07 14:52

하나의 LLM 모델을 기반으로 하되, 동일한 모델을 설정값만 달리하여 여러 번 호출하고 이를 앙상블하는 경우, 여러번 호출하는 모든 시간을 합해서 제한시간에 적용이 되나요?

DACON.GM
2025.08.07 14:54

네. 추론 코드에 이 모든 과정이 담겨있어야하고 시간 측정은 추론 코드로 측정합니다.