안녕하세요. 제출 규격 및 평가셋 구성 관련하여 5건 함께 확인 요청드립니다.

1) Macro-F1의 클래스 집합 규약

Macro-F1 계산 시 평균 대상 클래스가 (a) 정의된 전체 범주입니까(예: steer_label이면 LEFT/STRAIGHT/RIGHT 3개 항상), 아니면 (b) 해당 평가셋의 정답에 실제로 등장한 범주만입니까? 두 규약은 점수가 크게 달라집니다. 예를 들어 정답 조향이 모두 STRAIGHT인 구간에서 전부 STRAIGHT로 맞히면 (a)는 1/3, (b)는 1.0이 됩니다.

2) evasion_space의 제출 자료형

데이터 탭 예시는 evasion_space를 정수 1/0으로 표기하고 있습니다. 정수만 허용됩니까, 문자열 범주도 허용됩니까? 허용되는 값의 목록을 명시해 주시면 감사하겠습니다.

3) entry_side의 범주 목록

공지 [필독]에는 LEFT(화면 왼쪽에서 진입), RIGHT(화면 오른쪽에서 진입) 두 가지만 열거돼 있습니다. 평가 데이터에 정면 진입, 후방 진입, 판정 불가 같은 제3의 경우가 포함됩니까? 포함된다면 해당 영상의 entry_side 표기 규칙은 무엇입니까?

4) 무충돌 영상과 결측 표기 규칙

Stage 2 평가 데이터에 충돌이 발생하지 않는 영상이 포함됩니까? 포함된다면 collision_frame / entry_frame에 어떤 값을 제출해야 합니까? 평가 탭은 "예측값 누락 / 음수 프레임 / 범위를 벗어난 프레임"을 모두 오답으로 처리한다고 명시하고 있어, 무충돌 영상을 표기할 방법이 현재 규격에 없습니다.

5) Stage 2 평가셋에 블랙박스 차량이 관여하지 않는 사고가 포함됩니까?

공지 [필독]은 피의차량을 블랙박스 장착 차량으로, 피해차량을 "피의차량의 차선에 진입하여 피의차량과 충돌한 차량"으로 정의하고 있습니다. 정의대로라면 충돌은 블랙박스 차량이 관여한 사고여야 합니다. 그런데 배포된 Baseline.zip의 data/stage2/videos/000002.mp4(labels.csv 상 t_collision=30)는 해당 시점에 블랙박스 차량이 관여하지 않는 원거리 사고로 보입니다(전방 우측 덤프트럭과 반대편 차량).

비공개 평가 데이터의 Stage 2 영상은 블랙박스 차량이 직접 관여한 사고로 한정됩니까? 아니면 제3자 차량 간 사고도 포함되며 그 경우에도 collision_frame을 해당 사고 시점으로 제출해야 합니까?

다섯 건 모두 제출 규격/평가셋 구성 확인을 위한 것으로, 한 번에 여쭙습니다. 감사합니다.