분석시각화 대회 코드 공유 게시물은
내용 확인 후
좋아요(투표) 가능합니다.
분석시각화 대회 코드 공유 게시물은
내용 확인 후
좋아요(투표) 가능합니다.
최근 AI Agent는 단순한 응답 생성을 넘어, 사용자의 요청과 상황을 바탕으로 어떤 행동을 수행할지 판단하는 방향으로 발전하고 있습니다. 이러한 시스템에서는 복잡한 생성이나 장문 추론 이전에, 현재 맥락에서 어떤 작업을 선택하고 실행할지를 빠르게 결정하는 단계가 매우 중요합니다. 특히 실제 서비스 환경에서는 이러한 판단이 실시간 또는 준실시간으로 이루어져야 하므로, 정확성뿐 아니라 속도와 효율성 또한 핵심적인 요소로 작용합니다.
그러나 모든 의사결정 과정을 대규모 언어모델에 직접 의존하는 방식은 비용과 지연 측면에서 한계가 있으며, 제한된 연산 자원을 사용하는 환경에서는 더욱 비효율적일 수 있습니다. 이에 따라 실제 AI Agent 시스템에서는 LLM 호출 이전 단계에서 경량 의사결정 모델을 별도로 두어, 행동 분기나 의도 판단을 우선 처리하는 구조가 중요하게 다뤄지고 있습니다. 이는 전체 시스템의 응답성을 높이고 자원 사용을 최적화하는 데에도 효과적인 접근이라 할 수 있습니다.
따라서 본 주제는 AI Agent의 사전 판단 단계인 Action Decision 문제를 중심으로, 제한된 자원 환경에서 안정적으로 동작할 수 있는 경량·고속 의사결정 AI 모델을 설계하고 구현하는 데 목적이 있습니다. 이를 통해 참가자는 실제 AI Agent 시스템의 구성과 역할 분담을 이해하고, 생성 중심의 AI를 넘어 판단과 실행 구조까지 포함한 보다 현실적인 AI Agent 설계를 고민해볼 수 있을 것입니다.
AI Agent 행동(Action) 의사결정 예측 챌린지
참가자는 AI 코딩 에이전트 세션의 특정 시점에 기록된 상태 데이터를 바탕으로, 에이전트가 다음에 수행할 행동(action)을 14개 클래스 중 하나로 예측해야 합니다.
각 샘플은 현재 사용자 발화(current_prompt), 직전까지의 대화·행동 이력(history), 요금제·잔여 토큰 예산·작업공간 상태 등 세션 메타정보(session_meta)로 구성됩니다.
예측 대상은 파일 읽기·검색·수정, 셸 명령 실행, 테스트 실행, 사용자 질문 등 에이전트의 주요 탐색·수정·실행·대화 행동을 포함하며, 평가지표는 14개 클래스에 대한 Macro-F1입니다.
본 대회는 예측 결과 파일이 아닌 추론 코드(script.py)와 학습된 모델을 제출(submit.zip)하는 '코드 제출 대회' 방식으로 진행됩니다
평가가 정상적으로 실행되기 위해서는 다음 조건을 충족해야 합니다.
자세한 사항은 [링크]와 [코드 제출 대회 가이드]를 반드시 참고하여 진행하시기 바랍니다.
AI·SW중심대학 학생(57개교)
※ 참가 접수일 (5.26. ~ 6.8.) 기준, 재학생 및 휴학생 참가 가능(전공무관), 졸업생 참가 불가
※ 동일인 2개 부문 중복 접수 불가
▼ 본 경진대회는 팀 단위로 참가접수를 진행하기에 팀 병합 절차가 별도로 없습니다.
주최·주관 : 정보통신기획평가원, AIㆍSW중심대학협의회
후원 : 과학기술정보통신부, 6개 기업
참가 접수
팀 병합 마감
참가 접수 마감
예선 시작(오전 10시~)
예선 종료(~오전 10시)
예선 평가(~오전 10시)
본선 진출 후보팀 자료제출 마감(~오전 10시)
코드 검증
예선 결과발표(오후 14시)
본선 발표평가 및 시상식
최근 AI Agent는 단순한 응답 생성을 넘어, 사용자의 요청과 상황을 바탕으로 어떤 행동을 수행할지 판단하는 방향으로 발전하고 있습니다. 이러한 시스템에서는 복잡한 생성이나 장문 추론 이전에, 현재 맥락에서 어떤 작업을 선택하고 실행할지를 빠르게 결정하는 단계가 매우 중요합니다. 특히 실제 서비스 환경에서는 이러한 판단이 실시간 또는 준실시간으로 이루어져야 하므로, 정확성뿐 아니라 속도와 효율성 또한 핵심적인 요소로 작용합니다.
그러나 모든 의사결정 과정을 대규모 언어모델에 직접 의존하는 방식은 비용과 지연 측면에서 한계가 있으며, 제한된 연산 자원을 사용하는 환경에서는 더욱 비효율적일 수 있습니다. 이에 따라 실제 AI Agent 시스템에서는 LLM 호출 이전 단계에서 경량 의사결정 모델을 별도로 두어, 행동 분기나 의도 판단을 우선 처리하는 구조가 중요하게 다뤄지고 있습니다. 이는 전체 시스템의 응답성을 높이고 자원 사용을 최적화하는 데에도 효과적인 접근이라 할 수 있습니다.
따라서 본 주제는 AI Agent의 사전 판단 단계인 Action Decision 문제를 중심으로, 제한된 자원 환경에서 안정적으로 동작할 수 있는 경량·고속 의사결정 AI 모델을 설계하고 구현하는 데 목적이 있습니다. 이를 통해 참가자는 실제 AI Agent 시스템의 구성과 역할 분담을 이해하고, 생성 중심의 AI를 넘어 판단과 실행 구조까지 포함한 보다 현실적인 AI Agent 설계를 고민해볼 수 있을 것입니다.
AI Agent 행동(Action) 의사결정 예측 챌린지
참가자는 AI 코딩 에이전트 세션의 특정 시점에 기록된 상태 데이터를 바탕으로, 에이전트가 다음에 수행할 행동(action)을 14개 클래스 중 하나로 예측해야 합니다.
각 샘플은 현재 사용자 발화(current_prompt), 직전까지의 대화·행동 이력(history), 요금제·잔여 토큰 예산·작업공간 상태 등 세션 메타정보(session_meta)로 구성됩니다.
예측 대상은 파일 읽기·검색·수정, 셸 명령 실행, 테스트 실행, 사용자 질문 등 에이전트의 주요 탐색·수정·실행·대화 행동을 포함하며, 평가지표는 14개 클래스에 대한 Macro-F1입니다.
본 대회는 예측 결과 파일이 아닌 추론 코드(script.py)와 학습된 모델을 제출(submit.zip)하는 '코드 제출 대회' 방식으로 진행됩니다
평가가 정상적으로 실행되기 위해서는 다음 조건을 충족해야 합니다.
자세한 사항은 [링크]와 [코드 제출 대회 가이드]를 반드시 참고하여 진행하시기 바랍니다.
AI·SW중심대학 학생(57개교)
※ 참가 접수일 (5.26. ~ 6.8.) 기준, 재학생 및 휴학생 참가 가능(전공무관), 졸업생 참가 불가
※ 동일인 2개 부문 중복 접수 불가
▼ 본 경진대회는 팀 단위로 참가접수를 진행하기에 팀 병합 절차가 별도로 없습니다.
주최·주관 : 정보통신기획평가원, AIㆍSW중심대학협의회
후원 : 과학기술정보통신부, 6개 기업
05.26
참가 접수06.05
팀 병합 마감06.08
참가 접수 마감07.01
예선 시작(오전 10시~)07.15
예선 종료(~오전 10시)07.17
예선 평가(~오전 10시)07.20
본선 진출 후보팀 자료제출 마감(~오전 10시)07.24
코드 검증07.27
예선 결과발표(오후 14시)08.11
본선 발표평가 및 시상식
데이콘(주) | 대표 김국진 | 699-81-01021
통신판매업 신고번호: 제 2021-서울영등포-1704호
직업정보제공사업 신고번호: J1204020250004
서울특별시 영등포구 은행로 3 익스콘벤처타워 901호
이메일 dacon@dacon.io |
전화번호: 070-4102-0545
Copyright ⓒ DACON Co.,Ltd All rights reserved