나라장터 자체입찰 공고 법령 위반사항 모니터링 AI 경진대회

알고리즘 | 코드 제출 평가 | 자연어처리 | 법령 위반사항 모니터링

  • moneyIcon 상금 4,200만 원
  • 901명 종료까지 D-17

 

같은 모델 mlx 테스트후 제출 가능여부

2026.09.01 16:08 407 조회

안녕하세요 mac 을 사용하는 개발자입니다.


mlx로 같은 모델을 mac에서 추론하여 테스트 수행후 , 제출시에는 기존 모델로 돌려서 (추론방안도 vllm) 제출해도 되는지 궁금합니다.


물론 mlx로 변경해서 local 테스트하기때문에 실제에서도 점수가 동일하지는 않겠지만 mac만 사용가능해서 이런 방법도 문제가 없는지 궁금합니다.


감사합니다.

로그인이 필요합니다
0 / 1000
DACON.KMS
2026.09.01 16:57

안녕하세요, 데이콘입니다.

네, 가능합니다. 로컬 개발·테스트 환경은 별도로 제한하지 않으며, 채점은 제출하신
코드가 채점 서버의 고정 환경(vLLM + 제공된 gemma-4-26B-A4B-it)에서 실행된 결과로만
이뤄집니다. 말씀하신 방식 — 로컬에서는 MLX로 같은 모델을 돌려 파이프라인을 검증하고,
제출물은 제공 모델 + vLLM 기준으로 작성은 문제 없으며, 오히려 권장할 만한 개발
흐름입니다. 제출 실행에서 서버의 제공 모델을 실제로 호출하도록 작성해 주시기만 하면
됩니다.

개발하실 때 참고가 될 만한 사항을 함께 안내드립니다.

- 말씀하신 대로 MLX 변환본은 대개 양자화가 적용되어 있어, 프롬프트·파라미터를
  동일하게 맞추더라도 서버(bf16, vLLM)와 출력·점수가 다를 수 있습니다. 로컬 결과는
  로직 검증용으로 활용하시는 것을 권장드립니다.
- 제출 코드의 모델·데이터·출력 경로는 PPS_MODEL_DIR, PPS_DATA_DIR, PPS_OUTPUT_DIR
  환경변수 기준으로 참조해 주세요(베이스라인 script.py와 동일한 방식). 로컬 경로가
  하드코딩되면 서버에서 실행되지 않습니다.
- vLLM 실행 관련 유의사항(모델 실행 코드는 if __name__ == "__main__": 아래 배치,
  vllm·torch·transformers·xgrammar 버전 고정 등)은 README에 안내되어 있습니다.
  MLX 로컬 테스트에서는 이 부분이 검증되지 않으므로, 최종 제출 전에 제출 코드
  기준으로 한 번 점검해 보시기 바랍니다.

감사합니다.
데이콘 드림