1. test 데이터를 전부 제대로 load 하지 않고 일부 데이터에 대해서만 predict 하였을 수도 있습니다. 데이터가 전부 잘 불러와졌는지 확인이 필요합니다.
2. 학습한 모델이 일부 이미지에서 물체를 검출하지 못하였을 수 있습니다. 혹은 이미지에 물체가 없었거나, confidence 값 등으로 threshold를 설정하셨다면 너무 높은 값으로 설정하셨다든지 여러 가지 이유가 있을 수 있습니다. 
여러 가지 문제점을 고민해 보시는 게 좋을 듯합니다.

컨피던스 IOU 적용 후 탐지된 물체가 없는 사진이 22개 있는 것 같네요