서두르세요! "데이스쿨 40% 할인" 12월 2일까지!
분석시각화 대회 코드 공유 게시물은
내용 확인 후
좋아요(투표) 가능합니다.
standard scaler 의 fit_transform 과 transform 차이
안녕하세요, vanilla code를 살펴보니..
Train data는 fit_transform 시키고
validation Data는 transform 시키는데 두 데이터의 전처리를 다른 방식으로 수행하는 이유를 아시는분이 있을까요?
감사합니다.
데이콘(주) | 대표 김국진 | 699-81-01021
통신판매업 신고번호: 제 2021-서울영등포-1704호
서울특별시 영등포구 은행로 3 익스콘벤처타워 901호
이메일 dacon@dacon.io | 전화번호: 070-4102-0545
Copyright ⓒ DACON Inc. All rights reserved
제가 아는선에서는
실제 맞춰야하는 문제인 test data에 대해서는 fit_transform을 수행할 수 없습니다.
validation은 test data를 예측하기 위해 수행하기때문에, test환경과 거의 동일하게 진행해야 합니다.
validation에 fit_transform을 하게된다면 validation에서는 성능이 좋을 수 있지만 실제 test data에는 성능이 나쁠 가능성이 큽니다.