[TIL]윤형준_201102

오늘 다시 프로젝트 작업에 들어갔다.

특성이 많고 복잡한 데이터에 수시간을 쏟아부으며 feature engineering을 하였다. 물론 몇가지 특성은 data leakage 문제가 있을 것이라고 예상했지만, 머리속으로 생각한 것과 실제가 다를수 있기 때문에 끝까지 engineering을 한 다음에 모델을 돌려본후 overfitting이 있을 경우 data leakage가 있을 것 같은 특성을 하나씩 빼보며 비교해 보았다.

열심히 engineering 하였는데, data leakage 또는 overfitting 이슈 때문에 특성을 버려야 한다는 것이 너무 마음이 아프다...ㅎㅎ