날씨 빅데이터 대회
우선 해당 대회는 기상청에서 주는 데이터를 분석하는 대회다.
검증 데이터를 넣었을 때 모델이 예측하는 결과와 실제 결과가 같을수록(RMSE) 높은 점수가 부여된다.
간략한 진행 과정
약 5월 말(기말시험 전)에 진행된 과정 자외선(UV) 값 예측 모델 개발
- 주어진 데이터를 전처리 및 분석
- 과거 자외선 데이터를 기반으로 미래의 자외선 값의 예측하는 모델 개발
- 검증 데이터로 모델 성능 검증
이후 기말시험 일정으로 인해 잠시 중단
포기 결정
포기를 결정하게 된 여러 이유들 중 3가지를 뽑았다.
지속적인 데이터 변경
- 개발 도중 3차례 이상 주어진 데이터가 변경되었다.
- 처음 데이터를 받았을 때, 데이터 셋에 결측치가 심하게 많은 문제가 있었다.
- 여름철 자외선을 예측하는 것이 목표인데, 여름철(7 ~ 8월) 자외선 값이 누락되어 있었다.
일관되지 못한 검증 데이터 셋
- 데이터의 과거를 예측하는 것으로 통보되었다가 미래를 예측하는 것으로 변경되었다.
사이트 관리 부실
- 코드 추상화를 통해 데이터의 변경까지는 대응할 수 있도록 개발을 했다.
- 변경된 데이터를 받으려면 신청을 하고 통과될 때까지 며칠을 기다려야 했다.
- 사이트의 로그인이 되지 않는 문제, 신청 페이지가 로딩되지 않는 문제, 신청이 올바르게 되었는지 알 수 없는 문제 등의 사이트에 문제가 다수 존재했다.
그 외 대회 마감일이 변경되고 모델의 결과를 검증받는 페이지가 사라지는 문제가 존재했다.
따라서 기간 내에 개발이 불가능할 것이라 생각했고, 대회는 그만두기로 결정했다.
첫 대회 경험으로 적당했다고 생각하지만, 많이 아쉬운 것은 사실이다.
대회 운영 측의 변덕이 너무 심하고, 사이트 관리가 제일 불만스러운 부분이었다.
만약 다음에 비슷한 대회를 참가하게 된다면, 이번 경험을 바탕으로 계획을 조금 더 유동적으로 세워야겠다.