태양's ideas ! 진행해 보고 경과 팔로우업 해봅시다!

[JaeheeRyu]

1. 문제에 대한 정답 비율 feature 추가
2. KnowledgeTag별 정답 비율
3. 사용자에 대한 정답 비율 feature 추가
4. 사용자별 KnowledgeTag 정답 비율 중앙값은 필요할까?
5. softmax가 좋을까?
6. 문제 푼 시간 추가 ex) 600초가 넘어갈 경우 하나의 값으로 대체
7. testId 앞의 3자리 중 가운데 자리만 1~9 값을 가지고 feature로 사용 가능
8. feature가 많아지면 PCA 진행 후 분류
9. 문제 임베딩을 Graph를 사용해서 해볼 수 있지 않을까?

[JaeheeRyu]

feature PCA가 필요할까?

• 데이터를 설명하는 분산을 확인해보면, 10~20%가 거의 모든 데이터를 설명해서 쓰는 것임
• 원 핫 인코딩을 하게 되면, 각 ID별로 Feature가 생기기 때문에 차원을 줄이는 게 좋겠다는 생각
• 다만 최근 알고리즘들은 차원 축소를 하지 않고도 좋은 성능을 보이는 것들이 있어서, PCA를 무조건 해야하는 것은 아닐 수 있음