과적합 발생 여부을 알아내는 방법
CODEDRAGON ㆍDevelopment/Big Data, R, ...
반응형
과적합 발생 여부을 알아내는 방법
· 과적합은 층이 너무 많거나 변수가 복잡해서 발생하기도 하고 테스트셋과 학습셋이 중복될 때 생기기도 합니다.
· 딥러닝은 학습 단계에서 입력, 은닉층, 출력층의 노드들에 상당히 많은 변수들이 투입됩니다. 따라서 딥러닝을 진행하는 동안 과적합에 빠지지 않게 늘 주의해야 합니다.
· 과적합 발생 여부를 알아내려면 주어진 데이터 중 일부는 모델을 만드는 훈련 데이터로 사용하고, 나머지 일부는 테스트 데이터로 사용해 모델을 평가해야 합니다.
· 즉, 데이터 추출을 통한 모형평가가 필요합니다.
'Development > Big Data, R, ...' 카테고리의 다른 글
교차검증(Cross-validation)방법, k-fold 교차검증 ( k-fold CV; k-fold Cross-validation) (0) | 2019.12.08 |
---|---|
데이터 분석 절차 (0) | 2019.12.08 |
3.Summary - 3.빅데이터 적재모듈 개발하기 (0) | 2019.12.08 |
Hadoop - download for windows (0) | 2019.12.07 |
과적합 발생 원인, 과적합을 해결하기 어려운 이유 (0) | 2019.12.07 |