#규제

• 과적합과 규제 — 외우지 못하게 막는 것과 모르는 것을 가르치는 것도형 180장으로 파라미터 40만 개짜리 망을 학습시키자 100스텝 만에 학습 정확도 100%, 시험 정확도는 19%에서 멈췄다. 교과서의 처방인 가중치 감쇠와 드롭아웃은 10배로 세게 걸어도 19% 그대로였다. 데이터 증강만 77%까지 끌어올렸다. 모자랐던 것은 외울 수 있는 양을 줄이는 제약이 아니라 도형은 옮겨도 같은 도형이라는 지식이었다2026-09-25

← 태그 전체