기계는 다음과 같은 과정을 통해 학습한다.
1. 임의의 파라미터(가중치(w))를 정한다.
2. 이 가중치에 대한 손실값을 구하고, 손실 함수(Loss Function)의 기울기(Gradient)를 구한다.
3. 경사 하강법(Gradient Descent)을 이용해 파라미터를 업데이트 한다.
4. 업데이트 된 지점에서 새 손실 함수의 기울기를 구한다.
5. 3~4번 반복
6. 파라미터가 최적값에 도달하면, 파라미터 업데이트를 중지한다.
'딥러닝 이론' 카테고리의 다른 글
| Batch/Epoch/Iteration (0) | 2024.07.22 |
|---|---|
| Gradient Descent(경사 하강법) (0) | 2024.07.22 |