Backpropagation for Linear Regression2

이번 포스트에서는 두 번째 model인 $y = \theta_{1} x + \theta_{0}$에 대한 backpropagation을 다뤄본다.

 

마찬가지로 하나의 Sample에 대한 backpropagation부터 살펴보자.

 

 

Backpropagation for One Sample

---

Model

 

Parital Derivative

 

Chain Rule

 

Backpropagation Visualization

 

Parameter Update

 

 

Backpropagation for Two Samples

---

Model

 

Parital Derivative

 

Chain Rule

 

 

Backpropagation Visualization

Parameter Update

 

 

Backpropagation Vectorized form

---

Model

 

Parital Derivative

 

Chain Rule

 

 

Backpropagation Visualization

Parameter Update