딥러닝 학습방법 이해하기

신경망을 수식으로 분해해보자 행벡터 $O_i$는 데이터 $X_i$와 가중치 행렬 $W$ 사이의 행렬곱과 절편 $b$ 벡터의 합으로 표현된다고 가정해보자. 행렬은 (1) 데이터를 모아 놓은 행렬($X$)과 (2) 데이터를 다른 공간으로 보내주는 연산자($W$) 역할이 있다. 이는 d개의 변수로 p개의 선형모델을 만들어 p개의 잠재변수를 설명하는 모델을 의미한다. 화살표로 해당하는 것이 가중치 행렬 $W_{ij}$이다. 화살표의 개수는 d...