Residual

잔차 : 잔여물, 나머지, 남은 것.
원래 것에서 빼고 남은 차이

회귀분석에서 residual은

실제값-예측값
즉 “설명되지 않고 남은 오차”

선형대수에서 residual은

Ax-b의 차이
즉 “해가 완벽하지 않을 때 남는 부분”

ResNet에서 residual

$F(x):=H(x)-x$
$H(x)$ : 우리가 원래 배우고 싶었던 함수
$x$ : 입력