자동 미분 (1) 썸네일형 리스트형 [Pytorch] Autograd 파이토치 한국사용자 모임의 글을 보면서 공부한 내용을 정리한 글입니다. 신경망 학습 시 가장 자주 사용되는 알고리즘은 Back Propagation이다. 이 알고리즘에서, 매개변수(W: 모델의 가중치)는 주어진 매개변수에 대한 손실 함수의 변화도(Gradient)에 따라 조정된다. PyTorch에서는 torch.autograd 라고 불리는 자동 미분 엔진이 내장되어 있다. 이는 모든 계산 그래프에 대한 변화도의 자동 계산을 지원한다. import torch x = torch.ones(5) # input tensor y = torch.zeros(3) # expected output # requires_grad=True 옵션은 역전파를 통해 가중치의 기울기를 계산하기 위해 설정 w = torch.randn(.. 이전 1 다음