์ํ์ผ๋ก๋ถํฐ ์ธ๋ฅ๋ฅผ ์์ ๋กญ๊ฒ ํ๋ผ(๊ธฐ์ด๋์ํํธ)
์ค๊ณ ๋ฑํ๊ต ๊ณผ์ ์์ ๋ฐฐ์ฐ๋ ์ํ ๋ด์ฉ๋ค์ ์์ถํ ๊ฐ์์ ๋๋ค. ํ์ํ ์ํ์ ์ง์, ํ ํฌ๋๋ค์ ๊ฐ ์์ดํ ๋ง๋ค ๋ง์ ์ฐ์ต๊ณผ ํจ๊ป ๋ฐฐ์๋๋ค.
์๊ฐ์ 1,011๋ช
๋์ด๋ ์ ๋ฌธ
์๊ฐ๊ธฐํ ๋ฌด์ ํ
์ ๊ฒฝ์์ ๋ฅ๋ฌ๋ - Gradients and PyTorch's Autograd ์คํ ์๋ด
์๋ ํ์ธ์ ์๊ฐ์ ์ฌ๋ฌ๋ถ!
์ค๋๋ถํฐ ๋ณธ๊ฒฉ์ ์ธ ๋ฅ๋ฌ๋ ๊ฐ์ ์ปค๋ฆฌํ๋ผ์ด ์์๋์ด ์๋ด๋๋ฆฝ๋๋ค๐
์ ๊ฐ ์ง์ ๋ง๋๋ [์ ๊ฒฝ์์ ๋ฅ๋ฌ๋(ShinDL)] ์ปค๋ฆฌํ๋ผ์ ๋ฅ๋ฌ๋์ ๊ธฐ์ด๋ถํฐ ์ค์ ๋ ผ๋ฌธ ์์ค์ ๊ฐ์๋ฅผ ์ฒด๊ณ์ ์ผ๋ก ๋ค๋ฃจ๋ฉฐ,
๋ฅ๋ฌ๋ ๊ธฐ์ ์ ์ง์ ๋ชจ๋ ๊ตฌํํด๋ณด๋ฉฐ ์๋ฒฝํ ํด๋น ๊ธฐ์ ์ ์ดํดํ๋ ๋ชฉํ๋ฅผ ๊ฐ์ง ์ปค๋ฆฌํ๋ผ์ ๋๋ค!
๋ํ ๋ฅ๋ฌ๋์ ๋ถ์ผ๊ฐ ์๋ ๋๊ธฐ ๋๋ฌธ์, ํฐ ๋ณผ๋ฅจ์ ๊ฐ์๋ณด๋จ ๋ชจ๋ํํ์ฌ ํน์ ํ ํฝ์ ๋ค๋ฃจ๋ ๊ฐ์๋ก ๊ตฌ์ฑ๋ฉ๋๋ค.
์ด๋ฒ ์คํํ ๊ฐ์๋ [์ ๊ฒฝ์์ ๋ฅ๋ฌ๋] ์ปค๋ฆฌํ๋ผ์ ์ฒซ ๋ฒ์งธ ๊ฐ์๋ก์, ๋ฅ๋ฌ๋์ ์ ๋๋ก ์ดํดํ๊ธฐ ์ํด
๋ฐ๋์ ํ์ํ ์ํ์ ๊ธฐ๋ฐ์ธ '๋ฏธ๋ถ'๊ณผ PyTorch ํ๋ ์์ํฌ์ autograd ๊ธฐ์ ์ ๋ฐฐ์ฐ๋ ๊ฐ์์ธ
[Gradients and PyTorch's Autograd]์ ๋๋ค.
(๊ฐ์ ๋งํฌ: https://inf.run/wZoxE)
์์ผ๋ก ๊ธฐ๋ณธ์ ์ธ ๋ฅ๋ฌ๋ ๊ธฐ์ ๋ฟ๋ง ์๋๋ผ, ๋ฅ๋ฌ๋ ๋ ผ๋ฌธ์ ๊ธฐ๋ฐ์ผ๋ก ์ค์ ํ๋ก์ ํธ๊น์ง ์งํํ ์์ ์ด๋,
๋ฅ๋ฌ๋ ํ์ต์ ์ค๋นํ๊ณ ๊ณ์ ๋ถ๋ค์ด๋ผ๋ฉด, ์ด๋ฒ ๊ฐ์๋ถํฐ ์ฐจ๊ทผ์ฐจ๊ทผ ์ปค๋ฆฌํ๋ผ์ ๋ฐ๋ผ์ค์๊ธฐ ๋ฐ๋๋๋ค๐
์ถ๊ฐ์ ์ผ๋ก ๋ค์ ์ฃผ์ ๋ ๋ฒ์งธ ๋ฅ๋ฌ๋ ๊ฐ์์ธ [Gradient Descent] ๊ฐ์๊ฐ ์คํ ์์ ์ด๋ ์ฐธ๊ณ ํด์ฃผ์ธ์!
์์ผ๋ก ๋ ์ข์ ๊ฐ์ ์ ๊ณตํ ์ ์๋๋ก ์ต์ ์ ๋คํ๊ฒ ์ต๋๋ค!
๊ฐ์ฌํฉ๋๋ค.
์ ๊ฒฝ์ ๋๋ฆผ







