์ ๊ฒฝ์์ ๋ฅ๋ฌ๋ - Gradient Descent
๋ฅ๋ฌ๋์ ๊ฐ์ฅ ํต์ฌ์ ์ธ ํ์ต ์๊ณ ๋ฆฌ์ฆ์ธ gradient descent๋ฅผ ์ง์ค์ ์ผ๋ก ํ์ตํ๋ ๊ฐ์์ ๋๋ค.
์๊ฐ์ 37๋ช
๋์ด๋ ์ด๊ธ
์๊ฐ๊ธฐํ ๋ฌด์ ํ
์๋ ํ์ธ์ ์๊ฐ์ ์ฌ๋ฌ๋ถ๐
๊ธฐ์ด๋ถํฐ ์ ๋ฌธ์ ์ธ ์์ค๊น์ง ์ฒด๊ณ์ ์ผ๋ก ๋ฅ๋ฌ๋์ ๋ค๋ฃจ๋ [์ ๊ฒฝ์์ ๋ฅ๋ฌ๋] ๋ค ๋ฒ์งธ ๊ฐ์์ธ [Gradient-based Linear Regression (2)]์ด ์คํ๋์ด ์๋ ค๋๋ฆฝ๋๋ค!
(๊ฐ์ ๋งํฌ: https://inf.run/ymv1P)
๋ณธ Gradient-based Linear Regression (1)์์ ์ง์ ๊ตฌํํ ์ฝ๋๋ฅผ PyTorch์ ๊ธฐ๋ฅ๋ค์ ์ด์ฉํ์ฌ ์ค์ ์ฝ๋๋ก ๊ตฌํํ๋ ๋ฐฉ๋ฒ์ ๋ฐฐ์ฐ๋ ๊ฐ์์ ๋๋ค. ๋ํ ๋ฐ์ดํฐ ์ ์ฒ๋ฆฌ์ ๋ํ ํ์์ฑ, ์ด๋ก , ํ์ต์ ๋ฏธ์น๋ ์ํฅ์ ์ด๋ก ์ ์ผ๋ก ๋ฐฐ์ฐ๊ณ , ์ค์ ์ฝ๋๋ก ๊ตฌํํ๋ ๊ฐ์์ ๋๋ค.
์ All About AI ์ปค๋ฆฌํ๋ผ์ ๋ฐ๋ผ ์ค์๋ ๋ถ๋ค์ ์คํ ํ ์ธ ๊ธฐ๊ฐ ์ด์ฉํ์๋ฉด ์ข์ ๊ฒ ๊ฐ์ต๋๋ค๐
์ถ๊ฐ๋ก ๋ค์ ์ฃผ ์ค์ ํ์ ๊ฐ์์ธ [Gradient-based Linear Regression (3)]์ด ์คํ๋ ์์ ์ ๋๋ค.
ํจ๊ป ์ด์ฌํ ๋ฅ๋ฌ๋ ์ธ์์ ๋ง๋ค์ด๊ฐ ์ ์๋๋ก ํญ์ ์ต์ ์ ๋คํ๊ฒ ์ต๋๋ค!
๊ฐ์ฌํฉ๋๋ค.
์ ๊ฒฝ์ ๋๋ฆผ
์๋ ํ์ธ์ ์๊ฐ์ ์ฌ๋ฌ๋ถ๐
๊ธฐ์ด๋ถํฐ ์ ๋ฌธ์ ์ธ ์์ค๊น์ง ์ฒด๊ณ์ ์ผ๋ก ๋ฅ๋ฌ๋์ ๋ค๋ฃจ๋ [์ ๊ฒฝ์์ ๋ฅ๋ฌ๋] ์ธ ๋ฒ์งธ ๊ฐ์์ธ [Gradient-based Linear Regression (1)]์ด ์คํ๋์ด ์๋ ค๋๋ฆฝ๋๋ค!
(๊ฐ์ ๋งํฌ: https://inf.run/KgQoQ)
๋ณธ ๊ฐ์๋ ์ด์ ์คํ๋ [Gradient Descent]๋ฅผ ๊ธฐ๋ฐ์ผ๋ก, ๊ฐ์ฅ ๊ฐ๋จํ ๋ชจ๋ธ์ ๋ฐ์ดํฐ์ ํ์ต์ํค๋ ๊ณผ์ ์ ๋ค๋ฃน๋๋ค.
ํ์ฌ ์คํ ๊ธฐ๋ ํ ์ธ ์ค์ด๋, ์ ์ปค๋ฆฌํ๋ผ์ ๋ฐ๋ผ์ค์๋ ๋ถ๋ค์ ์ด ๊ธฐ๊ฐ ์ด์ฉํ์ฌ ์๊ฐ ์ ์ฒญํ์๊ธฐ ๋ฐ๋๋๋ค๐
์ถ๊ฐ๋ก ์ด๋ฒ ์ฃผ ์ค์ ํ์ ๊ฐ์์ธ [Gradient-based Linear Regression (2)]์ด ์คํ๋ ์์ ์ ๋๋ค.
ํจ๊ป ์ด์ฌํ ๋ฅ๋ฌ๋ ์ธ์์ ๋ง๋ค์ด๊ฐ ์ ์๋๋ก ํญ์ ์ต์ ์ ๋คํ๊ฒ ์ต๋๋ค!
๊ฐ์ฌํฉ๋๋ค.
์ ๊ฒฝ์ ๋๋ฆผ
์๋ ํ์ธ์ ์๊ฐ์ ์ฌ๋ฌ๋ถ๐
๊ธฐ์ด๋ถํฐ ์ ๋ฌธ์ ์ธ ์์ค๊น์ง ์ฒด๊ณ์ ์ผ๋ก ๋ฅ๋ฌ๋์ ๋ค๋ฃจ๋ [์ ๊ฒฝ์์ ๋ฅ๋ฌ๋] ๋ ๋ฒ์งธ ๊ฐ์์ธ [Gradient Descent]๊ฐ ์คํ๋์ด ์๋ ค๋๋ฆฝ๋๋ค!
(๊ฐ์ ๋งํฌ: https://inf.run/bK5xe)
๋ณธ ๊ฐ์๋ ์ด์ ์คํ๋ [Gradients and PyTorch's Autograd]๋ฅผ ๊ธฐ๋ฐ์ผ๋ก, ๋ฅ๋ฌ๋์ ๊ฐ์ฅ ํต์ฌ์ ์ธ ํ์ต ์๊ณ ๋ฆฌ์ฆ์ธ
gradient descent๋ฅผ ์ง์ค์ ์ผ๋ก ๋ค๋ฃน๋๋ค.
ํ์ฌ ์คํ ๊ธฐ๋ ํ ์ธ ์ค์ด๋, ์ ์ปค๋ฆฌํ๋ผ์ ๋ฐ๋ผ์ค์๋ ๋ถ๋ค์ ์ด ๊ธฐ๊ฐ ์ด์ฉํ์ฌ ์๊ฐ ์ ์ฒญํ์๊ธฐ ๋ฐ๋๋๋ค๐
์ถ๊ฐ๋ก ์ด๋ฒ ์ฃผ๋ง์ ์ด ๋ค์ ๊ฐ์์ธ [Gradient-based Linear Regression (1)]์ด ์คํ๋ ์์ ์ ๋๋ค.
ํจ๊ป ์ด์ฌํ ๋ฅ๋ฌ๋ ์ธ์์ ๋ง๋ค์ด๊ฐ ์ ์๋๋ก ํญ์ ์ต์ ์ ๋คํ๊ฒ ์ต๋๋ค!
๊ฐ์ฌํฉ๋๋ค.
์ ๊ฒฝ์ ๋๋ฆผ






