Computer/Machine learning models
recurrent_activation
recurrent_activation recurrent_activation์ ์ํ ์ ๊ฒฝ๋ง(RNN)์ ๊ฒ์ดํธ ์ ์ด์ ์ฌ์ฉ๋๋ ํ์ฑํ ํจ์๋ฅผ ์ง์ ํ๋ ์ต์
์
๋๋ค. LSTM๊ณผ GRU ๊ฐ์ RNN ๊ตฌ์กฐ์์ ๊ฒ์ดํธ๋ ์
์ ์ํ๋ฅผ ์ด๋ป๊ฒ ์
๋ฐ์ดํธํ ์ง ๊ฒฐ์ ํ๋ ์ค์ํ ์ญํ ์ ํฉ๋๋ค. ์ฌ๊ธฐ์๋ recurrent_activation์ ์ฌ์ฉ๋ ์ ์๋ ๋ช ๊ฐ์ง ์ผ๋ฐ์ ์ธ ํ์ฑํ ํจ์์ ๊ทธ ์ค๋ช
์ ์ ๊ณตํฉ๋๋ค: 1. Sigmoid ('sigmoid') ์ค๋ช
: sigmoid ํจ์๋ ์ถ๋ ฅ์ 0๊ณผ 1 ์ฌ์ด๋ก ์ ํํฉ๋๋ค. ์ด ํน์ฑ ๋๋ฌธ์ sigmoid๋ ๊ฒ์ดํธ์ ์ด๋ฆผ๊ณผ ๋ซํ์ ์ ์ดํ๋ ๋ฐ ์ฃผ๋ก ์ฌ์ฉ๋ฉ๋๋ค. ์ถ๋ ฅ์ด 1์ ๊ฐ๊น์ฐ๋ฉด ๊ฒ์ดํธ๋ ์์ ํ ์ด๋ฆฌ๊ณ , 0์ ๊ฐ๊น์ฐ๋ฉด ๊ฒ์ดํธ๋ ์์ ํ ๋ซํ๋๋ค. ์ฌ์ฉ ์: LSTM๊ณผ GRU์ ์
๋ ฅ ๊ฒ์ดํธ..