RNN 가중치 w,u,l shape 질문
412
19 câu hỏi đã được viết
안녕하세요 선생님 RNN에 대한 알고리즘을 공부하다가 가중치의 shape를 보면서 이해가 가지 않아서 질문을 드립니다
a(t)안에 있는 원소들의 shape들이 달라도 weight를 통해서 n*1의 형태로 만드는 것은 이해를 했는데
input과 ,h(t-1)의 행이 다른 이유는 무엇인가요?
행이 달라도 되는 이유가
I work at Google라고 할때
I, work (t시점이 work일때)
i, work의 글자 수의 차이 때문에 이렇게 행이 다른건가요?
감사합니다
Câu trả lời 1
1
안녕하세요.
말씀하신 부분은 이해하신게 맞습니다 :) 관계식에 의해서 Ux가 크기 n x 1이고 Wh의 크기가 n x 1이므로 b+Wh+Ux 계산이 가능하여 a도 n x 1이 나오게 됩니다. 물론 여기서 b도 n x 1입니다.
행(?)이 달라도 되는 이유를 질문 주셨는데 h(t)의 길이를 의미하는 것인가요? h의 길이는 목적에 따라 다르며 h의 길이에 상관없이 many to one이나 one to many와 같이 아웃풋 길이를 정하실 수 있습니다. 그리고 임배딩할 때 글자 수와 관계없이 각 단어마다 하나의 벡터로 임배딩 됩니다.
예) I -> (1,0,0,0,....,0), work -> (0,0,1,0,....,0), .....
감사합니다!!
0
안녕하세요 선생님 추가적인 질문이 있습니다 선생님 강의하신 lstm 모형에서 unit = 64라고 하면 선생님이 보여주는 lstm 모형이 64개가 있다고 생각해야 하는건가요??? (lstm모형들이 64개가 붙어 있는건가요?)
감사합니다
전체질문) 시험대비 관련 질문
0
13
1
간단한 질문 있습니다
0
19
2
로지스틱 회귀분석, 분산분석 범주형 변수 관련 외 질문
0
20
1
수업노트에서 프로그램을 따라할 경우 일부 단어만 입력해도 전문이 뜨는데요
0
14
1
[캐글] 작업형3 예상 문제 - 잔차이탈도
0
26
2
로지스틱 회귀 독립변수가 범주형일 때
0
23
2
mtcars.csv파일을 받을 수 있을까요?
0
17
0
벼락치기질문
0
40
2
수강연장 문의 드립니다
0
37
2
수강연장 문의드립니다.
0
29
2
작업형2에서 데이터 분포를 확인하는 이유
0
34
2
10회 기출 작업형 2 문제
0
25
1
코딩팡 프로 인증
0
34
1
이번 강의 학습노트
0
29
2
다중레이어 경사하강법에서 질문
0
335
2
XOR파트에서 입력표현 방식
1
362
2
경사하강법에서 다중레이어에서의 가중치를 구할 때 식이 이해가 가질 않습니다 ㅠ.ㅠ
1
425
1
경우에 따른 최적의 활성화 함수 선정하는 방법
0
515
2
전이학습 강의 중 질문이 있어서 남깁니다.
0
320
1
XOR 파트에서 질문 있습니다.
0
314
1
SGD + 모멘텀 등의 코드
0
518
1
bias가 왜 필요한지 정확하게 모르겠습니다.
2
1262
1
LSTM 모형의 이해
1
665
1
과적합 판단 방법에 대해 질문 드립니다.
0
2405
1

