Inflearn brand logo image

인프런 커뮤니티 질문&답변

능함가님의 프로필 이미지
능함가

작성한 질문수

강화학습 입문에서 Deep Q-learning/Policy Gradient까지

강화 학습의 구성 요소 - 환경과 모델 (Environment & Model)

model based

작성

·

16

0

model based method 에서
모델을 안다는 것이, value function 정보까지 다 알고 있다는 것일까요?

 

만약 아니라면, planning 시 가치함수는 어떻게 고려가 되는 것인지 궁금합니다.

답변 1

1

YoungJea Oh님의 프로필 이미지
YoungJea Oh
지식공유자

모델을 안다는 것은 환경의 전이 규칙과 보상 구조를 안다는 뜻이지, 가치함수를 이미 다 알고 있다는 뜻은 아닙니다.

  • 가치함수는 그 모델을 바탕으로 계산하거나 추론해서 얻는 것입니다.

  • 그래서 planning 단계에서는 모델을 이용해 미래를 시뮬레이션하고, 그 결과로 가치함수를 업데이트해 정책을 개선합니다.

좋은 질문 감사합니다.

능함가님의 프로필 이미지
능함가

작성한 질문수

질문하기