PPO Parameters에서 normalize 관련 질문입니다.
안녕하세요.
개인 프로젝트를 진행하면서 강의를 보면서 많은 도움을 받고 있습니다. 좋은 강의 만들어주셔서 감사합니다.
vector observation 입력을 정규화하려면 network settings에 normalize를 true로만 설정하면 되나요?
예를 들어 Agent 코드에서 CollectObservation 메소드에 차량의 속도를 아래와 같이 정규화하지 않은 속도만 추가하고 paramater에서 normalize를 true로 설정하면 속도가 자동으로 normalize가 되는지 궁금합니다.
public override void CollectObservations(VectorSensor sensor)
{
sensor.AddObservation(car.velocity);
}
감사합니다.
回答 1
1
안녕하세요! 강의가 도움이 되신다니 정말 다행이네요!
아래 링크의 글을 참고해보시면 해당 normalize를 true로 하는 경우 이전에 관측된 값들에 대한 running average를 기반으로 normalize한다고 설명하고 있습니다.
말씀하신 대로 true로 설정하시면 vector observation 입력에 대한 정규화가 수행될 것으로 생각됩니다.
1
정말 빨리 답변 주셔서 감사합니다!
강의가 정말 많은 도움이 되어서, 민규식님은 암흑 속에서 프로젝트를 수행하고 있는 저에게 빛과도 같습니다ㅎㅎ
응용편 강의와 책도 빨리 보고 싶습니다!
설치 프로그램 버전 질문있습니다.
0
74
2
env 환경경로 입력방법
0
78
2
onnx에 대해서
0
110
1
텐서플로우가 안열립니다
0
101
2
DQN을 위한 파라메터값 세팅에서 goal-plus, goal-ex
0
79
1
dqn 인덱스 에러
0
92
3
2025년 pip ml agents 설치 에러
0
215
1
DQN 실행 오류
0
307
2
ML-Agents 살펴보기 11페이지 질문입니다.
0
210
1
배웠던 내용을 기반으로 match3 인공지능으로 플레이 하는 걸 만들고 있는데.. 질문이 있습니다.
0
378
2
3DBall 학습 중 문제
0
218
1
mlagents-learn --hlep
0
236
1
DQN 환경 학습
0
366
3
DQN 함수를 어디에다 만들고 실행하나요??>?>
0
335
1
갑자기 Template>Scripts 폴더는 어디에서 만들어졌는지...
0
280
2
mlagents-learn 에러 수정 방법을 문의드립니다.
0
643
3
Pyuthon API 적용
0
701
7
GridWorld, CollectObservations에서 에러 질문입니다.
0
641
1
yaml을 이용한 GAIL 및 BC를 mlagents-learn으로 실행 시 에러
0
456
1
GridWorld, 유니티에서 실행하면 observation 관련 에러가 뜹니다.
0
489
2
GridWorld 가 작동은 잘 되는데, score가 너무 낮게 나와요.
0
568
3
GridWorld가 움직이지 않고, time out 으로 중지됩니다.
0
483
2
싱글에이전트 코드를 멀티에이전트 코드로 수정 관련
0
408
2
Start와 awake 함수의 차이점이 궁금합니다.
0
636
1