inflearn logo
강의

Course

Instructor

Mastering Unity Machine Learning Agents (Application Edition)

Curriculum Learning (mlagents-learn, python-API)

PPO 알고리즘을 ml-agents learn 명령어로 학습 및 추론할때 메소드 호출 순서 질문

Resolved

367

yji112

9 asked

0

안녕하세요!

먼저 기초편에 이어서 응용편 강의를 공개해주셔서 정말 감사합니다!!

 

해당 강의를 들으면서 PPO 알고리즘을 ml-agents learn 명령어로 학습 할 때와 추론할 때 메소드 호출 순서에 대해서 궁금합니다.

이 내용이 궁금한 이유는 각 학습 또는 추론 과정에서 각 메소드별로 연산 시간을 측정하기 위해서 입니다.

 

관련 자료를 어디서 확인할 수 있을까요?

 

감사합니다!

unity 강화학습 unity-ml-agents

Answer 1

0

kyushik

안녕하세요!

메소드 호출 순서에 대해서는 저도 직접 확인해보지는 못했습니다! ㅜㅜ

mlagents-learn PPO 관련 코드는 github에서는 다음의 내용과 관련된 것으로 알고 있습니다!

https://github.com/Unity-Technologies/ml-agents/blob/develop/ml-agents/mlagents/trainers/ppo/trainer.py

 

aws deep racer 이제 못하는건가요?

0

5

2

클로드코드 + 유니티 컨텐츠만들기 응용에 대하여 질문드립니다.

0

16

1

매니저 관련 질문이 있습니다.

0

27

2

Instantiate

0

25

1

유니티 허브 다운로드

1

33

2

비쥬얼 스튜디오에서 unity연결이 없습니다.

0

50

2

UserDataManager 클래스 hasSaveError 처리

0

32

2

제공해주신 자료에 스크립트들이 빠져있습니다

0

27

2

플레이어를 왜 ECS로 만드는 건가요?

0

33

1

싱글턴패턴

0

32

2

코드 관련 질문

0

32

2

섹션7 수업자료 업로드 부탁드립니다.

0

38

2

소리가 겹쳐서 들려요

0

33

2

Dictionary Key를 int에서 string으로 변경한 이유에 대한 문의

0

25

1

UI 기능 관련 질문이 있습니다!

0

50

2

03-01 (16. CharacterController)

0

39

2

TLS 질문드립니다.

0

57

2

Task 구현 28:36 Equals 에서 잘 모르는 부분이 있습니다.

0

34

2

SpinLock과 컨텍스트스위칭에 대해 질문 남겨요.

0

57

2

전 강의와 전혀 이어지지가 않음

0

36

1

pytorch local 설치 옵션에 conda 가 없습니다.

0

43

3

닷지 ckpt 모델 파일을 onnx변환 후 unity에서 추론

0

153

2

(PPO 실습 2) total_loss 구하는 코드에서 action entropy 는 어떻게 계산된 것인지 궁금합니다.

0

340

1

예제 파일 실행 오류

0

292

1