inflearn logo
강의

Course

Instructor

Mastering Unity Machine Learning Agents (Application Edition)

Curriculum Learning (mlagents-learn, python-API)

PPO 알고리즘을 ml-agents learn 명령어로 학습 및 추론할때 메소드 호출 순서 질문

Resolved

374

yji112

9 asked

0

안녕하세요!

먼저 기초편에 이어서 응용편 강의를 공개해주셔서 정말 감사합니다!!

 

해당 강의를 들으면서 PPO 알고리즘을 ml-agents learn 명령어로 학습 할 때와 추론할 때 메소드 호출 순서에 대해서 궁금합니다.

이 내용이 궁금한 이유는 각 학습 또는 추론 과정에서 각 메소드별로 연산 시간을 측정하기 위해서 입니다.

 

관련 자료를 어디서 확인할 수 있을까요?

 

감사합니다!

unity 강화학습 unity-ml-agents

Answer 1

0

kyushik

안녕하세요!

메소드 호출 순서에 대해서는 저도 직접 확인해보지는 못했습니다! ㅜㅜ

mlagents-learn PPO 관련 코드는 github에서는 다음의 내용과 관련된 것으로 알고 있습니다!

https://github.com/Unity-Technologies/ml-agents/blob/develop/ml-agents/mlagents/trainers/ppo/trainer.py

 

컴퓨터를 껐다가 클로드 코드 다시 키는 방법 알려주세요.

0

6

0

MA-POCA 알고리즘 응용 질문

0

11

1

Pivot을 마우스로 클릭하고 드래그해도 움직이 않아서 혹시 아시는 부분이 있나 해서 문의 남깁니다.

0

15

1

카메라가 많아지면 렌더링 비용이 커지나요?

0

28

1

3:56에 폰트 불러온 과정이 궁금합니다 ㅠㅠ

0

40

3

Spider와 Monster 구현 방식을 구분한 이유

1

25

1

Sprute Sheet에 대해서.

0

34

1

ResourceManager 클래스 관련 질문

1

43

2

FBX chan 모델

0

28

1

첨부된 수업자료와 강의 내용이 다릅니다.

0

67

2

몬스터 HP 게이지바 이동

0

24

1

TextMeshPro용 커스텀 한글 2350자.txt 파일은 어디에 있나요?

0

34

1

02-02 NavMesh 응용 캐릭터 멈춤 문제

0

36

1

02-02 NavMesh 응용 캐릭터 멈춤 문제

0

50

2

C#에서의 RAII

0

74

3

Scene 뷰에서 Enemy Entity가 보이지 않는 문제

0

51

2

Lessons 3 & 4 don't have subtitles unfortunately

0

40

1

aws deep racer 이제 못하는건가요?

0

52

2

클로드코드 + 유니티 컨텐츠만들기 응용에 대하여 질문드립니다.

0

83

1

매니저 관련 질문이 있습니다.

0

76

2

Instantiate

0

57

2

닷지 ckpt 모델 파일을 onnx변환 후 unity에서 추론

0

172

2

(PPO 실습 2) total_loss 구하는 코드에서 action entropy 는 어떻게 계산된 것인지 궁금합니다.

0

356

1

예제 파일 실행 오류

0

304

1