다신한번 시도하는 강화학습 모델 8개의 도전

안녕하세요?

지난번에 TPU를 이용해서 구글 코랩에서 강화학습을 진행한 이래, 한번 더 모델을 8개 만들고 나서, 이 모델들이 얼마나 수익을 올릴 수 있을지에 대해서 한번 백테스트를 하는 과정을 거쳤습니다.

일단 하루종일 작업을 해서 강화학습의 모델을 8개 얻는데는 성공했습니다.

강화학습으로 찾은 1번째 모델의 결과입니다.

2번째 모델인데, 이 역시 지난번과 별 차이가 없다는 생각이 듭니다.

다음으로는 위 스크린샷과 같이, 3번째 모델까지 작업을 하였습니다.

다음으로는 4번째 모델을 가지고 오는 데 성공했습니다. 그런데 학습과정은 그렇게 차이가 있는지 의문이 들었습니다.

그리고 나서 5번째 학습한 결과입니다.

그 다음으로는 6번째 모델을 학습한 결과입니다.

하루종일이 걸린 것이 맞는지 7번째 모델을 얻을 즈음해서는 거의 새벽 4시경에 시작한 작업이 오후 3시를 넘어가고 있었습니다.

오후 늦게가 되어서야 완성이 된 8번째 강화학습의 결과입니다. 이 결과에서도 큰 차이는 없어 보입니다.

하지만 지난번과 같이 강화학습을 하면 좀 나은 결과가 되리라 생각을 하고서 한번 작업에 들어가 보도록 합니다.

일단 백테스트의 결과입니다. 여기서 의미가 있으리라 생각되는 것은 지난번 원숭이 투자자의 결과로 미루어 볼때 모델 2번과 4번이 아닌가 하는 생각이 듭니다. 각각 59.7%와 64.1%의 수익을 거두었습니다.

다음으로는 특이할 만한 것이 5번째 모델의 경우에는 153.3%라는 엄청난 수익률을 거두고 있는 것을 볼 수 있습니다. 이렇게 하는 것으로 어떻게 행동을 하는데, 8개 시도를 해서 약 3개 정도..... 아니 모델 8번까지 포함해서 4개 정도 의미가 있으리라 생각이 되는 모델을 건질 수 있었다는 생각이 듭니다.