원숭이 투자자에 대한 의문탐구

안녕하세요?

모두들 설날을 잘 보내고 계신가요? 저는 지난번 포스팅에서 언급한 대로 원숭이 투자자를 작동시키기는 시켰는데, 이게 무언가 패턴이 나오는 문제가 있어서 이를 한번 해결해 보고자 다양한 시도를 하였습니다. 그리고 이번 포스팅에서는 그 시도한 내용을 올리고자 합니다.

혹시나 위 스크린샷처럼 행동이 매수/매도만 있어서 이런게 아닌가 싶어서, 한번 관망을 집어넣기 위해서 +1이라는 것을 집어 넣도록 해 보았습니다.

그리고 나서 한번 6번의 원숭이 투자자를 돌려 보았습니다만, 그 결과가 그렇게 시원치는 않았습니다. 일단 나왔는 결과를 두고서 이야기를 하자면, 이 역시 2종류의 패턴을 만들어 내고 있습니다.

그래서 이번에는 한번 그래픽적인 것으로 나타낸 결과를 보도록 합니다. 여기서도 일단 원숭이 투자자(MT)를 4번 했는데, 한번만 빼고는 모두 같은 것을 볼 수 있습니다.

그나마 도 5번과 7번 원숭이 투자자가 4번 원숭이 투자자(MT)와 같은 패턴을 보이고 있다는 것을 볼 수 있었습니다. 이래서야 무작위성이 가장 큰 무기인 원숭이 투자자가 무슨 소용이 있을까 합니다.

그래서 한번 일봉차트에서도 이런 경향이 나오는 것인가 싶어서, 다시한번 pytrader를 실행시킨 다음에, 이번에는 AJ렌터카의 일봉차트를 가지고 오도록 합니다.

그리고 나서 RLTrader를 실행시킨 다음에, 위 스크린샷처럼 한번 원숭이 투자자(MT)를 가동시키도록 준비를 해서, 한번 작동시켜 보도록 합니다.

일단 이 일봉차트마져도 원숭이 투자자 가운데 3개가 같은 패턴을 보여주고 있다는 것을 볼 수 있습니다. 즉, 이제까지 제가 일봉차트에 대해서 시행을 하였는 원숭이 투자자가 제대로 된 원숭이 투자자가 아니라는 것을 말해주고 있습니다.

심지어 10번을 실행시켰는데, 이 마저도 위 스크린샷처럼 어떻게 해서 패턴이 다시 반복이 되는 것을 확실하게 확인을 할 수 있었습니다.

일단 결과를 한번 비교해 보고자 합니다. 위 스크린샷에서 빨간색 글짜로 처리가 된 원숭이 투자자(MT)1번과 3번은 확실하게 무언가 패턴이 나왔는 것으로 의심이 되는 경우입니다.

다음으로 원숭이 투자자 중에서 5번이 패턴을 같이 보여준 것으로 의심이 되어서 일단 빨간색으로 처리를 하였습니다. 이번에는 운이 좋게도 나머지 3개의 원숭이 투자자는 그렇게 같은 패턴을 보여주지는 않았습니다.

마지막으로 9번 원숭이 투자자(MT)의 경우에는 위 스크린샷처럼 같은 패턴을 보여주었는데, PV의 그래프를 제외하면 일단은 같은 패턴은 아닌듯 처음에는 생각하였습니다.

문제는 바로 위 스크린샷이 강화학습 결과를 시각적으로 보여주는 그래프인데, 위에서 3번째 그래프는 바로 행동을 결정한 확률입니다. 만일 빨간색 점이 파란색 점 위에 있으면 매수, 반대로 파란색 점이 빨간색점 위에 있으면 매도를 했는데, 이렇게 보면 모두 매수라는 같은 행동을 결정했다는 것을 볼 수 있습니다. 그래서 이렇게 해서야 어디가 원숭이 투자자며, 이것이 어떤 영향을 미친것이 아닌가 하는 생각이 듭니다.