본문 바로가기

인공지능59

수익모델을 또 찾기 위한 여정-7- 안녕하세요? 지난번 포스팅에서는 만족스러운 수익모델이 전혀 발견이 되지 않았습니다만, 그래도 계속해서 수익모델을 찾고자 하는 시도는 계속했었고, 이번 포스팅에서는 수익 모델이 하나 나왔습니다. 이번에는 학습이 일어나는 과정에서 시작하는 무작위 행동의 비율을 100%로 지정을 해주는 것으로 해서, 한번 강화학습에 들어가 보고자 합니다. 역시나 예상대로 초반 행동의 결과에서는 정말로 완전히 노란색이 되어서 전혀 인공지능이 행동을 하지 않은 것을 볼 수 있었습니다. 다만 1000에포크에 이르러서는 전혀 랜덤한 행동이 없는 것을 볼 수 있었습니다. 그리고 마지막 1000에포크에 이르러서는 수익을 크게 올리는 것을 볼 수 있었습니다. 다음으로는 방금 만들어진 모델을 가지고서 한번 투자 시뮬레이션에 들어가 보고자 .. 2018. 11. 11.
수익모델을 또 찾기 위한 여정-6- 안녕하세요? 이래저래 뭐랄까 제대로 수익모델이 잘 안나오고 있다는 생각이 듭니다만, 이건 이것이고, 새로운 수익 모델은 계속해서 찾아야 할 필요성이 있기는 있으니, 그래도 어떻게 해서 한번 찾는 여정에 들어가 보고자 합니다. 학습을 하는 조건에서 15%로 지연보상 임계치를 설정해 보도록 합니다. 다만 여기서는 즉시보상을 얻으면 그대로 상점 2를 얻고, 즉시 손해를 보면 -3이라는 벌점을 주도록 합니다. 일단 이 경우에는 어떻게 된 것인지 에포크가 10일때 보다 200일때 PV가 작아지는 것을 볼 수 있습니다. 그래도 어떻게 1000에포크가 되면서 제대로 수익을 내는 것을 볼 수 있습니다. 각 10, 200, 600, 1000 에포크간의 학습 결과를 요약한 로그입니다. 방금 생성된 모델을 가지고서 한번 투.. 2018. 11. 11.
수익모델을 또 찾기 위한 여정-5- 안녕하세요? 다시 한번 더 수익모델을 찾기 위해서 또 다른 조건을 바꾸어서 한번 기계학습을 시키고, 여기서 만들어진 모델을 바탕으로 한번 투자 시뮬레이션을 해서 제대로 수익이 나오는 지를 살펴 보고자 합니다. 이전에는 지연보상 임계치를 15%로 동일하지만, 지연보상 규칙에서 그냥 있을 경우 0으로 바꾸어서 다시한번 이 보상규칙을 바꾸어서 강화학습에 들어가 보도록 합니다. 일단 에포크가 초반인데, 더 진행이 되면 될 수록 PV가 증가하는 것을 볼 수 있었습니다. 그리고 나서 600에포크에서 그냥 손해를 있는대로 보기는 했지만, 1000에포크에서 더 많은 수익을 내는 것을 볼 수 있었습니다. 그리고 나서 10, 200, 600, 1000에포크에서 나오는 값을 각각 요약한 요약본입니다. 그리고 나서 방금 만들.. 2018. 11. 10.
수익모델의 투자금 스케일(scale)이 커질 경우 수익을 알아보기 안녕하세요? 지난번 포스팅에서 언급한 것과 같이, 42.9%의 수익을 내어주는 모델이 10만원의 투자금으로 투자했을 때를 기준으로 기계학습과 투자 시뮬레이션을 했는데, 투자금을 10배씩 늘려서 투자할 경우, 여기서도 제대로 수익이 나올 수 있는지에 대해서 한번 알아 보고자 합니다. 지난번에 42.9%의 수익률을 낸 모델을 다시 그 위치로 보내도록 합니다. 그리고 투자금을 100만원으로 10배 올리고, 최대 거래 단위를 100으로 올리도록 합니다. 일단 10배 올렸으니,43.9%의 수익률이 나오는 것을 볼 수 있었습니다. 오히려 1% 더 수익률이 더 늘린 것을 볼 수 있었습니다. 이 결과는 놀랍다는 생각이 듭니다. 이번에는 1000만원으로 투자금을 늘리고, 최대 투자 유닛도 1000으로 올려서 한번 시뮬레.. 2018. 11. 10.

티스토리툴바