見出し画像

2021年2月、A級botter達成しました！(月次約170万)

j26

達成したこと

深層強化学習 bot による bitFlyer での自動取引で月次約 170 万円を達成しました。先月は初のB級達成を報告しましたが、今月はランクアップしてA級を無事達成できました。

画像1

botのアプローチ、特に深層強化学習について

基礎的なアプローチや勝てるようになった契機などについては先月の記事に書いてあるのでそちらを是非。先月と今月でやってることはほぼ変わってないです。

今月は、「なぜ深層強化学習で取り組むようになったか」「深層強化学習はおすすめなのか」みたいなことを書こうかなぁと思いましたが、ちょうど少し前にまさにそういう内容をツイートしたのを思い出したので、とりあえず貼っときます。

加えて言うと、高頻度取引では API 制限が大きな制約になる、というのも強化学習の強みになると思ってます。API 制限が制約になってこないような時間軸では、複数の戦略をポジション合成などで組み合わせることも容易です。一方、API 制限がキツい高頻度取引では、いくつもの戦略を並行して動かすのは難しい。そうなってくると、色々な戦略で見るような指標を全て特徴量として入れ、それらの良いとこ取りをする強化学習 bot を作り、そこに API 制限ギリギリまで使わせる、というのが有利になってくると思ってます。

結局、深層強化学習はあまり全力でオススメできるものではないと思ってます。多くの人はそれ無しで勝てると思いますし、多くの人には深層強化学習を学んだり試行錯誤したりするより指標の探索に時間を使ったほうが収益に繋がると思います。

一方で、私は機械学習に関する知識経験が少し有る状態で参入しており、この辺の調査や試行錯誤は全く苦にならず非常にスムーズに行えると自負しています。そのような人間の場合、自動取引に対して深層強化学習を使うというのは、むしろ最も素直なアプローチですらあると個人的には思ってます。

今後について①：高頻度

次の目標は当然 S 級……いやいや、流石にちょっとキツいっす。まずは、月次 300 あたりを目標にしたいと思います。

ただ、3 月は月次ではなく、試行錯誤を優先しようと思います。やや工数がかかるがいずれは取り入れたい機構などいくつか考えており、その辺の試行錯誤を優先しようと思います。

あとは横展開ですよね。GMO でも勝てそうな気はしてるので、そのうち GMO にも展開したいです。ただ、横展開もなんやかんや工数もかかるので、bitFlyer で露骨に伸びしろを感じる間はまだまだ bitFlyer で強くして、最終的に横展開しようと思います。

今後について②：日足スイング

2月は日足のスイングの研究開発もしていました。日足スイングは取り組んでいる方が多く、毎日皆さんのポジションの情報が Twitter で流れてきて、自分と見比べたりできて楽しいです。

スイングは流石に普通に教師あり学習で良いかな、と最初は思ってたのですが、気がついたら強化学習してました。

スイングの強化学習は、高頻度とは全然違うモチベーションで強化学習を使っています。この辺の話もまたそのうち詳しくできればと思います。



いいなと思ったら応援しよう！