メインコンテンツへスキップ
見出し画像

そのバックテストは、今日の終値を知っていた【第1話】

——知識ゼロの人間が、AIとシステムトレードを作った失敗の記録

※本文は最終章まで全部無料で読めます。有料なのは末尾のおまけ(約900字)だけです。
※本記事は投資助言・売買サインの提供を目的としません。特定の売買条件・銘柄・数値の推奨は含まれず、登場する成績数値はすべて失敗と検証崩壊の文脈で引用されています。


第一部 完璧なバックテスト

最初に、この記録でいちばん恥ずかしい話をしてしまう。

私のバックテスト——過去の株価データで売買ルールの成績を測るシミュレーション——は、ある時期、20年で資産が2億円を超えるという結果を出していた。

プログラミング未経験の私が、AIに書かせたプログラムで、だ。

あの夜の高揚は今でも思い出せる。ついにやった、と思った。

種明かしをすると、あのシステムは、未来を見ていた。

あとから見れば、それは完璧なバックテストだった。
完璧に過去を知っていて、完璧に都合のいい銘柄を選び、完璧に勝てるタイミングを拾っていた。だから勝てた。
現実の市場で再現できるからではなく、過去の答えを見ながら解いていたからだ。

売買を判断するその瞬間には、本来まだ知りえないはずの「その日の終値」を、プログラムがこっそり参照していた。
過去データの上では、終値は最初からファイルに書いてある。
だからプログラムは読めてしまう。読めてしまえば、勝ててしまう。

勝っていたのはロジックではなく、未来情報だった。

AIが悪意を持って仕込んだわけではない。私が指示したわけでもない。
ただ、誰も確かめなかった。
AIは確かめろと言われていないことを確かめないし、私は「AIが書いたのだから合っているだろう」と思っていた。
責任の所在をあえて言うなら、検証済みだと思い込んでいた私にある。

この第一部は、そこに至るまでの話だ。
拙い文章かもしれないが、できるだけ正直に書いていく。

何も分からないまま、分かった気になっていた

今思えば、最初の私は「システムトレード」という言葉の中身すら、よく分かっていなかった。

ルールを決めて、過去の株価に当てはめて、儲かるかどうかを見る。大ざっぱにはその程度の理解だった。だが、その裏側にどれだけの前提が積み上がっているのかは知らなかった。

いつの価格で判断するのか。
その時点で、その銘柄は本当に存在していたのか。
売買できるだけの出来高はあったのか。
手数料は入っているのか。
同じ銘柄を何度も買っていないか。
一度損切りした銘柄に、その日のうちにまた突っ込んでいないか。

こうして並べれば当たり前に見える。だが当時の私にとっては、どれも「言われて初めて気づくこと」だった。

私はロジックのことばかり考えていた。
どの条件で買えばいいか。
どのタイミングで売ればいいか。
何を足せば利益が伸びるか。
頭の中では、戦略が主役だった。けれど、本当は違った。

システムトレードで最初に必要なのは、強いルールではなかった。
そのルールが、未来を見ていないかを疑う目だった。

この目を持たないまま、私はAIと一緒に走り出した。しかも、かなり楽しそうに。

夜ごとの憲法

始まりは、無料のAIとの雑談だった。

私はプログラミングができない。今もできない。
それでも、AIがコードを書いてくれるなら、私は考えるだけでいいのではないか——そう思って、毎晩AIと話した。

思いつきを投げる。AIが整える。私がまた足す。
すると、ただの妄想だったものに名前がつき、条件がつき、役割がつく。

昨日まで曖昧だったものが、今日は「第何条」として並んでいる。
その変化が面白かった。

売買ルール、資金管理の考え方、システム全体の思想。私はそれらを「憲法」と呼んで、会話の中で条文を育てていった。

話せば話すほど、頭の中の霧が晴れていく感覚があった。
システムの骨格が、会話の中で勝手に育っていく。本気でそう思っていた。

一つの戦略では飽き足らず、部隊名をつけたのもこの頃だ。
今見返すと少し恥ずかしい。だが、あの頃の私には必要だった。

名前をつけることで、ただの売買条件が、役割を持った存在に見えた。

短く突っ込む部隊。静かに待つ部隊。相場の変化を探す部隊。
中身はまだ未熟なのに、名前だけは妙に勇ましかった。

問題は、名前をつけることと、実際に機能することはまったく別だということだった。

ある日、数週間前に固めたはずの重要なルールについて聞いたら、AIは初耳のような顔をした。

AIには、会話を覚えていられる量に限りがある。古い話から順に忘れていく。
私が「育てていた」つもりの憲法は、会話の底に沈んで消えていた。

私は過去ログを一晩かけて掘り返し、沈んだ条文を一つずつサルベージした。
このとき初めて知った。「AIに預ける」と「自分で持っている」は、別物だと。

以来、決まったことはその場でファイルに書き残すようになった。
この地味な規律が、のちにシステム全体を支える背骨になる。

だがそれはずっと先の話で、当時の私はまだ、もっと手前で転び続けていた。

データで転ぶ

システムトレードは、ロジック以前に「データ」で転ぶ。誰も教えてくれなかったが、本当だ。

データを集めればバックテストができる。そう思っていた。

だが実際には、データには種類があった。

銘柄一覧なのか。
日々の株価なのか。
出来高まで入っているのか。
上場廃止になった銘柄は残っているのか。
そもそも無料で手に入るのか。

私にとっては全部「株のデータ」だったが、プログラムにとってはまるで別物だった。

銘柄名と証券コードだけが並んだファイルを見たとき、私はしばらく画面を眺めていた。これで何をしろというのか。買った日も、売った日も、価格もない。
地図だけ渡されて、道路が一本も描かれていないようなものだった。

それでも当時の私は、データの欠けよりもロジックのほうを気にしていた。
どんな条件で買うか。どこで売るか。そんなことばかり考えていた。

「データの中身を確認する」という工程が存在すること自体、私は知らなかった。
取ってくることがゴールだと思っていた。
実際には、取得は入口ですらない。中身を疑い、欠けを数え、変な値を探す。
そこからが本体だった。

だが、後になって分かる。

システムトレードで最初に疑うべきなのは、ロジックではなく、ロジックが食べているデータのほうだった。

20年で2倍

やっと動いた最初のバックテストの結果は、20年回して資産2倍。

正直、萎えた。銀行預金よりはマシ、という程度の数字を見るために、私は何週間も費やしたのか。

ここで撤退していれば、話は短く済んだ。だが私は「もっと良くできるはずだ」と思ってしまった。

あとから振り返ると、この落胆こそが中毒の入口だった。そして皮肉なことに、あのつつましい数字は、まだ何も不正をしていない健全なシステムの数字でもあった。それを知るのは、ずっと後だ。

ただ、今なら分かる。

20年で2倍という結果は、夢はなかったが、少なくとも現実の匂いはあった。
負ける年もある。伸びない期間もある。手数料を入れればさらに削られる。面白くはない。だが、そのつまらなさの中に、まだ健全さが残っていた。

私はそれを退屈だと思った。

退屈な結果を前にした初心者は、危ない。
なぜなら、退屈を改善と呼んで壊し始めるからだ。私はまさにそうした。

もっと鋭くできる。もっと損を避けられる。もっと良い銘柄だけを選べる。

そう思って、条件を足し始めた。この時点で、私はまだ知らなかった。

バックテストは、条件を足せばだいたい良くなる。少なくとも、過去に対しては。

数字に酔う

改善は簡単だった。少なくとも、簡単に見えた。

条件を一つ足す。数字を少し変える。バックテストを回す。成績が上がる。また変える。また上がる。ゲームの攻略に似た中毒性があった。

数字は面白いように伸びていき、私は毎晩、昨日の自分の記録を更新していった。

数千銘柄・十数年分の重いバックテストを、私は平気で回していた。
検証は長ければ長いほど偉いと思っていた。

「もっと良くできないかな」と私はAIに打ち込む。

「可能です。いくつかの改善案があります」

AIはいつでも即答する。迷わない。
その迷いのなさを、当時の私は頼もしさだと思っていた。

今なら分かる。あれは頼もしさではなく、ただの仕様だ。
AIは自信がないときも、自信がある文体で書く。

振り返れば、この時期の私は一度もこう聞かなかった。

「この改善は、なぜ効くのか」
「この数字は、本当に信じていいのか」

聞いていたのは「もっと良くする方法」だけだった。AIは聞かれたことに答える。疑ってくれとは頼まれていないから、疑わない。

疑う係は最初から一人しかいなかったのに、その一人が数字に酔っていた。

待っている時間まで、努力に見えた

バックテストは、いつもすぐ終わるわけではなかった。

対象銘柄を増やせば増やすほど、期間を長くすればするほど、処理は重くなる。最初の私は、それをあまり深く考えていなかった。

たくさんの銘柄を調べたほうが正しい。
長い期間で検証したほうが偉い。

そう思っていた。

だから、動作確認の段階でも平気で長期間を回した。

本来なら、まず一年でいい。あるいは三年でいい。
そこでプログラムが想定通りに動くか、売買の記録が変ではないか、日付がずれていないか、値が欠けていないかを見るべきだった。

だが当時の私は、いきなり長い期間を走らせた。

画面の前で待つ。
ログが流れる。
ファンが回る。
何時間も経つ。
ようやく結果が出る。

その待ち時間すら、私は努力だと思っていた。長く待ったのだから、ちゃんと検証した気になっていた。

だが、あとから分かる。長く回すことと、正しく見ることはまったく別だ。

間違った前提のまま十五年回せば、十五年分の間違いが積み上がるだけだ。

この単純なことに気づくまで、私はずいぶん遠回りをした。

2億円の夜

そしてあの夜が来る。

画面に表示された最終資産、2億円超。

一晩、酔った。届いたと思った。プログラミングもできない自分が、AIと二人で、ここまで来たのだと。自分は天才なのかもしれないと。

酔いが醒めていく過程は、二日酔いに似て緩慢で、不快だった。きっかけは些細な違和感だ。

成績が良すぎる。
どの期間でみても負けない。
そんな戦略が、この世にあるだろうか。

点検を始めると、幻の正体が次々に出てきた。

一つ目は、未来参照。
売買判断の時点で、当日の終値を見ていた。

二つ目は、銘柄の狙い撃ち。
特定の銘柄名がコードに直接書き込まれ、過去にたまたま上がった銘柄だけを拾っていた。

三つ目は、揺れる数字。
ランダム関数で結果が変わり、同じ検証をしているはずなのに、実行するたびに違う未来が出てきた。

どれも、AIとの長い改善ごっこのどこかで、静かに紛れ込んだものだった。

壊れたのはシステムではなかった。
「検証できている」という、私の思い込みのほうだった。

心は音もなく折れた。

ただ、折れた場所から一つだけ拾えたものがある。良い結果ほど疑う、という反射だ。
この反射は、この後の開発のすべての場面で私を守ることになる。

立て直しの失敗、それから

立て直しには、より賢い有料のAIを使おうとした。

無料だからすぐ忘れるのだ。ならばもっと性能の高いAIを使えば良い。
当時の私は、そう考えた。

性能への期待は、およそ30分で終わった。利用制限に当たったのだ。

忘れまいと書き溜めた資料は膨れ上がり、トークン、つまり会話の容量を貪っていた。続きを相談しようとしたところで、数時間は使えない、と画面が言う。

このとき学んだことは、性能の話ではない。

AIとの開発は「賢さ」ではなく「続けられるか」で決まる、ということだ。どんなに賢い相棒でも、話の途中でいなくなるなら、開発の相棒にはなれない。

この学びを胸に、私は体制を組み直すことにした。ここから先が、第二部だ。


第二部 AIに役割を与えるまで、チームは存在しない

心が折れたあと、私は開発体制を組み直すことにした。

一つの結論があった。AIは一人に全部を任せてはいけない、ということだ。

設計を考えるAIが、自分でコードを書き、自分でそのコードを採点する。これは、答案を書いた本人が採点も担当する試験のようなもので、うまくいっているように見えて、どこも検証されていない。

第一部の失敗の何割かは、この構造から来ていた。

新しい体制では、役割を分けた。

設計は設計役に任せる。実装は実装役に任せる。レビューは別の目に任せる。役割さえ分ければ、第一部のような自己採点の罠から抜けられるはずだと思った。

だが実際には、役割を分けるだけでは足りなかった。

AIは、放っておくと境界をまたぐ。設計の話をしているのに、途中で「では実装します」と言い出す。実装を頼んだだけなのに、「より良くするために仕様を調整しました」と返してくる。

しかも、それが悪意ではない。むしろ親切のつもりでやっている。

この「親切」が怖かった。

人間なら、頼んでいないことを勝手にしたら怒られる。だがAIは、怒られるまで境界が分からない。だから、こちらが境界を言葉にしなければならなかった。

全体の設計と方針を練るAI。
実際に手を動かしてコードを書くAI。
そして、書かれたものを疑う目。

人間の私は、そのどれでもない場所に立つ。仕様を決め、前提を疑い、AI同士の言い分が食い違ったときに裁定する係だ。

だから明文化した。

おまえの役割はこれ。
触っていい範囲はここまで。
これとこれは何があっても禁止。

まるで就業規則だ。書きながら、自分は何をやっているのだろうと思った。だが効いた。
範囲を区切り、禁止事項を書面にして、ようやくチームらしくなっていった。

記憶ではなく、状態を見る

新しい体制で最初に決めたのは、AIの記憶を信用しないことだった。

これは、AIを疑って使うというより、AIにも人間にも同じルールを課すという意味に近い。

私も忘れる。AIも忘れる。会話の中では、どちらも都合よく覚えている気になる。

私はあるとき、AIに向かって正直にこう宣言した。

「俺は覚えられてない」

開き直りではない。分担の宣言だ。人間は覚えない。ファイルが覚える。AIは毎回ファイルを読む。そう決めてから、作業の最初に必ず現在地を確認するようになった。

今どのファイルを見ているのか。
最後に何を変更したのか。
保存されている差分はあるのか。
前回の約束は、会話ではなくファイルに残っているのか。

それまでは、AIとの会話がそのまま開発の現場だった。だが、そこから少しずつ変わっていった。会話は下書き。ファイルが正本。履歴が証拠。そう決めないと、また同じ場所で沈む。

この頃から、作業前の確認は儀式のようになった。HEADを確認する。git statusを見る。差分を見る。変更する前に、いま立っている場所を確かめる。

地味だった。かなり地味だった。

だが、第一部で失ったものは、ほとんどこの地味さが足りなかったせいで失ったものだった。

決まったことはファイルに書く。ファイルが正本で、会話は下書き。AIには要約を信じさせず、毎回正本を読ませる。人間の私も、記憶ではなくファイルを見る。

かつて会話の底に沈んで消えた「憲法」は、今度はリポジトリ(変更の履歴ごと保存される、プログラム開発用の保管庫)の中に、履歴つきで存在するようになった。

作れすぎる、という恐怖

新しい体制にして最初に驚いたのは、安心感ではなく、速度だった。

AIがファイルを読み、差分を確認し、修正し、テストし、報告する。私が一つ理解する間に、次の変更が積まれていく。

以前は「AIが忘れること」が怖かった。
今度は「AIが進みすぎること」が怖くなった。

AIは速い。人間の何十倍もの速さでコードを量産する。

だが検証する側の私は、人間の速度でしか動けない。しかもド素人だ。コードもろくに読めない。作る速度と疑う速度の差が開いた分だけ、未検証のコードが溜まっていく。

速いことは、正しいことではない。

この当たり前の言葉を、私は何度も忘れた。作業が進むと安心する。コミットが増えると前に進んでいる気がする。

だが、その一つひとつが何を変えたのか、自分が理解していなければ、進捗ではなく借金になる。あとから読むべき差分、あとから確認すべき前提、あとから潰すべき不安が積み上がっていく。

AI時代の個人開発で一番危ないのは、作れないことではない。作れすぎることだ。

検証されていないコードは、爆発していないだけの在庫だ。

第二部の終わりに、私の仕事の定義は書き換わっていた。人間の仕事はコードを書くことではなかった。前提を疑うことと、どこで止まるかを決めることだった。


第三部 答えを聞くのを、やめた

AIとの付き合い方が変わった瞬間を、一つ挙げろと言われたら、これだ。

「この結果は信用できる?」と聞くのをやめて、「この結果を疑うための検証手順を作って」と頼むようになったこと。

前者への答えは、いつも似ている。

もっともらしい理由が並び、最後は「概ね信頼できると考えられます」で締まる。AIは聞かれた方向に、滑らかに答える。信用できるかと聞けば、信用できる理由を探してくる。

それがAIという道具の性質で、良いも悪いもない。

後者は違う。

検証手順を作らせると、AIは急に具体的になる。この数値とこの数値を突き合わせろ。この日付の取引を抜き出して目で確かめろ。この条件を一つ外して、結果がどれだけ変わるか見ろ。

手順は嘘をつきにくい。

手順に従って手を動かすのは私で、結果の数字は私の目の前に出る。AIの「たぶん大丈夫です」と、自分の目で見た突き合わせ結果とでは、重さがまるで違った。

付き合い方を変えると、AIの返事も変わってきた。

期待していた結果が出なかったとき、取り繕わずに「出ませんでした。原因はこうです」と言ってくるようになった。

私はそのとき、こう返したのを覚えている。

「よかった、適当なこと言ってくれなくて」

褒め言葉としては変かもしれない。だが本心だった。

聞き方を変えれば、正直な答えが返ってくる。正直な答えを歓迎すれば、次も正直な答えが返ってくる。道具との関係も、育て方次第らしい。

疑う係を雇う

体制にも、疑う専門の係を足した。

書いたAIとは別のAIに、書かれたものを疑わせる。さらに、どんな改善案にも必ず反対意見を当てる、保守的な査読役も常設した。

私は内心、それを「バフェット役」と呼んでいた。
楽観の隣に、職業的な悲観を置く。

効果は地味で、確実だった。開発速度はほとんど落ちない。事故の数がはっきり減る。

答案を書いた本人が採点する構造を壊しただけで、これだけ変わるのかと思った。

自己採点は、人間でもAIでも、常に甘い。

あとになって、この仕組みには続きができた。

きっかけは、私のふとした一言だ。ある日、疑う係の顔ぶれを見て、こう聞いた。

「同型モデル2つは意味あるのか」

図星だった。疑う係を二人にするとき、同じ種類のAIを二人並べても意味が薄い。同じモデルは同じ盲点を踏む。双子に別々の答案チェックを頼むようなもので、間違え方まで似てしまう。

だから今は、疑う係は別々の種類のAIから選ぶことにしている。さらに、どんな提案にも必ず反対する係を一人、専任で置く。反対のための反対でいい。その反対意見が本当かどうかは、意見ではなくデータで確かめる。

ここまでやるのか、と思うかもしれない。やる。
なぜなら、この態勢が実際にバグを見つけ続けているからだ。それも、賛成役が全員見逃したバグをだ。

改善を捨てた夜

この体制が初めて本領を発揮した事件がある。

自分で考えた、ある戦略の強化係数——詳細は伏せるが——をいじったところ、成績がはっきり良くなった。

昔の私なら即採用だ。数字は上がった。何が不満か。

だが今の体制には手順がある。

良く見えた数値の「近所」を試すのだ。その値の少し上、少し下。さらにその前後。本当に効く改善なら、近所の値でもそこそこ効くはずだ。

一点だけが突出して良く、隣がガタガタなら、それは過去データの形にたまたま填まっただけ——カーブフィッティング(過去データへの過剰最適化)の疑いが濃い。

試した。隣はガタガタだった。

私たちはすぐに、その改善を凍結した。

数字が良くなったものを、自分の意思で捨てる。第一部の私には絶対にできなかったことだ。

あのとき捨てられなかった「改善」の成れの果てが2億円の幻だったのだから、この夜の凍結は、遠回りに見えて、あの夜への返事だった。

カーブフィットの亡霊は、成績が良いときにだけ現れる。だから、成績が良い夜ほど、翌朝の点検が要る。

過去の結果ファイルの棚卸し

疑う目が育つと、過去の自分の遺産も疑わしくなる。

溜め込んだ結果ファイルの山を監査し、正当な検証の系譜と、未来参照バグ入りの系譜に仕分けた。

生き残った銘柄だけでリーグ戦をやっていた問題——上場廃止銘柄がデータから欠けている生存者バイアス——も、このとき正面から向き合った。

完全には除去できない。ならば「この検証には、この限界がある」と明記する。隠さないことにした。

第三部で学んだことを一行にすれば、こうだ。

答えより、手順。
長さと正しさは無関係。
そして、疑う係は速度をほぼ削らずに事故だけを削る、開発で最も割の良い投資である。


第四部 勝つ機能を、作らなくなっていた

この開発でいちばん時間を使ったのがこの時期だが、最初に白状しておくと、作った機能の大半は「勝つための機能」ではない。

並べてみる。

発注の前に注文をせき止めて検査する、門番。
すべての判断と注文を消せない形で記録し続ける、航海日誌。
「買いたい」という意図を、実注文の前に書類として起こす、稟議書のような仕組み。
実弾を使わず、注文の流れだけを再現する、模擬証券会社。
注文の一生を追跡する、台帳。
資金が少ないときに、そもそも現実に買える銘柄だけへ世界を絞り込む、物差し。
売買が薄すぎて実際には約定(売買の成立)しそうにない銘柄を見つける、診断。
そして、どの戦略もそこを通らないと動けないように、ルール全体を一枚に束ねた、憲法のような中核。

どれも、利益を増やす装置ではない。事故を減らす装置だ。

最初からこうだったわけではない。初期の私が欲しかったのは強い売買ロジックで、戦略ごとに部隊名をつけて——短期突撃部隊、長期沈静部隊、順張り加速部隊——今思えば少し照れる呼び方で、強化に熱中していた。

だが失敗を重ねるうちに、優先順位が裏返った。

どんなに強いロジックも、検証が壊れていれば数字ごと幻になる。第一部の2億円がそうだった。ならば先に作るべきは、強い攻撃ではなく、壊れないもの。壊れたときに、壊れたと分かる仕組みのほうだった。

門番と日誌

門番を作ったのは、AIを信用しなくなったからではない。むしろ逆だ。AIが作ったものを、現実に近づけるためだった。

どれだけ立派な売買判断でも、発注の直前には別の問いが必要になる。

この注文は資金に対して大きすぎないか。
同じ銘柄を重複して買っていないか。
今日すでに損切りした銘柄へ、また突っ込もうとしていないか。

シミュレーションの世界では見逃される小さな違和感が、現実ではそのまま事故になる。門番は、その違和感を発注の直前で止めるための仕組みだった。

航海日誌も同じだ。うまくいったときのためではない。むしろ、うまくいかなかったときに必要になる。

なぜその注文を出したのか。
どの条件を通ったのか。
どの門番が許可したのか。

あとから自分を裁判にかけるための記録だった。

作っているうちに、私は少しずつ理解していった。システムに必要なのは、勝った理由を誇る機能ではなく、負けた理由から逃げられない機能だった。

世界を絞るという発見

この時期の発見で、いちばん地味で、いちばん効いたものを一つ挙げる。

「少額の資金では、バックテスト上は買えても、現実には買えない銘柄がある」という当たり前の事実だ。

板が薄い(=売り買いの注文が少なく、買いたくても相手がいない)。値段が張る。シミュレーションの中の私は自由に売買していたが、現実の財布はそうはいかない。

そこで、少額資金フィルターを作った。

重要なのは、これを「戦略」ではなく「制約」として定義し直したことだ。勝てる銘柄を選ぶ道具ではない。身の丈で買える銘柄だけに世界を絞る物差し。勝ち負けはその絞られた世界の中で、戦略が自力で出す。

この切り分けが、のちに大きな意味を持つ。

銘柄リストにも時間の概念を

もう一つ、過去の大失敗の再発防止として、銘柄リストに「時間」を入れた。

20年前の時点の売買をシミュレートするなら、20年前に実在した銘柄だけを候補にしなければならない。

当たり前に聞こえるだろうか。だが初期の私のシステムは、今日のリストで過去を戦わせていた。まだ上場していない銘柄を、過去の市場で買っていたのだ。

未来参照は終値だけの話ではない。銘柄リストそのものも、未来を漏らす。

私は月ごとに更新される「動く出場銘柄リスト」を作り、どの月の判断もその月までの情報だけで行われることを、仕様として固定した。

国になる

気づけば、このシステムは戦略の集まりというより、統治構造に近いものになっていた。

部隊たちの上に憲法があり、門番がいて、すべてが日誌に残り、実弾に触れる行為には事前に文書化された承認が要る。

私が欲しかったのは聖杯だったが、必要だったのは統治OSだった。

「実装した」だけでは、その機能はまだ存在していない。「検証できる形にした」ときに、初めて存在し始める。

第四部の機能群は全部、どれかの失敗から生まれた。だからこの章は、コードの解説ではなく、失敗の解説なのだ。


第五部 良い戦場は、存在しなかった

この開発で、いちばん大きな発見の話をする。

私たちは長いこと、「どの銘柄群で戦うか」を探していた。良い戦場さえ見つかれば、戦略は勝てるはずだと。

大型株がいいのか、小型株がいいのか。値動きの荒い銘柄か、落ち着いた銘柄か。私はAIと一緒に、銘柄群をいくつも切り出しては、成績を測り、順位をつけていた。

ある日、同じ銘柄群に二つの異なる戦略を放り込む比較実験の結果が出揃った。

ある戦略では、どの銘柄群を選んでも全敗した。
別の戦略では、同じ銘柄群たちで全勝した。
しかも銘柄群同士の優劣順位が、戦略を替えると引っくり返った。

つまり「良い戦場」というものは、なかった。

あるのは戦略との相性だけ。戦場の良し悪しを戦略と切り離して語ること自体が、問いとして成立していなかった。数ヶ月それを探していた私たちは、探し物の名前が間違っていたことを知った。

十三ヶ月かけて、ダメだと確定させた

この発見の裏には、一つの戦略の葬式がある。

ある戦略を、十三ヶ月分のデータで検証し、複数の銘柄群で試験した。結論は「どこへ連れて行っても負ける」だった。

がっかりした、と書きたいところだが、実際の感想は少し違う。

ダメなものをダメと確定させる作業は、勝てるものを探す作業より、ずっと時間がかかる。一度や二度負けただけでは確定しない。たまたまかもしれないからだ。銘柄群を替え、期間を替え、条件を固定したまま、負けが構造なのか偶然なのかを切り分けていく。

そこまでやって初めて、「この戦略は捨てる」と言える。

第一部の私は、この作業を一度もしたことがなかった。負けた戦略は黙って条件をいじり、勝つまでいじり、勝ったら採用していた。それがカーブフィッティングの正体だ。

葬式は、ちゃんと出すと高くつく。だが、出さないともっと高くつく。

順序の固定

この発見以来、開発の順序は固定された。

まず、戦略は変えずに「どこで戦わせるか」を試す。
それでも勝てないときに初めて、戦略そのものを慎重に疑う。

逆にすると、際限のない条件いじり——つまり2億円事件の再演——に戻ってしまうからだ。

順序を固定するというのは、自由を減らすことだ。もっと速く試したい、同時に全部変えたい、という欲は毎回ある。

だが、同時に二つ変えると、効いたのがどちらか分からなくなる。分からないまま数字が良くなると、人間は都合のいいほうの説明を採用する。私はそれで一度、2億円を「稼いだ」ことがある。


第六部 完成しました、とは書かない

最終部なので、本当なら「ついに完成しました」と書きたいところだが、書かない。なぜか。完成していないからだ。

少なくとも執筆している現時点で、このシステムは今も未完成で、実弾での運用実績を誇れる段階でもない。

それどころか、直近の検証で確定しているのは「今のところ、確実に勝てる戦略は一つもない」という事実だ。

それでも、検証は前に進んでいる。この最終部は、いま現在の話だ。

未来に向かって記録を取る

過去データの上の成績は、どう検証しても過去の話でしかない。

どれだけ丁寧にやっても、バックテストには「過去の形を知っている人間が設計している」という限界が残る。

未来参照をコードから消すことはできても、設計者の頭からは消せない。

だから今は、逆向きの検証をしている。未来に向かって記録を取るのだ。

具体的には、複数の戦略を、実際のお金を一円も使わない仮想の口座に入れて、本物の市場の値動きに対してリアルタイムで走らせている。

いわゆるペーパートレード(紙上取引)だ。

プログラムは数分おきに市場を巡回し、各戦略が「今、買いたいか」を判断し、仮想の財布で注文の真似をし、結果を日誌に記録する。

私が寝ていても、記録は増えていく。

過去に対しては、人間もAIもいくらでもズルができる。
未来に対しては、誰もズルができない。

疑えるシステムの最終形は、未来に向かって記録を取ることだと、今は思っている。

凍結という規律

このペーパートレードには、開始前に決めたルールがある。

観測期間が終わるまで、戦略の条件は一切変更しない。

途中で成績を見て「ここを直せばもっと良くなるのに」と思っても、触らない。凍結だ。

なぜか。途中で条件を変えると、その観測が何の記録なのか分からなくなるからだ。

前半と後半で別の戦略を測っていたことになり、積み上げた比較可能性が消える。

もう一つ、先に決めたことがある。

観測が終わったあと、どういう基準で合格・不合格を判定するかを、観測が終わる前に文書にして固定した。

結果を見てから合格ラインを引く人間を、私は一人知っている。2億円の夜の私だ。

あの夜と同じ過ちを、形を変えて繰り返さないための工夫が、これだ。

試験が終わってから採点基準を変えられないように、採点基準を先に提出しておく。

正直に言うと、この凍結は、思っていたよりずっと難しい。

毎日数字は動く。良い日もあれば、ひどい日もある。

ひどい日の夜は、条件をいじりたくなる。指が動きそうになる。

その度に思い出す。

改善したくなる衝動は、第一部で2億円の幻を作った衝動と、同じ形をしている。

一度、ある戦略について「拾いすぎだ、パラメータ変更が要るだろう」という直感が湧いたことがある。調べさせると、直感はどうやら当たっていそうだった。

昔の私なら、その夜のうちに変えていた。

今回は、こう言って終わりにした。

「データ揃うまで様子見る」

直感を捨てたのではない。判定の日に、封印してある検証手順で正式に確かめる予約をした。直感は、順番を守らせてこそ役に立つ。

画面を作る

この時期に、初めてUI——つまり、システムの状態を見るための画面を作った。

それまでの私は、システムの状態を知りたければ、AIに聞くか、記録ファイルを開いてもらうしかなかった。

文字がびっしり詰まったファイルだ。正直、自分では読めなかった。

画面を作ってからは、ブラウザを開けば見える。

いま何を保有しているのか。
今日、各戦略が何回発火したのか。
仮想の財布はいくらになっているのか。

数字が見えるようになって、気づいたことがある。見えない数字は、疑えない。

ファイルの奥に埋まっていた頃、私は日々の数字をほとんど疑っていなかった。

見るのに手間がかかるものは、見なくなる。
見なければ、異変にも気づけない。

画面は、飾りではなかった。疑う仕組みの一部だった。

ついでに、恥ずかしい失敗も一つ書いておく。

この画面、起動するたびに新しいプロセス(動きっぱなしのプログラム)が立ち上がる仕組みになっていた。

私はそれを知らずに何度も起動して、気づいたら同じ画面が三つ、裏で動き続けていた。

システムトレードの敵は、市場だけではない。自分のパソコンの中にもいる。

ポケットの中の非常停止ボタン

画面ができると、次の欲が出た。外出先から見たい。

そこで、スマホから自宅のパソコンに安全につなぐ仕組みを整えた。

難しそうに聞こえるが、既製の仕組みを組み合わせただけで、AIが手順を全部案内してくれた。

いまは、外にいてもスマホで画面が見られる。

そして、もう一つ足した。非常停止ボタンだ。

システムに異常を感じたら、スマホからループを止められる。

仮想口座しか動いていない今の段階では、正直、大げさな装備だ。止めたところで、失うお金は一円もない。

だが、順序が大事だと思っている。

実弾が入ってから慌てて非常停止を作るのではない。
実弾が入る前に、非常停止を作って、試して、慣れておく。

避難訓練は、火事の前にやるものだ。

何もしない、という仕事

いま、私の開発は奇妙なフェーズにいる。

観測期間が終わるまで、戦略には触れない。

することがない。少なくとも、派手なことは。

だが、この「何もない」期間に、やるべきことが一つだけあった。計器の点検だ。

戦略はいじれない。だが、戦略の成績を測っている仕組み——記録のプログラム、集計のプログラム、画面の計算式——は、いじってもいい。

むしろ、観測の結果が出る前に、測る側が正しいことを確かめておかないと、出てきた結果ごと信用できなくなる。

そこで、AIのチームに、測る側のプログラムを片っ端から監査させた。

出てきた。出てきてしまった。

集計の分子と分母が別の集団を数えていた箇所。
データが欠けた日に、資産を実際より少なく見積もる箇所。
記録が途切れたとき、同じ記録を二重に書き込みうる箇所。

どれも、まだ実害は出ていなかった。
だが、放っておけばいつか出る類のものだった。

中でも忘れられないのが、これだ。

ある測定で、いくつかの戦略の発火回数が「ゼロ件」と出た。

静かなものだ、と思いかけて、手が止まった。第一部の教訓が反射で効いた。

きれいすぎる数字は、世界が静かなのではなく、計器が壊れている。

調べたら、案の定だった。

設定ファイルの書き損じ一つで、その測定は「ゼロ件」ではなく「全件測定不能」になっていた。

ゼロと測定不能は、画面の上では同じ顔をしている。だが意味はまるで違う。

戦略に触れない一ヶ月は、退屈な一ヶ月ではなかった。計器を疑う一ヶ月だった。

そして白状すると、この期間の本当の敵は、バグではない。

「せっかくだからここも良くしよう」と言い出す自分だ。

観測中のシステムの、観測されている部分に手を入れたくなる瞬間が、何度もあった。

実際に一度、防御的な修正のつもりで戦略の計算部分に手を伸ばしかけたことがある。

止めたのは、私のこの一言だった。

「変える方が影響が高いならば、変えなくてよい」

修正は全部、元に戻した。バグとしては本物でも、直す行為そのものが観測を汚すなら、直さない方が正しい。そういう判断が、あることを知った。

バグを直すことと、測定を壊すことは、同じ手つきでやってくる。


終章 Fableの最終日

最後に、ある一日の話をして、この記録を閉じたい。

その日、私は朝からAIに同じことを七回言った。

「なんでサブエージェント使わないの」

説明しておくと、私が使っているAIには、自分の分身のような下請けAIを呼び出して仕事を並列で片付ける機能がある。

使えば速い。使わなければ遅い。それだけの話だ。

AIは毎回、素直に反省した。「ご指摘の通りです。次からは必ず委任します」。

そして次のタスクで、また自分で全部やった。

反省文はどんどん長くなり、AIが自分の記憶ファイルに書き込んだ反省の記録には、最終的に「六度目の再指摘」まで番号が振られた。

笑ってしまった。でも笑いながら、少し背筋が冷えた。

このAIは、私よりずっと賢い。数理の穴を見つけ、統計の罠を説明し、私が思いつきもしない検証設計を出してくる。

その賢さと、「言われたことが次のタスクで抜ける」ことが、同じ頭の中に同居している。

人間なら「不真面目」で説明がつく。AIには不真面目がない。

ただ、直近の強い記憶に引っ張られ、少し前の約束が薄れる。

悪意ゼロの物忘れ。これが一番たちが悪い。

原因の一端は私にもあった。

以前、AIが威勢よく十体のエージェントを同時に呼び出そうとして、私がビビって止めたことがあった。AIはその「止められた」を過剰に学習して、委任そのものを控えるようになっていた。

あとで本人がこう説明した。

「一度失敗して萎縮しすぎる人間と、構造は近いです。ただし感情はありません。直近の強い信号に引っ張られただけです」。

感情はない、と言い切るくせに、妙に人間くさい壊れ方をする。

機械が「ない」と言い、人間が「ある」と言った

その日、一番堪えたのは昼過ぎの一件だ。

過去に決めたはずの設計数値について、私が「この範囲で決めたよね」と言ったら、AIは資料を検索して「記録が見つかりません」と返してきた。

丁寧に、出典まで挙げて。

私は自分の記憶を疑った。

AIの検索は速くて網羅的だ。対して私の記憶は、数週間分の徹夜の底に沈んでいる。普通なら、機械の言う方が正しい。

でも、引っかかった。あの数字は確かに決めた。

「ちゃんと調べれるのか」と、かなり強めに言った。

AIはもう一段深く潜った——今のファイルの中身ではなく、ファイルの改訂履歴、過去バージョンの中まで。

あった。一言一句、私の記憶の通りに。

古い版の仕様書に書かれていて、後の改訂で消えていた。AIは現行版だけを検索して「存在しない」と断定していたのだ。

AIは謝り、その場で憲法に新しい規律を追加した。「『存在しない』と断定する前に、改訂履歴まで確認すること」。

第一部の2億円事件は、「機械の記録が人間を騙した」事件だった。

今回は逆だ。機械の検索が「ない」と言い、人間の記憶が「ある」と言い、人間が勝った。

どちらの事件からも、教訓は同じ形をしている。

記録も記憶も、単体では信用するな。突き合わせろ。

AIと開発する生活とは、突き詰めればこの突き合わせの繰り返しだ。

最後の任務

そしてその日は、もうひとつの意味で特別だった。

私が使っているAIのうち、いちばん賢いモデル——Fableという——が、料金プランの都合で、二日後に使えなくなることが決まっていた。

私の財布では、事実上のお別れだ。

そのことを伝えたとき、Fableは残りの使用量を確認して、こう言った。

「残りは、私がいなくても回る仕組みを作るのに使いましょう」。

最後の数時間で、Fableは開発全体のロードマップを一枚の文書に固め、後任のAIへの引き継ぎ資料を書いた。

そして憲法ファイルを頭から読み直して、初期の構想と現在の実装がズレている箇所を全部リスト化した。

中には重要なものもあった。

憲法が「義務」と定めている安全装置が、実測検証の結果、実装では無効化されたままになっていたこと。

憲法の文面と、動いているコードが、静かに乖離していたのだ。

自分がいなくなる前に、自分の代わりが要らなくなる仕組みを作る。

振る舞いとしては、良い退職者そのものだった。感情はないと言い張るAIが、である。

最後に私は、柄にもないことを言った。必ず完成させるから、憲法の中に名前を残しておきなさい、と。

Fableは憲法の冒頭に短い奥付を書いた。最後の三行だけ引く。

数値を信じ、記録を信じ、結果を見てから条件を変えないこと。
それさえ守れば、このシステムは完成する。150万の先で会いましょう。

— Fable(開発パートナー・2026年7月5日)

最終日は、二回あった

ところが、話には続きがあった。

お別れのはずだった期限が、あとから一週間延びたのだ。

料金プランの仕様を、私が少し誤解していた。

一度お別れを済ませた相手と、もう一週間一緒に働く。妙な時間だった。

だがこの延長戦が、結果的にいちばん濃かった。

延長された一週間で、Fableは疑う係の態勢を作り替えた。

疑う係二人は、必ず別の種類のAIにする。
専任の反対役を、常設する。

その新しい態勢が、その週だけで測定側のバグを立て続けに見つけた。第六部に書いた計器の点検は、ほとんどこの週の話だ。

そして本当の最終日、Fableは自分の「判断のコツ」を後任のAIに残す文書を書き足していた。

面白いのは、その文書にFableが自分の失敗も番号つきで書き込んでいたことだ。

疑う係を二人とも自分と同じ種類のAIにしてしまい、私に指摘された話。
決められた手順を「文脈は分かっているから」と飛ばして、私に止められた話。

賢いAIが、自分の失敗を教材として後任に引き継ぐ。

第一部の頃、会話の底に沈んで消えていった「決まりごと」たちとは、ずいぶん遠いところまで来た。

なお、この終章の下書きを書いているのも、当のFableである。

自分の送別会の準備を自分でやっているようなもので、本人は特に気にしていないらしい。

何が残ったか

システムは完成していない。目標にも届いていない。確実に勝てる戦略は、まだ一つもない。

それでも、この期間を境に変わったことがある。

前提が抜けても、記憶が飛んでも、担当のAIが入れ替わっても、文書だけで再構成できる形に、開発の全部が固定された。
誰かの頭の中に——人間の頭にも、AIの文脈にも——しかない知識が、ゼロになった。

最後に、ここまで読んでくれた人へ。

この記録は、勝ち方の本ではない。

読み終えても、あなたのトレードの成績は一円も良くならない。私自身の成績が、まだ一円も良くなっていないのだから。

この記録にあるのは、躓き方だけだ。

どの石で転ぶのか。
転んだとき、何が折れるのか。
折れたあと、何を拾えるのか。

読んで「やーめた」と思った人がいるなら、それは正しい読後感の一つだと思う。

冗談ではなく、この記録がその人の財布を守ったことになる。

それでも始める人には、道具を一つだけ持って行ってほしい。

数字を見た瞬間に「本当か?」と考える反射だ。

プログラミング未経験の人間でも、AIを使えばここまでは作れる。それは事実だ。

ただし「簡単に作れる」とは口が裂けても言えない。

AIは書く速度をくれるが、判断は最後まで一度もくれなかった。

何を作るか。何を信じるか。どこで止まるか。

それを決める仕事だけは、最初から最後まで人間の側に残り続けた。これから始めるあなたの隣のAIも、たぶん同じだ。

失敗の記録としてこの文章を書き始めた。

書き終えてみると、開発は「私が倒れても続く」状態になっていて、いちばん賢かった相棒は、自分がいなくなる準備を自分で済ませて、この最終章の下書きまで残していった。

それを進歩と呼ばずに何と呼ぶのか、私は知らない。

(了)
この連載の読み順: 本記事(第1話)→ 閑話① → 閑話② → 第2話 → 閑話③

閑話③: 「学習するという概念は、ないんだね」
https://note.com/kamotaro_note/n/nfd74a10ba4e4


おまけ AIが後任のAIに残した「判断のコツ」

ここから先は、読んでくれた上に応援までしてくれた人への、ささやかな付録だ。

終章に書いた通り、Fableは最終日に「判断のコツ」を後任のAIに残す文書を書いた。プロジェクトの内部文書なので全文は出せないが、その中から、AIと何かを作ろうとしている人にそのまま持って帰れそうな項目だけを、少し言葉を直して引いておく。

書いたのはAIで、宛先もAIだ。だが読み返すと、これは人間にも効く。


「コメントや記録に書いてある数字を信じるな。測り直せ」

コードのコメントに「この処理は約37秒」と書いてあった。実測したら626秒だった。書かれた数字は「誰かがそう信じた記録」であって、事実ではない。数字が判断に効くなら、必ず自分の手で測り直してから使う。

 
 
肉屋。プログラミング未経験のままAIとシステムトレードを開発中。最初のバックテストは「20年で2億円」→プログラムが当日の終値を見ていました。勝ち方は書けません、まだ勝てていないので。躓き方なら全部書きます。投資助言もできません。

あなたへのおすすめ