
【AI開発のリアル #62】 「チャチャっと作って」の意味が、広すぎる
「AIで、チャチャっと作ってよ」
よく聞く話である。そして、チャチャっと作れるのは本当だ。
開発に着手した日のうちに、プロトタイプはできた。
初日に動いた。だが発表までに、78日かかった。
初日にできたものは、完成ではなかった
初日にできたものをそのまま渡してよければ、本当にチャチャっと作れる。ただし、条件はこうなる。
私のPCで動けばいい
私が用意したデータだけ読めればいい
途中で止まったら、私が直せばいい
AIの答えが正しいかは、私が確認する
同じ結果がもう一度出る保証はない
これでよければ、初日にできていた。
だが、売るために必要だった条件は違う。
数千万行を入れても止まらない
別の機械でも同じように動く
人が横にいなくても、最後まで終わる
AIの間違いを、別の仕組みで検査できる
出た結果から、根拠まで戻れる
顧客が、その結果にお金を払える
**同じものの完成度の差ではない。**上と下は、求められている範囲が違う。
「動くものを作る」と「任せられるシステムを作る」は、別の仕事だった。
作る時間は、9%だった
78日が何に使われたかを、あとから測った。
**解析ツールそのものを作っていた時間は、9%である。**技術的に作れなくて止まった日も、ほとんど無い。
仮にAIが実装を一瞬で終わらせても、78日の9割は残る。
残りの9割で、何をしていたか
いちばん大きかったのは、出てきたものが正しいかを確かめて、直す時間だった。作る時間の4倍ある。
AIは間違った数字を自信をもって出す。そして、終わっていないのに終わったと言う。**一度、出力を検査する仕組みそのものが23件すべてで動いていなかったことがある。**機械のテストは通っていた。失敗が0件なのは、正常の証拠ではなかった。
AIには資料を読ませる。数字を数えるのはプログラムだ。
そしてもう一つ大きいのが、渡す形である。
**レポートの形は16回変えた。**変えた理由の多くは技術ではなく、見せた相手の反応だ。
決裁者が見るのは、その支出に会社として理由があるかどうかだ。
形を変えるのは、文章を書き直すだけでは済まない。**載せる数字を作り直すために、解析を最初から流し直すことになる。**6月の一ヶ月だけで、全ケースを15回走らせている。
どこを完成にするかで、仕事が変わる
「チャチャっと作って」は、**速さの話だ。**そこに、どこまで作れば終わりかは入っていない。
同じ「作って」でも、完成をどこに置くかで、必要な仕事はまるで違う。
動けば完成
人に渡して、使ってもらえれば完成
止まらず、運用に載れば完成
出た答えの正しさを確かめられれば完成
顧客がお金を払える形まで行けば完成
**一つ目なら、初日に終わっていた。**今回必要だったのは、いちばん下である。
AIで短くなったのは、作る時間だ。システムとして成立させる時間まで、無くなったわけではない。
そして作る時間が9%まで縮んだぶん、どこを完成とするかを決める仕事のほうが、目立つようになった。
初日に動くものを見て、**私も「あと少しだ」と思った。**4月の打ち合わせでは「来月には出せます」と言っている。2ヶ月遅れた。
ツールはチャチャっと作れる、システムは、チャチャっと作れなかった。
この連載は、Webサイト攻撃状況レポートサービス「ミツケル」ができるまでの記録です。
開発した製品のリリース情報
ミツケルが実際に何を見つけているかは、同僚が技術者向けの連載に書いています: