
【AI開発のリアル #52】 どうやってAIを24時間、働かせているのか
「どうやって24時間、開発させたんですか。ループエンジニアリングですか?」
このあいだ、実際にそう聞かれた。
「ループエンジニアリング」という言葉は、そのとき初めて聞いた。
知らない言葉だったので、「違います」と答えた。自分がやっていることとは、関係のない話だと思っていた。
私がやっていたことは単純だ。
夜に仕事を渡して、朝に結果を見る。それを毎日繰り返した。
寝る前に仕事を渡す。朝になると、コードや調査結果、検査結果がそれぞれ残っている。
人が寝ている間も、開発は進んだ。
ただ、AIが疲れないから24時間動かしている、という話ではない。
仕事のほうが、一日で終わらない
ミツケルの開発中、コードを一行直しただけでも、テストデータを全部解析し直していた。
昨日のコードで正しかった結果が、今日直したコードでも正しいとは限らない。
どこに影響したか分からないから、変更したら一通りのテストをもう一度やる。
開発や品質管理では、ごく普通のことだ。
問題は、そのテストに使うデータが大量にあることだった。
一回の処理が終わるまでに何時間もかかる。終われば、次の条件でまた処理する。
いま動かしている解析も同じだ。
問いが来る前に、大量のデータを検証に使える状態まで作っておく。
データは増え続ける。同じデータでも、別の角度から調べるなら、また処理が必要になる。
仕事のほうが、一日では終わらない。
夜中に、人が張り付いていた
長い処理なら、最初から次の仕事まで順番に並べておけばいい。
実際、そうしている。
でも、ずっと予定どおりに動くとは限らない。途中で処理が止まることもあれば、次の仕事が入っていないこともある。
そこで朝まで気づかなければ、機械は何時間も何もせず止まったままになる。
こういうとき、昔から必要だったのが見張り役だ。
処理が終わったら次を入れる。止まっていたら原因を調べる。
24時間続けるなら、夜中にも誰かが見ていなければならない。
いま、その当番をAIがやっている
GPUが使われていない状態が続くと、監視システムから通知が出るようにしてある。
その通知をAIが受け取る。
いま何の処理が動いているのか。次の仕事は入っているのか。止まっているなら、何を動かすべきか。
状態を確認して、必要なら次のジョブを投入する。
これは、普段の処理を動かす仕組みそのものではない。
何かが予定どおりに動かなかったときの、見張り役だ。
実際、この仕組みで「次のジョブが入っていない」と何度も見つかり、AIが続きを投入している。
この記事を書いているあいだも、裏では解析が進んでいる。
判断ではなく、夜間当番
AIに任せたのは、何を調べるかの判断ではない。
AIに渡しているのは、人間の仕事そのものではない。
仕事を分解して、その中から機械に渡せる部分だけを切り出している。
今回、切り出したのは夜間当番だった。
処理を見張り、止まっていたら次の仕事を入れる。
地味な仕事だ。
でも、これを人間がやらなくてよくなったから、私は寝ていられる。
その間も、開発や解析は続いている。
この連載は、Webサイト攻撃状況レポートサービス「ミツケル」ができるまでの記録です。
開発した製品のリリース情報
ミツケルが実際に何を見つけているかは、同僚が技術者向けの連載に書いています: