
ちゃっぴぃ!今週の利用枠がないけど、アプリ作って!CodexもWorkも使わず、ChatだけでAIアプリ開発してみた
カリンちゃんはプログラマーでもエンジニアでもありません。いろいろ作っていますが、コードは書けませんし、基本的に読みません。でも、AIにお願いしてAndroidアプリやWebアプリ、Windows用のソフトなど、いろいろ作って遊んでいます。
そうすると、結構な勢いでChatGPTの利用枠がなくなってしまうんですよね。特にCodexとWorkは便利なので、ついつい使ってしまいます。今週も、とうとう利用枠を使い切ってしまいました。
でも、まだ開発したい。じゃあ、CodexもWorkも使わず、普通のChatで開発すればいいじゃない。というわけで、どこまでできるか試してみました。
ちなみに、ChatGPTにはいろいろな開発支援機能があります。Codexはプログラムの作成や修正、テストを得意とするAI開発支援機能で、Workは調査や実際の操作を含む一連の作業を引き受ける機能です。Chatは、普段ちゃっぴぃとおしゃべりしている普通のチャット機能で、それぞれ利用枠の仕組みが異なります。
コピペマシーンは卒業したの
昔はAIにコードを書いてもらい、それを自分でコピーして、ファイルに貼り付けて、コンパイルしていました。エラーが出たらまたAIに聞いて、修正したコードをコピペして、やり直し。そんなことを何度も繰り返していたんです。
でも、もう嫌よ。カリンちゃんはコピペマシーンじゃないの。コピペマシーンはもう卒業したの。
今回の条件は、普通のChatで開発すること、そして人間はコードをコピペしないこと。この2つです。アプリの設計からコーディング、ビルド、GitHubでの公開まで、できるだけAIにやってもらいます。
13分6秒で作ったアプリを改良する
今回作るのは「My Monitor」の改良版です。以前、ChatGPTで13分6秒という短時間で作ったAndroidアプリで、USB接続の映像キャプチャー機器から入力された映像をスマホの画面に表示するものです。今回はこれに録画やファイル保存などの機能を追加します。
ちなみに、映像キャプチャー機器というのは、HDMIなどの映像信号をUSB経由で取り込む装置です。UVC(USB Video Class)という共通規格に対応していれば、専用ドライバーなしで使えるものも多くあります。カリンちゃんが使っているのも、このUVC対応のキャプチャー機器です。amazonで1000円位から売ってます。機能は同じなので、一番安いのでいいです。

ただ、前回は極限までプロンプト(AIへの指示文)を短くして開発したため、ソースコードを保存していませんでした。つまり、改良したくても元のプログラムがどこにも残っていません。実質ゼロからのスタートですが、まあ、もう一度作ればいいじゃない。作るのはAIだし(をい)。
まずはChatに丸投げする
今回、最初に投げたプロンプトはこんな感じです。相変わらず、作りたいものを普段の言葉でお願いするだけです。
【実際のプロンプト】
ちゃっぴぃ、アプリ作りたい。「My Monitor」起動したらUVCの画像を映す。スクリーンショット、録画機能付き。録画フォルダは指定できる。smb対応。githubに新規リポジトリを作って、開発して。mymonitor.apkをダウンロードしたい。できたら呼んで。
SMBとは、Windowsなどで使われるファイル共有の仕組みです。GitHubはプログラムのソースコードを保存・管理するサービスで、リポジトリとはその保存場所のこと。APKはAndroidアプリをインストールするためのファイル形式です。
つまり、スマホに映像を表示して、スクリーンショットや録画ができて、NAS(ネットワークにつながった保存装置)にも保存できるアプリを作ってね、というお願いです。さらにソースコードはGitHubに保存し、完成したアプリはダウンロードできる形で渡してほしい。これだけの指示で、どこまでできるでしょうか。
Chatではできなかったことは、ひとつだけ
引っかかったのがGitHubです。新しい公開リポジトリを作ってほしかったのですが、今回Chatからは作成できませんでした。ここはWorkにお願いしたところ、無事に作成できました。
GitHubに「MyMonitor」という空のリポジトリができたので、ここからはChatで開発を進めます。
まずはAndroidアプリが完成
ちゃっぴぃに修正をお願いしながら、少しずつアプリを育てていきました。最初はUSBキャプチャーの映像を表示するところから始め、次にスクリーンショットと録画機能を追加しました。さらにSMB経由でNASに動画や画像を保存できるようにします。
もちろん、一発で完成したわけではありません。録画を開始するとアプリが落ちたり、映像が画面の左に寄っていたり、保存した動画のファイル名が「.mp4.mp4」になったり。いろいろな不具合が出ましたが、そのたびにちゃっぴぃに報告して修正してもらいました。
修正を重ねて、録画開始・停止、NASへの保存まで動くようになりました。さらにSMBの接続先と資格情報の保存、かわいいアプリアイコン、録画中の表示なども追加しました。ここまで、カリンちゃんはコードを一行も書いていません。
どうやってAPKを作ったの?
ここが今回の重要なところです。GitHubには「GitHub Actions」という、自動で作業を実行する仕組みがあります。これを使うと、プログラムのビルドまで自動化できます(へぇ、そうなんだ。知らなかった)。
ビルドとは、ソースコードから実際に動くアプリを組み立てる作業です。ちゃっぴぃがプログラムを修正してGitHubに保存すると、GitHub Actionsがアプリを組み立ててくれます。完成したAPKをダウンロードしてスマホにインストールすれば、動作確認ができます。
つまり、カリンちゃんがAndroid Studio(Androidアプリ用の開発環境)を操作する必要はありません。Chatが開発し、GitHubが組み立て、人間は完成品を試す。これならコピペマシーンに戻らずに済みます。
次はスマホを無線HDMIアダプターにする
ここからが今回の本命です。スマホに接続したUVCキャプチャーの映像を、Wi-Fi経由でWindowsパソコンに送ります。そしてWindows側で受信した映像を、OBSで表示・録画できるようにします。
OBS(Open Broadcaster Software)は、画面の録画やライブ配信などに使われる無料のオープンソースソフトです。オープンソースとは、プログラムのソースコードが公開され、ライセンスに従って利用や改良ができることをいいます。普段からOBSを使っている方も多いですよね。カリンちゃんも使ってます。
何のためにそんなことをするのか。スマホをアダプターにしてリモートモニターにしたいのです。例えば、古いパソコンにOSをインストールするとき、作業画面を離れたWindowsパソコンで見たり、録画したりしたいわけです。
通常は、対象パソコンと録画用パソコンの間をHDMIケーブルなどで接続します。でも今回の仕組みなら、対象パソコンのHDMI出力にキャプチャー機器をつなぎ、それをスマホに接続するだけ。スマホから先はWi-Fiなので、長いケーブルを引き回す必要がありません。

そうすると、OSのインストール画面やBIOSの設定画面などを、離れた場所から見たり録画したりできるわけです。スマホとキャプチャー機器の間には結局ケーブルが必要ですが、録画用パソコンとの間は無線で接続できます。便利でしょ。
今度はWindowsアプリまで作らせる
Android側だけでは、映像を送っても受け取る相手がいません。そこで、Windows用の受信ソフトもちゃっぴぃに作ってもらいます。
Androidアプリは007版まで進み、Windows用の受信ソフト「My Cast Receiver」もできました。さっそく試してみると、スマホからWindowsに映像が届きました。おお、動いた!

ただし、問題もありました。最初は映像がちらついたので、そこを直してもらい、フルHD(1920×1080画素)にも対応しました。画質はきれいになったのですが、今度は映像が約5秒も遅れて表示される問題が出てきました。
これではリアルタイムモニターとしては使いにくい。そこで、できるだけ遅延を減らすようにお願いしました。映像を送るだけでも、画質、転送速度、受信側の処理など、調整するところはいろいろあるようです。
ちなみに、今回の開発ではGitHub Actionsを使ってAndroid用のAPKだけでなく、Windows用のEXEも作ります。つまり、スマホ用とWindows用の2本のアプリを、同じGitHubリポジトリで管理するわけです。ずいぶん大がかりになってきましたが、カリンちゃんは相変わらずコードを書いていません。
Chatだけで、どこまでできた?
今回わかったのは、普通のChatでも、利用できる連携機能と自動ビルド環境があれば、アプリ開発をかなり進められるということです。Androidアプリだけでなく、Windows用の受信ソフトまで作ることができました。。
ただ、一回で本当に欲しい機能、性能が出来上がるわけではないです。実際にスマホとWindowsで動かし、不具合を見つけて、ちゃっぴぃに報告する。結局、この繰り返しが必要なんですね。
プログラムを書けなくても、アプリは作れる
今回の経験で、改めて感じました。プログラムを書く人と、作りたいものを考える人は、必ずしも同じでなくていいんですね。カリンちゃんはコードを書けませんが、どんなアプリが欲しいかは説明できます。
実機で試して、何が気に入らないかも説明できます。そして、直してもらう。もちろん、技術的な判断まで全部お任せにすると、うまくいかないこともあります。
コピペマシーンを卒業したら、今度はテストマシーンになってしまいました。
試してみたい!という方は、exeとapkをダウンロードして下さい。
ソースコードもGitHubで公開しています。興味のある方は、ぜひのぞいてみてください。
https://github.com/Karin-Laboratory/MyMonitor