メインコンテンツへスキップ
見出し画像

ちゃっぴぃ!今週の利用枠がないけど、アプリ作って!CodexもWorkも使わず、ChatだけでAIアプリ開発してみた

    カリンちゃんはプログラマーでもエンジニアでもありません。いろいろ作っていますが、コードは書けませんし、基本的に読みません。でも、AIにお願いしてAndroidアプリやWebアプリ、Windows用のソフトなど、いろいろ作って遊んでいます。

    そうすると、結構な勢いでChatGPTの利用枠がなくなってしまうんですよね。特にCodexとWorkは便利なので、ついつい使ってしまいます。今週も、とうとう利用枠を使い切ってしまいました。

    でも、まだ開発したい。じゃあ、CodexもWorkも使わず、普通のChatで開発すればいいじゃない。というわけで、どこまでできるか試してみました。

    ちなみに、ChatGPTにはいろいろな開発支援機能があります。Codexはプログラムの作成や修正、テストを得意とするAI開発支援機能で、Workは調査や実際の操作を含む一連の作業を引き受ける機能です。Chatは、普段ちゃっぴぃとおしゃべりしている普通のチャット機能で、それぞれ利用枠の仕組みが異なります。

    コピペマシーンは卒業したの

    昔はAIにコードを書いてもらい、それを自分でコピーして、ファイルに貼り付けて、コンパイルしていました。エラーが出たらまたAIに聞いて、修正したコードをコピペして、やり直し。そんなことを何度も繰り返していたんです。

    でも、もう嫌よ。カリンちゃんはコピペマシーンじゃないの。コピペマシーンはもう卒業したの。

    今回の条件は、普通のChatで開発すること、そして人間はコードをコピペしないこと。この2つです。アプリの設計からコーディング、ビルド、GitHubでの公開まで、できるだけAIにやってもらいます。

    13分6秒で作ったアプリを改良する

    今回作るのは「My Monitor」の改良版です。以前、ChatGPTで13分6秒という短時間で作ったAndroidアプリで、USB接続の映像キャプチャー機器から入力された映像をスマホの画面に表示するものです。今回はこれに録画やファイル保存などの機能を追加します。

    ちなみに、映像キャプチャー機器というのは、HDMIなどの映像信号をUSB経由で取り込む装置です。UVC(USB Video Class)という共通規格に対応していれば、専用ドライバーなしで使えるものも多くあります。カリンちゃんが使っているのも、このUVC対応のキャプチャー機器です。amazonで1000円位から売ってます。機能は同じなので、一番安いのでいいです。

    画像

    ただ、前回は極限までプロンプト(AIへの指示文)を短くして開発したため、ソースコードを保存していませんでした。つまり、改良したくても元のプログラムがどこにも残っていません。実質ゼロからのスタートですが、まあ、もう一度作ればいいじゃない。作るのはAIだし(をい)。

    まずはChatに丸投げする

    今回、最初に投げたプロンプトはこんな感じです。相変わらず、作りたいものを普段の言葉でお願いするだけです。

    【実際のプロンプト】

    ちゃっぴぃ、アプリ作りたい。「My Monitor」起動したらUVCの画像を映す。スクリーンショット、録画機能付き。録画フォルダは指定できる。smb対応。githubに新規リポジトリを作って、開発して。mymonitor.apkをダウンロードしたい。できたら呼んで。

    SMBとは、Windowsなどで使われるファイル共有の仕組みです。GitHubはプログラムのソースコードを保存・管理するサービスで、リポジトリとはその保存場所のこと。APKはAndroidアプリをインストールするためのファイル形式です。

    つまり、スマホに映像を表示して、スクリーンショットや録画ができて、NAS(ネットワークにつながった保存装置)にも保存できるアプリを作ってね、というお願いです。さらにソースコードはGitHubに保存し、完成したアプリはダウンロードできる形で渡してほしい。これだけの指示で、どこまでできるでしょうか。

    Chatではできなかったことは、ひとつだけ

    引っかかったのがGitHubです。新しい公開リポジトリを作ってほしかったのですが、今回Chatからは作成できませんでした。ここはWorkにお願いしたところ、無事に作成できました。

    GitHubに「MyMonitor」という空のリポジトリができたので、ここからはChatで開発を進めます。

    まずはAndroidアプリが完成

    ちゃっぴぃに修正をお願いしながら、少しずつアプリを育てていきました。最初はUSBキャプチャーの映像を表示するところから始め、次にスクリーンショットと録画機能を追加しました。さらにSMB経由でNASに動画や画像を保存できるようにします。

    もちろん、一発で完成したわけではありません。録画を開始するとアプリが落ちたり、映像が画面の左に寄っていたり、保存した動画のファイル名が「.mp4.mp4」になったり。いろいろな不具合が出ましたが、そのたびにちゃっぴぃに報告して修正してもらいました。

    修正を重ねて、録画開始・停止、NASへの保存まで動くようになりました。さらにSMBの接続先と資格情報の保存、かわいいアプリアイコン、録画中の表示なども追加しました。ここまで、カリンちゃんはコードを一行も書いていません。

    どうやってAPKを作ったの?

    ここが今回の重要なところです。GitHubには「GitHub Actions」という、自動で作業を実行する仕組みがあります。これを使うと、プログラムのビルドまで自動化できます(へぇ、そうなんだ。知らなかった)。

    ビルドとは、ソースコードから実際に動くアプリを組み立てる作業です。ちゃっぴぃがプログラムを修正してGitHubに保存すると、GitHub Actionsがアプリを組み立ててくれます。完成したAPKをダウンロードしてスマホにインストールすれば、動作確認ができます。

    つまり、カリンちゃんがAndroid Studio(Androidアプリ用の開発環境)を操作する必要はありません。Chatが開発し、GitHubが組み立て、人間は完成品を試す。これならコピペマシーンに戻らずに済みます。

    次はスマホを無線HDMIアダプターにする

    ここからが今回の本命です。スマホに接続したUVCキャプチャーの映像を、Wi-Fi経由でWindowsパソコンに送ります。そしてWindows側で受信した映像を、OBSで表示・録画できるようにします。

    OBS(Open Broadcaster Software)は、画面の録画やライブ配信などに使われる無料のオープンソースソフトです。オープンソースとは、プログラムのソースコードが公開され、ライセンスに従って利用や改良ができることをいいます。普段からOBSを使っている方も多いですよね。カリンちゃんも使ってます。

    何のためにそんなことをするのか。スマホをアダプターにしてリモートモニターにしたいのです。例えば、古いパソコンにOSをインストールするとき、作業画面を離れたWindowsパソコンで見たり、録画したりしたいわけです。

    通常は、対象パソコンと録画用パソコンの間をHDMIケーブルなどで接続します。でも今回の仕組みなら、対象パソコンのHDMI出力にキャプチャー機器をつなぎ、それをスマホに接続するだけ。スマホから先はWi-Fiなので、長いケーブルを引き回す必要がありません。

    画像
    スマホでキャプチャしてWindowsに転送しOBSで録画しています

    そうすると、OSのインストール画面やBIOSの設定画面などを、離れた場所から見たり録画したりできるわけです。スマホとキャプチャー機器の間には結局ケーブルが必要ですが、録画用パソコンとの間は無線で接続できます。便利でしょ。

    今度はWindowsアプリまで作らせる

    Android側だけでは、映像を送っても受け取る相手がいません。そこで、Windows用の受信ソフトもちゃっぴぃに作ってもらいます。

    Androidアプリは007版まで進み、Windows用の受信ソフト「My Cast Receiver」もできました。さっそく試してみると、スマホからWindowsに映像が届きました。おお、動いた!

    画像

    ただし、問題もありました。最初は映像がちらついたので、そこを直してもらい、フルHD(1920×1080画素)にも対応しました。画質はきれいになったのですが、今度は映像が約5秒も遅れて表示される問題が出てきました。

    これではリアルタイムモニターとしては使いにくい。そこで、できるだけ遅延を減らすようにお願いしました。映像を送るだけでも、画質、転送速度、受信側の処理など、調整するところはいろいろあるようです。

    ちなみに、今回の開発ではGitHub Actionsを使ってAndroid用のAPKだけでなく、Windows用のEXEも作ります。つまり、スマホ用とWindows用の2本のアプリを、同じGitHubリポジトリで管理するわけです。ずいぶん大がかりになってきましたが、カリンちゃんは相変わらずコードを書いていません。

    Chatだけで、どこまでできた?

    今回わかったのは、普通のChatでも、利用できる連携機能と自動ビルド環境があれば、アプリ開発をかなり進められるということです。Androidアプリだけでなく、Windows用の受信ソフトまで作ることができました。。

    ただ、一回で本当に欲しい機能、性能が出来上がるわけではないです。実際にスマホとWindowsで動かし、不具合を見つけて、ちゃっぴぃに報告する。結局、この繰り返しが必要なんですね。

    プログラムを書けなくても、アプリは作れる

    今回の経験で、改めて感じました。プログラムを書く人と、作りたいものを考える人は、必ずしも同じでなくていいんですね。カリンちゃんはコードを書けませんが、どんなアプリが欲しいかは説明できます。

    実機で試して、何が気に入らないかも説明できます。そして、直してもらう。もちろん、技術的な判断まで全部お任せにすると、うまくいかないこともあります。

    コピペマシーンを卒業したら、今度はテストマシーンになってしまいました。

    試してみたい!という方は、exeとapkをダウンロードして下さい。

    ソースコードもGitHubで公開しています。興味のある方は、ぜひのぞいてみてください。

    https://github.com/Karin-Laboratory/MyMonitor

    こちらの記事もおすすめ


    気に入っていただけたら「スキ」をお願いします!励みになります!!


     
     

    Karin

     
     
    自家用ソフト(非売品)開発者。AIと古い機械をつないで遊んでいます。ChatGPTやCodexを工具に、電子工作、自宅サーバー、Androidアプリ、OpenWrt移植などに挑戦中。自分や家族が使いたいものを、日曜大工のように作っています。ノウハウはできるだけ無料で共有します。

    あなたへのおすすめ