
実際の鍵盤に連動してドレミやコードが表示されるアプリを1日で作った話
もう暑すぎますね こんなに暑かったらあー・・・
ピアノ再開するか!!
心頭滅却すれば火もまた涼しっていうじゃないですか。
やっぱり何かに熱中してれば気にならなくなるかなって・・・
すみませんこじつけです。
幼少期にやっていたピアノ(聖者の行進くらいまで発表してた記憶)を改めてやろうかなーと
まぁきっかけはなんでもいんです。
たまたまyoutubeで見ていたゆゆうたの動画とか、ストリートピアノとか、1万時間かければプロになるのか・・・みたいな
そんな動画見ていたら 俺もピアノやってたし、一生使えるスキルだし もう一回やってみたいなぁと
そんな気持ちで日々過ごしていました。
でもずっとやりたいなぁなんて思っていたら一生このままです
さぁ皆さんご一緒に!
明日やろうは馬鹿野郎!
が、しかし
何から始めたらいいのん?
全く分かりません。譜読みの宿題も嫌がっていたのですからそりゃそうでしょう。なんとなくある程度弾けていただけで何も理論は覚えていません。
とりあえず片っ端から教本を引っ張り出したり、youtuberが勧めている書籍買ってみたり
アプリを入れて少しやってみたり・・・
つ、つまらん
そもそも根本的に何かが足りていない気がします。
弾けないとか、ここで躓くとか そのレベルにまず達してないのでは?
ここがド!とか ここがミ!とか楽譜を見てもぱっと言えません。
アプリも課題曲(しかも簡略化されたやつ)を弾け!って感じですし かと言って教本によって運指がなかったり、階名が書いてなかったり・・・
かと言ってただ音符が表示されているものに対して
うーんこれは ミ! 正解! みたいなゲームしても正直クソつまらんです
なんとなーくそれっぽく弾いて なんかモチベ上がらんからいいや・・・で離れることが多かったんですよね
じゃあこの問題どうするの?
文句があるなら自分好みのアプリ作っちゃえばいいじゃん!
そう思い1日使って取り組んでみました。
アプリでやりたいこと
アプリといっても、巷には沢山ピアノアプリがあるので、そこと張り合うつもりはありません。そもそも知識無いし
まずは色々アプリを試してみて調査です。
そしてでた結論がこちら
電子ピアノだからMIDI接続出来るのに、それを活かしているアプリが少ない
MIDI接続出来ても提示された音符を正しく弾けているかのゲームが多い
そもそも今自分が押している音が五線譜のどこに該当するのかがパッと分かるものが少ない。
楽譜表示アプリはあってもある楽譜に沿ってMIDIで入力する形式が多い
私はね そんなアプリを使うレベルじゃないんですよ
もっともっと下の方にいるの
やりたいことは今押している鍵盤は五線譜のどこ!? それだけです。
ちなみにMIDIっていうのは簡単にいうと、ピアノの押した強さとか場所とかをデジタルデータにして外に送れる方式みたいなもんですね
そこで日曜日の貴重な時間を使って作ってみました。
まずは簡単に最低限欲しい機能から
そもそもMIDI接続してどんな情報を取り込めるんだろうなーと実験です。
うんうん いい感じです ペダルはオンオフじゃなくて強弱も拾ってるんですね
基本的な動作は分かったのでここから見た目や機能を詰めていきましょ
そして色々あって(省略)
こんな感じになりました。


外部録音なのでうるさくてすみません。
機能としてはこんな感じ
基本
- 電子ピアノとUSBで繋ぐだけ
- 完全オフライン。ネット接続不要
- iPad専用
五線譜
- ト音記号+ヘ音記号の大譜表。ト音だけ/ヘ音だけにも切替可
- 同じ音をト音とヘ音の両方に同時表示できる(中央ドが2箇所に書ける理由が目で分かる)
- 弾いた音が左から右へ並んでいく。少し休むとリセット
- 音符のすぐ横に音名が出る。和音なら音符と同じ高さで縦に並ぶ
- 3音以上ならコード名(C、Am7、F/C など)
- 調号15種類を「♯が4つ付いてる形」の見た目で選べる(名前だけだと初心者には選べないので)
- 調に入っている音には記号を付けず、外れた音には♮を付ける(本物の楽譜と同じ見え方)
- ♯か♭かを自動判定(調号 → 旋律の向きの順で決める)
音名の呼び方
- ドレミ/C D E/ドイツ語(H)/ハニホ の4通り
- オクターブ表記も5通り(C4・C3・MIDI番号・中央ドから±・なし)
両手
- 左手と右手を自動で分けて、それぞれのコード名を出す
- 「右手だけ」「左手だけ」「中央ドで固定」なども選べる
演奏の可視化
- 打鍵の強さを**ppp〜fffの強弱記号+%**で表示。直近40打のグラフつき
- ペダルの踏み方を判定。打鍵の何ミリ秒後に踏んだかを測って、レガートペダル(鍵盤の少し後に踏む)ができているかを◎△✕で出す
- 前の音からの跳躍(「長2度上」など)
- 画面下の鍵盤図。押した鍵が光り、離した直後は薄く残る
楽譜を並べて見る
- PDF・写真・その場でカメラ撮影の3通りで取り込める
- 左右に並べて表示。仕切りをドラッグして幅を変えられる
- 一度取り込めば、次に開いたときも同じ楽譜がそのまま出る
- ピンチ/ダブルタップで拡大
電子ピアノを持っていなくても
- 画面の鍵盤を指で押すと音符が出る。指を滑らせると音も追従
「うちのピアノだと動かない」に備えて
- 機種名・送信チャンネル・打鍵の強さの有無・ペダルの種類・遅延を実測して表示する画面がある
- どんな電子ピアノでも動くように設計(全チャンネル受信・古いMIDIも新しいMIDIも・安い機種の癖も吸収)
もう少し調整したいですが、自分で練習する分にはいい感じです。
両手で弾いている場合、どのキーをどっちの手で弾いているかと推測しているんですが
このアルゴリズムが難しいですね・・・
私みたいな初学者用に作っています。 後々のことも考えてコードも表示出来るようにしてみました。
これはエーマイナーだね(ドヤ顔)
あ!ここで今転調したね(ドヤ顔)
とか言いたいじゃないですか え? そんなことない?
そもそも自分の学習用なので公開する必要あるのか?という気もしています。申請めんどくさいし
欲しい!って人がいれば公開しようと思います。
欲しい機能とかアレばコメントで教えてください!