リアルタイムでマイクで歌って、そのままミクさんになる

マイクをMIDIコントローラー代わり使ってみよう、というお話。
『ぼかりす 』で高度に便利にミクさんを調教できるかもしれませんが、
無料で何とかしてみる覚え書き。
要はオーディオデータをMIDIデータにするお話。

リアルタイムにマイクでミクさんコントロール

リアルタイムでマイクでミクさんコントロール 必要なもの ミクさんとVSTホストのソフトの操作・設定ついては前回の記事参照 (Cantabile Lite(無料版) または、VSTplayer等) 必要なもの1, マイクの音をMIDI変換してくれるソフト （Synodeia v2.0 , SafFron 2L等） 必要なもの2, MIDI変換されたデータをやり取りする仮想MIDIケーブル （MIDI Yoke, LoopBe1等） 必須ではない。必要な場合のみ。MIDIのIN/OUT機器が有る場合は本物のMIDIケーブルを使用してもOK。 VSTプラグインタイプのものをCantabile上で使用する場合には不要。

Synodeia v2.0 音声をリアルタイムにMIDI変換 VSTプラグイン 不自然にはなりますが、比較的かんたんで、使いやすいです。

SafFron 2L 音声をリアルタイムにMIDI変換 VSTプラグイン 他のソフトについても言えることですが、言葉を喋らせたり歌詞を歌わせるのは難しいかも。

Audio To MIDI $34.99 (試用30日) 音声をリアルタイムMIDI変換 他に仮想MIDIケーブルが必要。 歌詞を追う様なのは難しい、「らららら〜」等の単音で演奏するくらいなら可能

WIDI Audio to MIDI plugin 音声をリアルタイムにMIDI変換 VSTプラグインタイプ。VSTホスト内でMIDIデータのやり取りが可能な場合は、他の仮想MIDIケーブルが不要。 変換精度があまりよろしくない？（こちらの設定が悪いだけかも）。

Digital Ear Digital Ear Real-Time (full version) $129.95 デモ版は制限が多く、デモ版のままだと使い物にならない様子。

他試してみたものなど
Super-Eel 2.0 , AKoff Music Domposer(リアルタイム向かなそう) ,  Gatefish , TheExtractor ,
他色々、Audio to MIDI等で検索すると多々有ります。

「マイクでミクさんをリアルタイムにコントロールできました！」
「でも、何か変になります。」
「歌詞が勝手に先にすすんだり、超早口だったり、音程がおかしくなったり、これは結構無理があるかも。」
「まじめに考えている場合は、『ぼかりす 』の方にどうぞ。」

i2Mってのがハードウェアでinstrument to MIDIしてくれる

「で、ソフトを使わなくてもSonuus i2Mを使えば、音を入力するだけでMIDIコントローラからのデータとして出力してくれるのが有るよ。」
「そんな便利なものがあるなら先に言えお。」
「便利だけど、価格が結構する（19,800円くらい）。」

何故か同じものが複数ページ有ることがあるAmazon Sonnus i2M公式ページ（英語） 日本代理店 製品紹介ページ

「i2Mで、マイク音声をMIDI変換してみます。」
「こ、これも結構ひどいお。いきなり音が飛んだり、ミクさん勝手に早口になったりするお。」
「設定で範囲狭めたり、色々調節できるけど、なかなかうまくいかないかも。」
「i2Mはギターや、ピアノ、わかりやすい音色のシンセサイザーの単音なら、ある程度真面目に動作してくれるけど、和音やマイク音声は苦手みたい。」
「われわれが音痴な可能性も有るのでは？」
「それもあるかも。楽器ならそこそこ変換してくれる。」

「じゃ、ギターでミク演奏できるお。」
「でも、歌詞入れるとなかなかうまいこと歌詞移動が合わなかったりするよ。i2Mについてはまたの機会に何か書くかも。」

試してみたけど、いまいちでした＞＜

「マイクでミクさんリアルタイムコントロールは、一応できたけど、いまいちかも。そんな簡単にできたら、『ぼかりす』の立場が無いしね。」

「いまいちでした。」
「マイクじゃなく、MIDIキーボード等のコントローラ使う。あるいはリアルタイムじゃなく、ボカロエディタ使う。普通にコントロールした方が良さそう、って感じになってしまった。」
「今回は良い方法が見つからなかったけど、世の中どんどん便利になっていってるので、そのうち便利ソフトが出てきて、簡単になる日が来るかも。」

マトリクスシーケンサーでミク

「ついでに、リアルタイムでまじめに歌わせるんじゃなく、マトリクスシーケンサーで軽く楽しむのも良いんじゃないかという紹介。こういうのをMIDIコントローラ代わりにしてもOK。」

stepchild VSTプラグイン ステップシーケンサー

Blip2000 VSTプラグイン マトリクスシーケンサー

他にもMIDIコントロールに便利なもの

ChordSpace VSTプラグイン コードのボタンをクリックするだけ。

「楽器や楽譜がよくわかりませんが、音を出して遊べます。」
「適当に音を出して遊ぶのには便利。」