芋の独り言

当ブログへのアクセスは当ブログのプライバシーポリシーに同意したものとみなします.

モーションキャプチャの代わりに筋電位

のばまんがVtuberつくる動画を見た後,ふと,思ったんですが, ああいうバーチャルキャラクターは現状モーションキャプチャーかマウス操作で動かしてるおり, 表情とかは事前にプログラムされてるものを適宜使っていると思うのですが,
ここで,モーションキャプチャーではなく全身の,特に顔の筋電位を取って, それを元にバーチャルのキャラクターを動かすことで本人とバーチャルのキャラクターの動きを同期させることで, リアルな表情やリアクションを再現できるのではないかと, ふと思いました.

顔中にペタペタ電極を貼るのはチョットキツイかな~とは思いますが, 脳波を取るよりも筋電位は取りやすいので, ハードルはそんなに高くないかと. まぁ,問題はソフトの部分で, 私が思うに,筋電位が活発になったところの部位とバーチャルのキャラクターの同じ部位を動かす... 何ていえばいいのでしょうか... 例えば,リアルの人間において右頬の筋電位が活発になったとき, バーチャルのキャラクターの右頬部分を上に動かすといった感じでしょうかね~

とにかく旨いこと動きを同期させられれば使えるといいますか, それなりに面白いことができると思いますね~ 顔の表情ができれば,全身の筋肉でも同様にできるでしょうね.