自作キャラリアルタイム姿勢推定テスト in Unity

姿勢推定はMediapipeが有名ですが、環境構築が煩雑で配布等には向かないと思ったので、今回はVMC protocol、EVMC4Uを利用してモデルの動作を同期させました。
最初はFBXでの動作を期待したんですが上手くいかなかったので、泣く泣くVRMに変換しました

3 3

EVMC4UでUnityにバーチャルモーションキャプチャーのモーションを送り、この画像のスクリプトを割り当て、VRMModelにモデル、KaraagePrefabにから揚げモデル(RigidBodyをつけて重力で落ちる)のPrefabを設定して実行してください。あとはキーボードのKを押すだけで右手からから揚げが出現します

14 32

昨夜の生放送のアーカイブ動画はこちら!
※視聴者のせいにして(反省)ガチへこみしているコバブルも見られます
https://t.co/P91LY6OjBH

6 13

UnityCaptureを通してOBSに表示すると色が変になる問題、映像キャプチャデバイスのプロパティの色範囲を”全部”にすることで解決できた!これで取り込むのラクになるぞい

4 12

バーチャルモーションキャプチャー+EVMC4Uでunityに入れました!
導入簡単で素晴らしいです。

41 140