スポンサーリンク
配信・vtuber・動画編集

LeapMotionで3teneの3Dキャラのモーションを付けてみた

へたれちゃんのFPS上達・配信・マイニング・カメラ講座 | LeapMotionで3teneの3Dキャラのモーションを付けてみた 配信・vtuber・動画編集
スポンサーリンク
へたれちゃんのFPS上達・配信・マイニング・カメラ講座 | LeapMotionで3teneの3Dキャラのモーションを付けてみた
へたれ

webカメラの表情認識だけだと3teneの配信だと手が動かないよ~

へたれちゃんのFPS上達・配信・マイニング・カメラ講座 | LeapMotionで3teneの3Dキャラのモーションを付けてみた
ラビ

LeapMotionを使うといいぞ

3teneを使った3D配信

Facerigから3teneへ移行したが・・・

筆者はもともとFacerigを使った配信をしていた。が、やはり時代は3DということでVroidを使用して作成したモデルを、3tenePROにて動かすというトライをしている。

これ自体は非常にうまくいき、自分のモデルがWebカメラの表情認識で上半身がグリグリ動くのは見ていて楽しい。のだが、はやり人間というのは欲が出るもので、「手も動かしてえよなぁ」となってくる。

LeapMotionが対応している

3teneはLeapMotionというVR機材が対応しているようだ。値段も1万円弱とお安く、これならば簡単に導入できそうだということで、購入してみたぞ。

へたれちゃんのFPS上達・配信・マイニング・カメラ講座 | LeapMotionで3teneの3Dキャラのモーションを付けてみた
https://developer.leapmotion.com/#

ダウンロード編

まずは公式サイトにいってドライバーのダウンロードだ。

へたれちゃんのFPS上達・配信・マイニング・カメラ講座 | LeapMotionで3teneの3Dキャラのモーションを付けてみた
筆者環境はwindows10。他にもmacやlinuxなどが対応しているようだ。

へたれちゃんのFPS上達・配信・マイニング・カメラ講座 | LeapMotionで3teneの3Dキャラのモーションを付けてみた
ダウンロードにはアカウント認証が必要だ。適当に作ってしまおう。

へたれちゃんのFPS上達・配信・マイニング・カメラ講座 | LeapMotionで3teneの3Dキャラのモーションを付けてみた
accept
へたれちゃんのFPS上達・配信・マイニング・カメラ講座 | LeapMotionで3teneの3Dキャラのモーションを付けてみた
ダウンロードができたら実行しよ。

インストール編

へたれちゃんのFPS上達・配信・マイニング・カメラ講座 | LeapMotionで3teneの3Dキャラのモーションを付けてみた
インストーラーをクリックして次へ
へたれちゃんのFPS上達・配信・マイニング・カメラ講座 | LeapMotionで3teneの3Dキャラのモーションを付けてみた
規約に同意しよう。
へたれちゃんのFPS上達・配信・マイニング・カメラ講座 | LeapMotionで3teneの3Dキャラのモーションを付けてみた
次へ
へたれちゃんのFPS上達・配信・マイニング・カメラ講座 | LeapMotionで3teneの3Dキャラのモーションを付けてみた
次へ
へたれちゃんのFPS上達・配信・マイニング・カメラ講座 | LeapMotionで3teneの3Dキャラのモーションを付けてみた
次へ
へたれちゃんのFPS上達・配信・マイニング・カメラ講座 | LeapMotionで3teneの3Dキャラのモーションを付けてみた
インストール
へたれちゃんのFPS上達・配信・マイニング・カメラ講座 | LeapMotionで3teneの3Dキャラのモーションを付けてみた
へたれちゃんのFPS上達・配信・マイニング・カメラ講座 | LeapMotionで3teneの3Dキャラのモーションを付けてみた
これにて完了だ。

起動編

へたれちゃんのFPS上達・配信・マイニング・カメラ講座 | LeapMotionで3teneの3Dキャラのモーションを付けてみた
早速実行してみよう。
へたれちゃんのFPS上達・配信・マイニング・カメラ講座 | LeapMotionで3teneの3Dキャラのモーションを付けてみた
Tracking Visuaizerで認識状態を確認。
早速認識した。
へたれちゃんのFPS上達・配信・マイニング・カメラ講座 | LeapMotionで3teneの3Dキャラのモーションを付けてみた
・・・しかし位置調整が非常に難しい。
カメラの性能のせいなのか、すぐにトラッキングが外れてしまうのが問題だ。
特に左手、右手の距離が離れているとトラッキングが外れてしまう印象。
へたれちゃんのFPS上達・配信・マイニング・カメラ講座 | LeapMotionで3teneの3Dキャラのモーションを付けてみた
ちなみに常駐アイコンがあるのでこちらからもトラッカーは起動可能だ。

3teneでの使用

早速、3teneで使用してみよう。

へたれちゃんのFPS上達・配信・マイニング・カメラ講座 | LeapMotionで3teneの3Dキャラのモーションを付けてみた
アバター調整画面で、アバターの操作方法をLeapMotionに指定しよう。
へたれちゃんのFPS上達・配信・マイニング・カメラ講座 | LeapMotionで3teneの3Dキャラのモーションを付けてみた
そしてトラッキングの開始画面の全身操作を開始する。

へたれちゃんのFPS上達・配信・マイニング・カメラ講座 | LeapMotionで3teneの3Dキャラのモーションを付けてみた
すると、筆者の手の状態と3Dモデルとが連動して動いてくれるようになった!
へたれちゃんのFPS上達・配信・マイニング・カメラ講座 | LeapMotionで3teneの3Dキャラのモーションを付けてみた
ただこれらの動きはかなりぎこちなく、調整がかなり面倒だった。
LeapMomtionの操作方法でモードを色々変更して調整する必要があったぞ。
へたれちゃんのFPS上達・配信・マイニング・カメラ講座 | LeapMotionで3teneの3Dキャラのモーションを付けてみた
Tracking Control Panel側では上下の反転などを行い、3tene側と仕様を合わせる必要があった。
へたれちゃんのFPS上達・配信・マイニング・カメラ講座 | LeapMotionで3teneの3Dキャラのモーションを付けてみた
細かい調整については、3teneのアバター調整にて行える。

まとめ

さて、今回はLeapMotionによる両手のトラッキングに調整した。

正直言うとハード・ソフト側での完成度がまだまだ。一応使えるがこれを使ってのVtuberとしての実況プレイには無理があるかな?というのが正直なところ。

・トラッキングが途中で外れてしまうことがある
・3tene側のLeapMotionの調整が細かくできないため、意図した手の状態を表現できない
・本体をどこに置けばよいか非常に悩む。机の上だと認識し辛いし、ヘッドマウントだとケーブルが邪魔。

といった問題がある。
面白いデバイスなのだが、ソフト側のアップデートに期待という感じだ。

本体をどこに置くかが悩みどころな本機だが、 首掛けホルダーを使用する、マイクスタンドにくくりつけるといった方法がいいかんじだった。

へたれちゃんのFPS上達・配信・マイニング・カメラ講座 | LeapMotionで3teneの3Dキャラのモーションを付けてみた
へたれ

自分の両手の動きを3Dモデルに再現できるのは面白いね。

へたれちゃんのFPS上達・配信・マイニング・カメラ講座 | LeapMotionで3teneの3Dキャラのモーションを付けてみた
ラビ

動画作成には使えそうだがまだまだ作り込みが甘い感があるね

スポンサーリンク
へたれちゃんのFPS上達・配信・マイニング・カメラ講座 | LeapMotionで3teneの3Dキャラのモーションを付けてみた
へたれちゃんのFPS上達・配信・マイニング・カメラ講座

コメント

タイトルとURLをコピーしました