今までモーキャプDB内で、VTuberを動かす仕組みやデバイスについての記事をお届けしました。今回の記事ではVRゴーグルやトラッカーを使わず、Webカメラを使用してモーションを撮ることができる「Webcam Motion Capture」について紹介したいと思います。
Webcam Motion Captureについて
「Webcam Motion Capture」とは、AIを搭載したMotion Captureソフトウェアです。Webカメラを使うことによってカメラが捉えた体の動きや頭部、表情などの顔の動きをキャプチャーできる他、ハンドトラッキングで手を動かすことも可能です。
またiOS系のデバイスに搭載されているFace IDを利用した、パーフェクトシンク実装のフェイストラッキングアプリにも対応している上、配信ツールである「OBS Studio」と組み合わせることで、YouTubeやTwitchなど他の動画サイトでライブ配信を行うこともできます。
使用する機材はWebカメラのみで、市販で売っているカメラに対応しているのでお手軽にフルトラッキングを体験することができるのが魅力です。
Webcam Motion Captureの様々な機能
「Webcam Motion Capture」には3Dモデルを使って、ライブ配信や動画投稿を行うときに役に立つ、様々な機能が備わっています。また、他のソフトウェアと組み合わせることができるので、ライブ配信や動画投稿が気軽にできたり、フェイストラッキングができるアプリを使ってキャラクターに感情豊かな表情を加えたり、外部ツールを利用することで活動の幅を広げられるソフトウェアが多くあるので、役に立つ機能とツールをいくつか紹介していきます。
Webcam Motion Captureでフルトラッキング
「Webcam Motion Capture」のフルトラッキングは、ソフトウェアをダウンロードして起動した後に、メイン画面の「トラッキングモード」を全身に切り替えることで使用することが可能で、Webカメラを個別でセットアップする必要がありません。ただし、利用者の腰が映る位置にカメラのアングルを設定しないといけません。
Webカメラの前にいれば問題なくフルトラッキング機能を利用することができ、指の動きも細かくトラッキングすることができます。
フェイストラッキングができるアプリ
iOSとAndroidからリリースされているフェイストラッキング機能のあるアプリを使うことで、表情を動かすことが可能です。
iOSからは「waidayo」「Facemotion3d」「iFacialMocap」「VTuber Studio」の4つのアプリケーションを使うことができ、Androidからは「MeowFace」を使うことができ、いずれも無料で使うことができます。
注意点として1つのWebカメラで「Webcam Motion Capture」とフェイストラッキングのアプリケーションを同時に使うことができないので、使用するアプリケーション1つに付きWebカメラを用意する必要があります。スマートフォンをWebカメラとして使用することができるアプリケーションが無料で提供されているので合わせて利用してみると良いでしょう。
OBS Studioとの組み合わせ
「OBS Studio」とは無料で利用することができるアプリで、動画作成やライブ配信を行うことができます。「Webcam Motion Capture」と「OBS Studio」を組み合わせることで、リアルタイムでトラッキングを行ったままYouTubeや他の動画サイトでライブ配信を行うことができます。
「OBS Studio」はライブ配信だけでなく、トリミングやカット、フィルターの追加など基本的な編集機能が備わっています。
ただし、エフェクトやトランジションなどを使った編集を行いたい場合は動画編集専用ソフトが必要になるので注意が必要です。
まとめ
モーキャプDB内では「VTuberが動く仕組みについて」という題目で今まで執筆してきましたが、これからVTuber活動を始めたいと思っている人には「Webcam Motion Capture」を使って始めるのがオススメです。
これまで紹介した中には、モーションキャプチャスタジオを利用した活動やVRゴーグルやトラッカーを使った活動などを紹介してきました。いずれも利用するのに高額なものが多く、これからVTuber活動を行おうと思っている人たちの中には、気軽に利用することができない人も一定数いると思います。
「Webcam Motion Capture」であれば市販で売っているWebカメラを用意するだけなので、かなり安価で気軽にVTuber活動を始めることができるでしょう。
3Dモデルを使ってVTuber活動を行いたい人は是非試してみてはいかがでしょうか。