ウェブカメラだけで表情＆動作をトラッキング可能な誰でもVTuberになれるアプリ「Kalidoface Lab」を使ってみた
VTuberになるには、3Dモデルに加えて顔の動きや表情を読み取るためのトラッキングデバイス＆ソフトウェアが必要です。しかし、「3Dモデル」「トラッキングデバイス＆ソフトウェア」の準備にはコストがかかるのが難点。GoogleのAI研究者であるRich 氏が開発した無料ウェブアプリ「Kalidoface Lab」なら、ウェブカメラだけで表情＆体の動きをトラッキングして簡単にVTuberになれるとのことなので、実際に使ってみました。
Kalidoface Lab
https://lab.kalidoface.com/
上記のリンクからKalidoface Labにアクセスすると、画面内に3Dアバターが表示されます。ウェブカメラを用いたトラッキングを実行するには、画面右側のカメラボタンをクリック。
カメラの使用許可を求められたら「許可する」をクリックします。
これで、ウェブカメラに向かって表情を変えたり顔を動かしたりするだけで3Dアバターに動きを反映できるようになりました。
実際に3Dアバターを動かしまくる様子が以下。顔を左右に動かしたり首を回したりする動きに加えて「口の開閉」「目の開閉」「視線」も再現できています。
・関連記事
無料でブラウザ上で誰でも簡単に美少女VTuberに受肉できる「Kalidoface 3D」レビュー - GIGAZINE
超小型＆超軽量なモバイルモーションキャプチャ「mocopi」とスマホがあればいつでもどこでもバーチャル美少女に受肉できる - GIGAZINE
PCとウェブカメラだけで簡単にVTuberになれるツール「VMagicMirror」レビュー、ゲームコントローラーでアバターを操作することも可能 - GIGAZINE
無料＆PCとウェブカメラだけで簡単にVTuberになれるツール「RiBLA Broadcast (β)」レビュー、指の動きもトラッキング可能で配信に即利用可能 - GIGAZINE
無料でウェブカメラがあればブラウザから誰でも簡単にVTuberになれる「Webcam VTuber」を使ってみた - GIGAZINE
・関連コンテンツ
