美少女キャラに人の表情とゲームパッドの動作をリアルタイムで反映するゲーム実況ムービー


YouTubeやニコニコ動画などの動画投稿サイトでは、日々数多くのゲーム実況動画がアップロードされています。そんな中、ゲームで遊んでいる最中の表情やゲームパッドの動きをリアルタイムで反映させることで、「プレイヤーの性別や年齢に関わらず誰でも美少女キャラになりきってプレイできる」というゲーム実況がニコニコ生放送で行われ、記事作成時点ではタイムシフト視聴が可能となっています。

【Downwell】FaceRig x Live2D x ボイスチェンジャで美少女キャラでDownwell - 2016/01/03 21:43開始 - ニコニコ生放送


かわいらしい女の子キャラクターは、手描きのイラストをもとに立体二次元モデルを構築して自由に動かすことが可能な「Live2D」で作られたもの。右側に表示されているゲームは、井戸を下っていく2Dジャンプアクション・シューティングゲーム「Downwell」です。


プレイヤーがまばたきすると、ウェブカメラで表情を認識するSteamのソフト「FaceRig」がプレイヤーの表情をリアルタイムで読み取ることで、女の子が目を閉じます。


ほかにも、眉を上下に動かしたり……


顔を下向きに動かしたり、といった細かい表情の変化や動作がキャラクターに反映されています。


また、ボイスチェンジャーソフト「AV Voice Changer Software 9.0 Diamond」を使うことで、実況主の発言を美少女ボイスで再生。おしゃべりに合わせてキャラクターの口元もしっかり動きます。


生放送の背景画像には、女の子の部屋っぽい写真を選択。


まるで美少女が部屋でゲーム実況を行っているような雰囲気を作り出しています。


「むむっ」と真剣な表情でゲームをプレイ。


実況主のGOROmanさんが今回のゲーム実況で使用したソフトは、「FaceRig(1480円)」+「FaceRig Live2D Module(398円)」+ボイスチェンジャーソフト「AV Voice Changer Software 9.0 Diamondの無料版」+「オリジナルのXboxコントローラーが実際のボタン入力に応じて画面内のゲームパッドが動くシステム」の合計1878円。GOROmanさんによれば特殊なデバイスは必要なく、比較的実現しやすいとのことです。

ゲームパッドの動きを画面に反映させるオリジナルの連動システムは、以下の動画で詳しく見ることができます。

さらに生放送後には、ゲームパッドを操作している「手」を組み込むことで、本当に美少女がゲームをしているかのようなリアルな見た目に進化しています。

・関連記事
人間の表情をリアルタイムでトラッキングして2次元のキャラクターになりきるとこうなる - GIGAZINE

リアルタイムで表情を読み取って3Dアニメをグリグリ動かすムービー - GIGAZINE

自分の表情をCGにリアルタイムに反映できるOculus Riftを使った装置が開発中 - GIGAZINE

怒り・悲しみ・喜びなどの表情を複数の映像を合成してリニアに作り出す技術「FaceDirector」をディズニーが開発 - GIGAZINE

表情を読み取ってリアルタイムで他人に転送できる驚異的な技術が開発される - GIGAZINE

これで誰でも顔面センター、地獄のミサワ風無料iPhoneアプリ「顔面キュッ!」 - GIGAZINE

人物の顔の美しさを偏差値で判定できる「顔面偏差値スカウター」 - GIGAZINE

309

in ネットサービス,   動画,   ゲーム, Posted by darkhorse_log