ダイキンCG Channel ウェビナー「フェイシャル：息づくキャラクターへ」のために用意したチャプター3 MetaHuman Animation 作例とエンディング動画です。

※ウェビナーの作例では効果音が間に合いませんでした…。

チュートリアル本編のアップの予定はしておりません。チュートリアル本編も含めた全編はダイキンCG Channel ウェビナーでご覧ください。

■ダイキン CG Channel ホームページ

「フェイシャル：息づくキャラクターへ」

一般公開期間：2024年2月28日（水）11:00～3月5日（火）23:00【無料：申し込み制】
（申込受付終了：3月5日（火）22:00）

https://www.comtec.daikin.co.jp/DC/cgchannel/video/240215_facial-character_sem/

ウェビナーではタイトルにもあるように、iPhone の Live Link Face による ARKit と MetaHuman Animator によるフェイシャルキャプチャーを題材としている。 制作にはUnrealEngine 5.32 と MetaHuman を使用した。

DCCツールとしてはZBrushとMaya、Photoshopをメインとしつつも様々なアプリを使用している。

また、こちら動画は全てフルパフォーマンスキャプチャー体制でモーションキャプチャーをおこなった。

モーキャプにはRokokoのキャプチャースーツとグローブに加え、iPhoneに対応したヘッドリグも使用している。

イヤーマフラーの Fur は髪の毛同様に XGen Interactive Grooming で作成し Groom としてインポート、マフラーボーンを仕込み kawaii physics で少しだけ動かしている。

まだ調整箇所が目につく頭部。主にスカルプトで修正する個所と XGen による Groom 部分。・・・テスクチャーも１か所あったか。。。

一見ライティングがあまりされていないように見えるが、実際は逆光の中、わずかな光で照らされ顔のディテールを表現するために正面側だけで６つのライトが配置されている。

ヘルメットのシーンで手が頭の付近にあるモーションキャプチャーでは、NGテイクが多くて困った。すぐに手が食い込んでしまう・・・

エンドロールでは個人制作において、どのようなツールを使用し何かをしたのかが分かるような工夫を施してみた。

キャラクター音声は自声 + Roland VT-4 に加え、ナレーションには AI音声合成による入力文字読み上げアプリを使用。入力文字読み上げは発声がおかしくなることが多いため、可能な限りチューニングし仕上げる努力をおこなった。

曲関係は入院中 ( 救急搬送による２回の入院で計14日間 ) の暇な時間を利用して suno ai を使用し、作詞した歌詞にアレンジを定義した上で曲のスタイルチョイスし曲の前半部を190パターンほど生成。そして生成した曲の中より使えそうな６曲を選出し、それらに56パターンの追加生成をおこない Full曲として仕上げたものを使用している。「ARKitについて」の BGM では 1990 年代の J-POP を強く意識し作成をしてみた。

また、調べ物やアイディア出しの相談役としてChatGPTをアシスタントとして起用。イメージのアイディア出しには Stable Diffusion も入院中は重宝した。

最後に

残念なのはろくに作り込めなかった上に、ウェビナーの開始が２週間延期になってしまったこと。原因は、ほとんどの作業が既に昨年末に終えていたのに、昨年末の年越し入院に加え、２月初旬の２か月連続入院・・・その影響で編集や調整がろくにできなかった。

「悔しいね」

■機材環境

• ・画像(テクスチャーも含む) / 映像

・サウンド

ナレーション

　VoicePeak ( AI音声合成入力文字読み上げアプリ )

音声調整

　Adobe Audition

音楽制作

　SUNO ( suno AI )