モンスター、マスコットとアニメーションの将来【UNREAL FEST EAST 2018】

モンスター、マスコットとアニメーションの将来 Jeffrey Dates Creative Director – Mill+

リアルタイムに移行するVFXのワークフロー This document contains confidential material of The Mill Group, Inc. Copyright © The Mill Group 2018

課題： アニメーションをどう リアルタイムにするか？ This document contains confidential material of The Mill Group, Inc. Copyright © The Mill Group 2018

解決策： スピードを重視した媒体への対応＝パペット！ This document contains confidential material of The Mill Group, Inc. Copyright © The Mill Group 2018

我々の答え: ＭＩＬＬ マスコット ゲームエンジンとモーションセンサーを融合したバーチャルパペッ トシステム。リアルタイムでインタラクティブに演じることができ るハイエンドなＣＧアニメーションの表現方法です。 This document contains confidential material of The Mill Group, Inc. Copyright © The Mill Group 2018

プロトタイプ

レシピ: o MILL Cyclops: トラッキングとリアルタイムのライティ ングとリフレクション用 o Leap Motion: キャラクター操作のためのインプット用 o Unreal Engine 4 This document contains confidential material of The Mill Group, Inc. Copyright © The Mill Group 2018

ポップラマ o クライアントのイベントにおける Karaoke / Music Video o ラマ • デザイン • モデリング • リギング • アニメーション o 体験 • 独自のデザイン • ダイナミックライティング • リアルタイム・トラッキング • リアルタイム・コンポジット • ジュークボックスカラオケ体験 • ビデオをメール This document contains confidential material of The Mill Group, Inc. Copyright © The Mill Group 2018

課題： どうやって毛むくじゃらのキャラクターをリアルタ イムに動かせるようにするか？ This document contains confidential material of The Mill Group, Inc. Copyright © The Mill Group 2018

リアルタイムファー o NVIDIA Hairworks o カスタム UE4 Branch This document contains confidential material of The Mill Group, Inc. Copyright © The Mill Group 2018

MONSTER.COM

今までのVFX: 50人以上の手作業で８週間以上必要 だったプロジェクト パイプライン • モデラー • リガー • アニメーター • ルックデブ • グルーミング • エフェクト • ライティング • マットペイント • コンポジット • エディット • カラー This document contains confidential material of The Mill Group, Inc. Copyright © The Mill Group 2018

This document contains confidential material of The Mill Group, Inc. Copyright © The Mill Group 2018

必要なファイル o モデル： ダウンレゾしたもの o リグ： マスコットのテンプレートを使用 o ルックデブ: 簡略化 UV リマップ テクスチャー o グルーム: ポートヘヤー ガイドのカーブ This document contains confidential material of The Mill Group, Inc. Copyright © The Mill Group 2018

UE4へ o キャラクター • リグ • ルックデブ • インプットコネクション o プロップ • マイク • バスケットボール o セットでのツール • カメラ • バーチャルカチンコ This document contains confidential material of The Mill Group, Inc. Copyright © The Mill Group 2018

ルックデブ+ファー（毛） o o o o o This document contains confidential material of The Mill Group, Inc. Copyright © The Mill Group 2018 モデル テクスチャ ガイドカーブ 初期ファー設定 最終的なファールックデブ

撮影 o o o o o o ディレクター パフォーマー エンジニア 録画係 プロデューサー クライアント This document contains confidential material of The Mill Group, Inc. Copyright © The Mill Group 2018

30スポット 3週間 1日 This document contains confidential material of The Mill Group, Inc. Copyright © The Mill Group 2018

学んだ事： o o o o o リハーサルと撮影の日の間に１日空ける必要がある。 パフォーマーによってカスタム設定が必要になる。 よい結果を求めるのなら Leap Motion データが必要。 センサーオクルージョンには限界がある。 １日だけでも相当数の撮影ができる。 This document contains confidential material of The Mill Group, Inc. Copyright © The Mill Group 2018

アップグレード！ o o o o o o CGのワークフローを最適化 カメラコントロール：FOV, ドリー、パン、レンズ Leap Motion を入力デバイスとしている 手によって、FABRIK IK または伝統的なIKを使い分ける 3Dの演技はシーケンサーで収録 キャラクターによってパフォーマー各自のセッティング This document contains confidential material of The Mill Group, Inc. Copyright © The Mill Group 2018

HPE Discover

HPE DISCOVER o キーノートプレゼンテーション • バーチャルパペットとのライブイ ンタラクション o エキスポフロア • The Mimic Wall • The Take Control Wall This document contains confidential material of The Mill Group, Inc. Copyright © The Mill Group 2018

表情豊かな顔 o フェイシャルリグ • ジョイントドリブン • リップ • より個性的に This document contains confidential material of The Mill Group, Inc. Copyright © The Mill Group 2018

ヘアースタイル o 複雑な毛並み • 直毛、縮毛のミックス • 風の影響も含めたテスト This document contains confidential material of The Mill Group, Inc. Copyright © The Mill Group 2018

グリッチ o ある種の味付け o ライブと録画された映像の間で起こる This document contains confidential material of The Mill Group, Inc. Copyright © The Mill Group 2018

撮影 o リハーサル o 複数のセットアップ o 微調整 o 事前収録アニメーションの 使用 This document contains confidential material of The Mill Group, Inc. Copyright © The Mill Group 2018

キーノート o スピーカーとのインタラク ション • 小道具 • モッキング • アドリブ o Back of House with cameras o キーノートのディレクター との打ち合わせ This document contains confidential material of The Mill Group, Inc. Copyright © The Mill Group 2018

MIMIC WALL o 来場者とのインタラクション o 写真を一緒に撮れる This document contains confidential material of The Mill Group, Inc. Copyright © The Mill Group 2018

操作 o 来場者が自分で操作できる o シンプルな操作性 o Tame It Button o スタンドアローンとして動く This document contains confidential material of The Mill Group, Inc. Copyright © The Mill Group 2018

使って分かったこと： o 演出は劇的に良くなった。収録とは全く違う感覚になる。 o HAIRWORKSのクオリティーとグルーミングを深く理解できた。 o バージョン2、パフォーマンスとクオリティーにおいてさらなる進化ができた。 o LeapMotionへの深い理解とその限界を知ることもできた。 o グリッチは見ている人にはそれがライブだとすぐには気付かれなかった。 This document contains confidential material of The Mill Group, Inc. Copyright © The Mill Group 2018

アップグレード! o 複数人数でのプレイを可能に。 This document contains confidential material of The Mill Group, Inc. Copyright © The Mill Group 2018

マスコットを長編作品に使用

シエナの海の仲間たち

マルチプレイヤー o ２人以上のプレイヤーが同時に演じることができる o サーバーネットワーク周りの構築が必要になる o 音声も同時に収録できる o 演者は声優が行う This document contains confidential material of The Mill Group, Inc. Copyright © The Mill Group 2018

使って分かったこと： o マルチプレーヤーをサポートする為にはロジックを一から構築する必要がある。 o オクルージョン問題を解決する為には精度の高いインプットが必要になる。 o システムのすべての面で改良が必要になる。 o マルチプレーヤーパペットは単純に面白い！ This document contains confidential material of The Mill Group, Inc. Copyright © The Mill Group 2018

現在開発中 o 全身のコントロール o iPhoneによるフェイシャル キャプチャー o Niagara との連携 This document contains confidential material of The Mill Group, Inc. Copyright © The Mill Group 2018

未来のアニメーション

メディアの移り変わり o テレビ業界はどんどんオンデマンド になる o ソーシャルメディアがニュースやエ ンタメ等の発表の場になる o それらのコンテンツにはアニメー ションが必要になる o アニメーションの需要は様々なメ ディアに必要になりつつある o メディア ＞＞ AR ＞＞ VR This document contains confidential material of The Mill Group, Inc. Copyright © The Mill Group 2018

今後の展望 o リアルタイムキャプチャーは 素晴らしい可能性を秘めてい る o 現段階で何に応用可能か? • ストップモーション • 劇場用コスチューム • ロボット操作・パペット o MILLマスコットのシステムが 未来のライブキャプチャーの スタンダードになり得る o リアルタイムパフォーマンス は新しい非常に刺激的な分野 である This document contains confidential material of The Mill Group, Inc. Copyright © The Mill Group 2018

Jeffrey Dates [email protected] ご清聴ありがとうございました LONDON NEW YORK LOS ANGELES CHICAGO 11-14 Windmill Street London, W1T 2JG T:+44 20 7287 4041 451 Broadway 4th/5th/6th Floor New York, NY 10013 T: +1 212 337 3210 3233 S. La Cienega Boulevard Los Angeles, CA, 90016 T: +1 310 566 3111 1000 West Fulton Market, Suite 250 Chicago, IL, 60607 T: +1 312 605 8900 This document contains confidential material of The Mill Group, Inc. Copyright © The Mill Group 2018