AI フェイシャルモーキャップ

ライブまたは録画ビデオからのフェイストラッキング

iClone 用 AccuFACE プラグインは、NVIDIA RTX GPU を利用した AI フェイシャルトラッカーで、ウェブカメラと従来のビデオファイルのどちらからでも表情をキャプチャすることができます。 AccuFACE は適切な照明条件下での卓越した精度と応答性に加え、顔の動きと音声入力をスムーズに同期させることも可能です。 また独自の AccuLIPS テクノロジーによって、唇や舌の細やかな動きを巧みに再現します。 さらにタイムコード・マッチングによって、プロフェッショナルプロダクションや業務用アプリケーションに不可欠な、正確なフルフレーム・アニメーション・レコーディングを実現します。

*iClone 8(v8.33以上)が必要です   |   システム要件

あらゆるビデオソースからパフォーマンスをキャプチャ

ライブウェブカム

リアルタイムフェイストラッキング

AccuFACE は、スタンドアロン型 USB ウェブカメラあるいはウェブカメラ内蔵型のノートパソコンに対応しており、最高 720p のトラッキング解像度を30フレーム/秒で提供します。ヘルメットに装着したセットアップでビデオの方向調整が可能なので、身体と手のトラッキングと並行して安定した顔のキャプチャが保証されます。
ウェブカメラの推奨スペック >

録画ビデオ

録画ビデオスタンドアロン型
ビデオベース検出

特殊なモーキャップ機器にかかる高額なコストを省き、コンシューマーグレードのカメラや一般的な携帯電話を使って映像を作成しましょう。オリジナルの素材を持っていないアニメーターには、YouTube や Instagram などのプラットフォームから既存の動画を転用するという強力な選択肢があります。

リモートコラボレーションに力を与える

標準的な録画ビデオからの正確なフェイシャルトラッキングは、この機能に革命的な飛躍をもたらします。AccuFACE を使用すれば、制作スタジオは世界中のプロの俳優や声優とシームレスにコラボレーション作業を行うことが可能となり、アニメーションの生産性を機材依存や時間と場所の制約から解放することができます。

精度&個性に対するキャリブレーション

表情レンジの最適化

あらゆる表情のベースラインとして、ニュートラルな顔の状態を定義することができます。眉の動きを詳細にキャリブレーションすれば、それぞれの俳優ごとの存在感とそのユニークな演技を追及することが可能です。

ライブモードでの
キャリブレーション

使い易いガイド付きプロセスで、ライブパフォーマーに合わせてキャラクターのフェイシャル設定を操作し、アニメーションのフィードバックを即座に受け取って綿密に改良することができます。

ビデオモードでの
キャリブレーション

ビデオモードでのキャリブレーション単体のビデオソースから理想的なキャリブレーションポーズを取得することが困難な場合は、AccuFACE は複数のビデオファイルを横断してキャリブレーションに適したフレームを検索する柔軟性を有しています。

あらゆる条件下でのモーキャップのリファイン

アニメーターは未だにノイズ、ちらつき、干渉、撮影ミスなど、さまざまな些細な欠陥と格闘し続けており、完璧なフェイシャル・キャプチャー技術にはまだ多くの課題が残されています。AccuFACE は、このようなよく見受ける課題に対処するために包括的なツールキットを提供し、完璧なアニメーション実現への歩みをアーティストにもたらします。

強度バランス

顔の特定の部位の動きを強調・調節することにより、演技をよりリアルに描写したり、異なるアニメーションスタイルに移行させたりできます。

スムーズフィルター

トラッキング角度からの逸脱、髪の毛による障害、不均一な照明や影といった問題によって、トラッキングデータから生じる望ましくないちらつきを排除します。

ノイズ削除

ジッターは、あらゆるレベルでモーショントラッキングの悩みの種です。AccuFACE Denoise は、パフォーマンスの質を損なうことなく、不安定なモーションを効果的にスムージングすることができます。

干渉防止

リージョン間をまたいだ干渉やトリガーの重複は、表情の乱れにつながります。AccuFACE の干渉キャンセルによって不要な頭、眉、口の動きを抑えることができます。

正確なオーディオマッチング

シングルパスの
オーディオシンク

音声とパフォーマンスを完全に同期させるために別々の音声アライメントを必要とするフェイシャルモーキャップソリューションとは異なり、AccuFACE は音声データとフェイシャルアニメーションの両方をシングルパスでキャプチャします。これにより、ライブ・ウェブカムや録画済みのビデオなどソースを問わず、ボイスシンクしたアニメーションを迅速に生成することが可能になります。

ソースメディアのフレームレートが24、30、60fpsのいずれに設定されていても、AccuFACE エンジンはソースのフレームレートに従った音声同期アニメーションを一貫して生成できます。

 

唇と舌の調音

AccuLIPS なら、他のフェイシャルモーキャップシステムでは不十分な、複雑な唇と舌のモーションも可能です。AccuLIPS は音声からテキストデータを抽出することによって、正確なリップシンクに必要な口形素のトラックを追加生成します。繊細なフェイシャルモーキャップを完全にコントロールするためには、iClone のフェイシャルキーエディタ、フェイシャルレイヤー、カーブエディタをご活用ください。

多言語対応

AccuLIPS は音声テキスト認識を巧みにバイパスすることで、英語以外の言語にも機能を拡張することができます。リップ検出およびその精度は、テキストスクリプトを追加することで大きく向上させることが可能で、また、英語以外の音声ファイルをローマ字表記に変換するツールも無料でご提供しています。

ロスレス・レコーディングのためのタイムコード同期

タイムコード・マッチングは、コンピュータの仕様や性能に関係なく、使用しているウェブカメラや録画されたビデオのフレームレートに基づくフルフレームでの録画をお約束します。

AI を活用したモーショントラッキング技術

システム要件

ソフトウェア | iClone v8.33 以上

OS | Windows 10 64ビット以降

GPU | NVIDIA GeForce RTX 2060、Quadro RTX 3000、TITAN RTX、またはそれ以上

GPU ドライバ|NVIDIA ディスプレイドライバ バージョン520.46以上

カメラ | ウェブカメラまたはヘッドマウントカメラ:1280x720、30 fps 以上

対応ビデオフォーマット | AVI、WMV、MP4、MKV、MOV - 特定のビデオフォーマットに必要なコーデック

*Motion Live は iClone8 の一部です。

FAQ