GESICHTS-MOCAP MITTELS KI

Gesichtserfassung aus Live-Videos oder Aufzeichnungen

Das AccuFACE Plugin für iClone ist ein KI-Gesichts-Tracker, der von der NVIDIA RTX GPU unterstützt wird. Er erfasst Gesichtsausdrücke sowohl von Webcams als auch von herkömmlichen Videodateien. AccuFACE zeichnet sich durch außergewöhnliche Genauigkeit und Reaktionsschnelligkeit bei guten Lichtverhältnissen aus und ist in der Lage, Gesichtsbewegungen exakt mit Spracheingaben zu synchronisieren. Die AccuLIPS-Technologie ermöglicht die Aufzeichnung von Vollbild-Animationen für professionelle Produktionen und industrielle Anwendungen. Zudem ermöglicht sie eine Feinabstimmung der Lippen- und Zungenbewegungen und gewährleistet durch Timecode-Matching höchste Präzision.

*Erfordert iClone 8 (v8.33 oder höher)   |   Systemanforderungen

AUFZEICHNUNG VON PERFORMANCES AUS BELIEBIGEN VIDEOQUELLEN

LIVE WEBCAM

Gesichts-Tracking in Echtzeit

AccuFACE ist kompatibel mit USB-Webkameras oder Laptops mit integrierten Webcams und bietet eine optimale Tracking-Auflösung von 720p bei 30 Bildern pro Sekunde. Da die Videoausrichtung angepasst werden kann, ist auch bei Verwendung eines Helms eine gleichmäßige Erfassung des Gesichts bei gleichzeitiger Körper- und Handverfolgung gewährleistet.
Empfohlene technische Merkmale für Webcams >

VIDEO AUFZEICHNUNG

Unabhängige videobasierte Erfassung

Vermeiden Sie hohe Kosten für spezielle Mocap-Ausrüstung und nutzen Sie stattdessen Standardkameras oder handelsübliche Mobiltelefone, um Filmmaterial zu erstellen. Wenn Sie als Animator kein Originalmaterial haben, können Sie auch vorhandene Videos von Plattformen wie YouTube, Instagram und anderen einsetzen.

UNTERSTÜTZUNG VON REMOTE KOOPERATIONEN

Die präzise Verfolgung von Gesichtern in Standard-Videoaufnahmen ist ein revolutionärer Fortschritt. Mit AccuFACE können Produktionsstudios nahtlos mit professionellen Schauspielern oder Sprechern auf der ganzen Welt zusammenarbeiten. Die Abhängigkeit von der Ausrüstung sowie zeitliche und örtliche Einschränkungen bei der Animation entfallen.

KALIBRIERUNG FÜR PRÄZISION UND INDIVIDUALITÄT

Mimik-Optimierung

Definieren Sie einen neutralen Gesichtszustand, der als Grundlage für eine Reihe von Gesichtsausdrücken dient. Durch eine zusätzliche Kalibrierung der Augenbrauenbewegung kann die Authentizität der einzelnen Darsteller und ihrer individuellen Performance sichergestellt werden.

LIVE-MODE Kalibrierung

Passen Sie die Gesichtsparameter des Charakters durch einen geführten Prozess an den Live-Darsteller an und erhalten Sie sofortiges Animationsfeedback für die Feinabstimmung.

VIDEO-MODE Kalibrierung

Wenn es schwierig ist, die idealen Kalibrierungsposen aus einer einzigen Videoquelle zu erhalten, bietet AccuFACE die Möglichkeit der flexiblen Suche nach Kalibrierungsbildern in mehreren Videodateien.

UMFASSENDE MOCAP-BEARBEITUNG

Die perfekte Technologie zur Erfassung von Gesichtern ist nach wie vor eine Herausforderung, da Animatoren immer noch mit verschiedenen Fehlern wie Rauschen, Zucken, Störungen und Aussetzern zu kämpfen haben. AccuFACE bietet ein umfassendes Toolkit zur Bewältigung dieser Herausforderungen und bringt Künstler dem Ziel einer fehlerfreien Animation näher.

Stärken Balance

Um eine realistischere Darstellung zu erzielen, können Sie die Bewegung bestimmter Gesichtspartien verstärken oder modulieren. So können Sie auch in einen anderen Animationsstil wechseln.

Glättungsfilter

Korrigieren Sie unerwünschte Verzerrungen in den Trackingdaten, die durch zu große Trackingwinkel, übermäßige Haarabdeckung oder ungleichmäßige Beleuchtung und Schattenbildung verursacht werden.

Rauschunterdrückung

Zittern kann alle Arten der Bewegungsverfolgung beeinträchtigen. AccuFACE Denoise ist in der Lage, unruhige Bewegungen ohne Leistungseinbußen zu glätten.

Anti-Interferenz

Interferenzen und Cross-Triggering können zu undeutlichen Gesichtsausdrücken führen. Mit der AccuFACE-Interferenzunterdrückung werden unerwünschte Kopf-, Stirn- und Mundbewegungen reduziert.

PRÄZISER AUDIO-ABGLEICH

EINFACHE AUDIO-SYNCHRONISATION

Im Gegensatz zu Mocap-Lösungen für das Gesicht, die einen separaten Audioabgleich erfordern, erfasst AccuFACE sowohl die Audiodaten als auch die Gesichtsanimation in einem einzigen Durchgang. Dadurch können sprachsynchronen Animationen schnell generiert werden, unabhängig davon, ob sie von einer Live-Webcam oder einem zuvor aufgezeichneten Video stammen.

Unabhängig von der Framerate des Quellmediums - ob 24, 30 oder 60 fps - erzeugt die AccuFACE-Engine konsistente, audio-synchrone Animationen entsprechend der Quell-Framerate.

 

ARTIKULATION VON LIPPEN UND ZUNGE

AccuLIPS ermöglicht komplizierte Lippen- und Zungenbewegungen, bei denen andere Gesichts-Mocap-Systeme versagen. AccuLIPS extrahiert Textdaten aus der Stimme. Dadurch wird eine zusätzliche Gesichtsspur für eine präzise Lippensynchronisation erzeugt. Für die Feinabstimmung des Gesichts-Mocap können Sie den Gesichts-Key-Editor, die Gesichtsebenen und den Kurveneditor von iClone nutzen.

UNTERSTÜTZUNG MEHRERER SPRACHEN

Durch geschicktes Umgehen der Sprache-zu-Text-Erkennung ermöglicht AccuLIPS auch die Verwendung von nicht-englischen Sprachen. Die Lippenerkennung und die Präzision der Spracherkennung können durch das Hinzufügen zusätzlicher Textskripte weiter verbessert werden, und es stehen kostenlose Tools zur Verfügung, mit denen nicht-englische Audiodateien in ihre romanisierten Äquivalente konvertiert werden können.

TIMECODE-SYNCHRONISATION FÜR VERLUSTFREIE AUFNAHMEN

Basierend auf der ausgewählten Webcam oder der aufgezeichneten Video-Framerate garantiert der Timecode-Abgleich Vollbildaufnahmen, unabhängig von den Spezifikationen und der Leistung Ihres Computers.

KI-BASIERTE MOTION-TRACKING-TECHNOLOGIE

SYSTEMVORAUSSETZUNGEN

Software | iClone v8.33 oder höher

Betriebssystem | Windows 10 64-bit oder höher

Grafikkarte | NVIDIA GeForce RTX 2060, Quadro RTX 3000, TITAN RTX oder höher

Grafikkartentreiber|NVIDIA Grafiktreiber Version 520.46 oder höher

Kamera | Webcam oder am Kopf befestigte Kamera: 1280x720, 30 fps oder höher

Unterstützte Videoformate | AVI, WMV, MP4, MKV und MOV - Codecs für einige Videoformate erforderlich

*Motion Live ist ein Bestandteil von iClone8.

FAQ