Mocap Fusion [ VR ]

Motion Capture Fusion [VR] ist eine immersive Mocap-Sandbox für Künstler und Animatoren, die Motion Capture-Animationen erstellen und exportieren oder Live-Inhalte mit herkömmlicher VR-Hardware erstellen möchten. Mit nur einem einzigen VR HMD und zwei Controllern können Benutzer Mocap auf ihren eigenen Avataren erstellen.

Fortgeschrittene Benutzer können detailliertere Bewegungserfassung einschließlich Ganzkörper-Tracking erstellen und können mit anderen Sensoren kombiniert werden (z. B. Apple IPhone Truedepth Sensor und Oculus Quest 2 optisches Finger-Tracking), um Avatare mit gleichzeitigen Eingaben zu verbinden.

Diese Fusion mehrerer Sensoren kann viele Schichten der Bewegungserfassung in einem einzigen Take kombinieren; einschließlich: Ganzkörper-Tracking, Gesichtserfassung, Lipsync, Blickverfolgung, optische Fingerverfolgung. Highlights Record Motion Capture mit benutzerdefinierten Avataren, Szenen und Requisiten. Fügen Sie benutzerdefinierte Shader, Texturen, Emotes-Ausdrücke, dynamische Knochenphysik und mehr hinzu.

Vive pro eye, Vive lip tracking und Iphone ARkit facecap Unterstützung. HTC Vive, Valve Index, Oculus Rift, Oculus Quest2, einige WMR-Headsets. Kann ohne VR, nur Tracker oder nur mit IPhone Head Tracking verwendet werden. Fügen Sie mehrere Avatare zu einer Szene hinzu, erstellen Sie Storyboards und reagieren Sie auf andere aufgezeichnete Avatare. Kamera Motion Capture und Zoom, Spieler fungiert als Kameramann in VR.

VTOL und Fixed Wing Flugsimulation Fahrzeugplattformen für Luftaufnahmen. Unterstützte Ausgabeformate Exporte nach SFM (.dmx). Exporte nach Blender (.blend). Exporte nach Unity (.anim). Live-Link (Live-Produktion) und Live-Recording Plugins Live Link Plugin verfügbar für Unreal Engine (Live-Avatar-Synchronisation, Live-Aufnahme). Live Link Plugin verfügbar für Blender (Live-Avatar-Synchronisation, Live-Aufnahme).

Live Link Plugin verfügbar für Unity (live avatar sync). Fügen Sie benutzerdefinierte Avatare hinzu und verwenden Sie den Avatar während des gesamten Produktionsworkflows. Dadurch entfällt die Notwendigkeit eines Retargetings und die Mocap-Daten passen immer 1:1, ohne dass es zu Offsets in den Endergebnissen kommt.

Eine der einzigartigen Eigenschaften von Mocap Fusion ist, dass es die Möglichkeit hat, Motion-Capture-Daten zu exportieren und die Szene in Blender zu rekonstruieren, so dass sie in wenigen Minuten für das endgültige Rendering zur Verfügung steht. Kompatible Headsets (VR HMDs) Ventilindex HTC Vive (und Vive Pro Eye) Oculus Quest (1 und 2). Optionale Tracking Hardware SteamVR Vive Tracker.

IPhone Truedepth Sensor (Facecap und Eye Tracking) . Oculus Quest 2 (vollständiges optisches Fingertracking). Kapazitäten Exportieren Sie Mocap und erstellen Sie sofort Szenen in BlenderTM. HTCTM Vive Trackers (Bis zu 11 optionale Punkte) Ganzkörper-Tracking. Fähigkeit zur Aufnahme, Wiedergabe, Pause, Slomo, Scrub Mocap in VR. Anpassbare IK-Profile und Avatarparameter.

SteamVR Knöchel Unterstützung für individuelle Finger Artikulation. Quest 2 optische Fingertracking-App für individuelle Fingerartikulation und Fingertrennung. Vive Pro Eye blinkt und Blickverfolgung unterstützt. Sidekick IOS Face-Capture-App (Truedepth markerless AR-Gesichtsverfolgung). Benutzeranpassbare Welten, Avatar und Props können mit dem APS SDK für Mocap erstellt werden.

Kompatibel mit vorhandenen Unity3DTM-Avataren und Umgebungen. Unterstützt benutzerdefinierte Shader auf Mocap-Avataren. DynamicBone unterstützt das Hinzufügen von Haar-, Kleidungs- und Körperphysik-Simulationen zu Avataren. Atemsimulation für zusätzliche Brustanimation. Hinzufügen/Aufzeichnen/Exportieren von VR-Kameras für realistische Kamera-Mocaps (z. B. VR-Kameramann-Effekt).

Optimierung für den Export von Mocap-Daten (.bvh) nach Daz 3D. Platzierung von "Streaming"-Kameras für das Livestreaming von Avataren zu OBS oder als Desktop-Overlays. Mikrofon-Audioaufnahme mit Lippen-Sync-Visemen und beschreibbarer Kieferknochenrotation. Storyboard-Modus, speichern Sie Mocap-Erfahrungen als Seiten zum Wiedergeben oder Bearbeiten später.

Animatische Video-Player, zeigen Geschichten und Skripte, Choreografie Bewegung. IK-Löser mit zwei Händen für den natürlichen Umgang mit Karabinern. Beschreibbare VTOL-Plattform zur Animation von Hubschrauberflugsimulationen (z. B. Nachrichtenhacker). VR-Camcorder und VR-Selfie-Cams können starr mit Trackern verbunden sein. VR-Requisiten und Schusswaffen können starr mit Trackern verbunden sein.

Geisterkurven zur Visualisierung der zukünftigen Standorte mehrerer Avatare in einer Szene. Gameplay Die Erfahrung hängt vom PC des Benutzers und der verwendeten Tracking-Hardware ab. Die empfohlenen SteamVR-Headsets sind der Valve Index oder das HTC Vive. Eine Quest HMD kann auch zu vernünftigen Ergebnissen führen. Es ist auch möglich, die Software ohne HMD zu verwenden (z.B. beim Livestreaming).

Das Ganzkörper-Tracking ist nur bei Verwendung von Füßen und Hüft-Trackern (und optionalen Ellenbogen, Knien, Brust) verfügbar. Benutzer können realistischere Tracking-Ergebnisse erzielen, wenn sie Body Tracker verwenden. Body Tracker sind optional und stehende Mocap wird unterstützt.

Weitere realität wird bei kompatiblen avataren erreicht, indem auch die gesichtserfassung aktiviert wird oder ein vive pro eye für blick- und blink-tracking verwendet wird.

Geschichte Ursprünglich wurde dies als intuitive Möglichkeit für Benutzer entwickelt, virtuelle Trainingsvideos und Präsentationen in einer immersiven VR-Umgebung für zusätzlichen Realismus zu erstellen und dann ihre Animation für das Rendern zu exportieren.

Das Projekt wurde einer Community für Beta-Tests zur Verfügung gestellt und hat seitdem Feedback und viele Feature-Anfragen erhalten, was dazu beigetragen hat, den Nutzen der Software für eine Vielzahl verschiedener Entwickler zu erhöhen.

Automatisch übersetzte Store-Beschreibung. Verbindlich sind die Angaben im jeweiligen Store.