Beschreibung
anymove ist ein GitHub-Repository, das sich der fortschrittlichen Bewegungsaufnahme-Technologie widmet und es den Benutzer:innen ermöglicht, Bewegungen für jede Kreatur aus einem einzigen KI-Video zu erfassen. Das Projekt nutzt ein ausgeklügeltes Setup, das zwei Kamerasichten innerhalb eines Rahmens integriert und die Genauigkeit und Detailgenauigkeit des Bewegungsaufnahmeprozesses verbessert.
Weiterlesen
Im Kern verwendet anymove einen DINOv2-Gelenkleser, ein leistungsstarkes Element, das die Bewegungen von Kreaturen im Video interpretiert und verfolgt. Dies ermöglicht eine präzise Artikulation und Replikation von Bewegungen, was es für eine Vielzahl von Anwendungen in Animation, Spielentwicklung und Forschung geeignet macht. Das System ist so konzipiert, dass das Rig der Kreatur in beiden Kamerasichten genau angepasst wird, um konsistente und qualitativ hochwertige Bewegungsdaten zu gewährleisten.
Die Ausgabe des anymove-Prozesses ist eine GLB-Datei, ein weit verbreitetes 3D-Modellformat, das Geometrie, Materialien und Animationen umfasst. Dies macht die erfasste Bewegung leicht übertragbar und nutzbar in verschiedenen 3D-Softwareanwendungen und Plattformen. Die Open-Source-Natur des Projekts fördert die Beiträge der Community und ermöglicht kontinuierliche Verbesserungen und Anpassungen an neue Herausforderungen in der Bewegungsaufnahme.
Aktuelle Updates im Repository zeigen eine fortlaufende Entwicklung, wobei Commits Funktionen wie Gelenkgewichte, Pflanzenhysterese und neu gestaltete Geh- und Laufaufforderungen ansprechen, was auf einen Fokus auf die Verfeinerung des Realismus und der Flexibilität der Bewegungsaufnahme hinweist. Das Projekt umfasst auch Werkzeuge zum Erstellen des endgültigen Pakets einer Kreatur und hat Anstrengungen unternommen, um die Kompatibilität mit Windows-Betriebssystemen sicherzustellen, wodurch die Zugänglichkeit für eine breitere Benutzerbasis erhöht wird. Der Schwerpunkt auf der Rahmung jeder Kreatur mit ihrer eigenen Kamera unterstreicht das Engagement des Projekts für detaillierte und anpassbare Lösungen zur Bewegungsaufnahme.
- KategorieComputer-Vision-Tools
- PreismodellOpen Source
- BereitstellungCloud
- PlattformenWindows
anymove's Kernfunktionen
Bewegungsaufnahme aus einem einzigen KI-Video
Unterstützt jede Kreaturenart
Nutzen von zwei Kameras in einem Rahmen für verbesserte Daten
Integration des DINOv2-Gelenklesers für präzises Tracking
Rig-Anpassung in beiden Kamerasichten
Ausgabe von Bewegungsdaten im GLB-Format
Gelenkgewichte für detaillierte Kontrolle
Pflanzenhysterese für realistische Bodeninteraktion
Neu gestaltete Geh- und Laufaufforderungen für abwechslungsreiche Animationen
Werkzeuge zum Erstellen des endgültigen Pakets einer Kreatur
Kompatibilität mit Windows-Betriebssystemen
Individuelle Kamerarahmung für jede Kreatur
Erste Schritte mit anymove
Repository klonen: Erhalten Sie die Projektdateien, indem Sie das anymove-GitHub-Repository auf Ihren lokalen Computer klonen.
Abhängigkeiten installieren: Richten Sie die erforderliche Software und Bibliotheken ein, indem Sie die Anweisungen in der `requirements.txt`-Datei befolgen.
Umgebung konfigurieren: Passen Sie die Umgebungsvariablen nach Bedarf an, möglicherweise unter Verwendung der Datei `.env.example` als Leitfaden.
Kreaturen-Rig vorbereiten: Verwenden Sie die bereitgestellten Werkzeuge im Verzeichnis `blender`, um das endgültige Paket und Rig Ihrer Kreatur zu erstellen und vorzubereiten.
KI-Video verarbeiten: Geben Sie Ihr KI-Video in das System zur Bewegungsaufnahme ein und nutzen Sie den DINOv2-Gelenkleser.
GLB-Ausgabe generieren: Erhalten Sie die erfassten Bewegungsdaten als GLB-Datei, die bereit für die Verwendung in 3D-Anwendungen ist.
Bewegung optimieren: Wenden Sie Gelenkgewichte, Pflanzenhysterese und andere Aufforderungen an, um die erfasste Bewegung zu verfeinern und anzupassen.
anymove's Anwendungsfälle
- 3D-Animationsproduktion
- Spielentwicklung
- Virtuelle Realitätserlebnisse
- Charakter-Rigging
- Biomechanische Forschung
- Erstellung von Bildungsinhalten






