GaVS ist ein KI-Tool zur Videostabilisierung, das unstetes Material in ruhigere, filmischer wirkende Videos verwandelt. Es nutzt 3D-Rekonstruktion, um Kamerabewegungen zu schätzen und Verwacklungen zu korrigieren, und eignet sich für Clips mit starker Vibration oder komplexen Szenen.
Was GaVS macht
GaVS stabilisiert Videos mit einem 3D-Modellierungs- und lokalen Rekonstruktionsansatz. Dabei analysiert es Kamerabewegungen, gleicht Zittern aus und rendert ruhigere Frames neu, während das volle Bild erhalten bleibt (kein Zuschnitt an den Rändern).
Wichtige Funktionen:
Stabilisierung für stark verwackeltes Material
3D-Szenenrekonstruktion für präzisere Bewegungsschätzung
Rolling-Shutter- bzw. „Jello“-Kompensation
Verarbeitung dynamischer Objekte in der Szene
Vollbild-Stabilisierung ohne Verlust von Bildrändern
Einstellbare Stabilisierung über Parameter
Integration mit monokularer Tiefenschätzung und optischem Fluss
So wird es verwendet
GaVS ist als kostenloses Desktop-Programm über ein GitHub-Repository verfügbar. Es läuft lokal und benötigt Python 3.10 sowie CUDA 12.6.
Typische Einrichtungsschritte:
Python 3.10 installieren
Das GaVS-Repository von GitHub herunterladen
Eine conda-Umgebung erstellen
Abhängigkeiten aus requirements-torch.txt installieren
Das Dataset und vortrainierte Modelle herunterladen
train.py ausführen, um das Video zu verarbeiten
Stabilisierungseinstellungen in der Konfiguration anpassen
evaluate.py ausführen, um die Ergebnisse zu prüfen
Die Dokumentation und die Oberfläche sind auf Englisch.
