Die neue virtuelle Kamera von Stability AI verwandelt jedes Foto in ein atemberaubendes 3D-Video und ich bin von der Qualität beeindruckt.

Stabilitäts-KI-Videos verleihen Texten und Bildern schon seit Jahren Bewegung und Leben, aber jetzt fügen sie buchstäblich eine neue Dimension hinzu, indem sie 2D-Bilder in 3D-Videos verwandeln. Diese Technologie ist eine qualitative Ergänzung im Bereich der generativen künstlichen Intelligenz für Videos.

Das neue Tool „Stable Virtual Camera“ des Unternehmens ist darauf ausgelegt, sogar ein einzelnes Bild zu verarbeiten und es in ein animiertes Video mit mehreren Perspektiven umzuwandeln, d. h. Sie können das Video drehen und es aus jedem beliebigen Winkel betrachten. Mit diesem Tool können Sie ganz einfach innovative 3D-Videoinhalte erstellen.

Dieses Konzept ist nicht ganz neu, da virtuelle Kameras schon seit langem ein fester Bestandteil der Film- und Animationsproduktion sind und es den Machern ermöglichen, durch digitale Szenen zu navigieren und diese zu manipulieren. Aber Stability AI greift dieses Konzept auf und fügt eine kräftige Dosis generativer KI hinzu. Das Ergebnis ist, dass keine detaillierte 3D-Szenenrekonstruktion oder fein kalibrierte Kameraeinstellungen erforderlich sind. Mit Stable Virtual Camera können Benutzer mit minimalem Aufwand sogar aus einem einzelnen Bild flüssige, tiefengenaue 3D-Bewegungen erstellen.

Was dieses Tool von anderen KI-Tools zur Videogenerierung unterscheidet, ist, dass es sich bei Animationen nicht durch Raten durchkämpft und nicht auf riesige Datensätze oder Einzelbild-Rekonstruktion angewiesen ist. Stable Virtual Camera verwendet einen Multi-View-Propagationsprozess, um basierend auf dem bereitgestellten Bild neue Winkel zu generieren, sodass das Ergebnis wie ein Modell aussieht, das in der realen Welt tatsächlich existieren könnte. Dieser Ansatz erhöht den Realismus der resultierenden Videos.

Mit dem Tool können Benutzer Kamerapfade mit filmischer Präzision steuern und zwischen Aktionen wie Zoomen, Umkreisen oder sogar einem Spiralpfad wählen. Das resultierende Video kann im Hochformat für Mobilgeräte oder im Breitbildformat vorliegen. Die Standardkamera kann nur mit einem Bild arbeiten, kann aber bis zu 32 Bilder verarbeiten.

Stability AI hat das Modell unter einer nichtkommerziellen Lizenz für Forschungszwecke zur Verfügung gestellt. Das bedeutet, dass Sie es ausprobieren können, wenn Sie über gewisse technische Fähigkeiten verfügen, indem Sie den Code von GitHub herunterladen. Da es sich bei Stability AI typischerweise um Open Source handelt, bedeutet dies auch, dass die KI-Entwickler-Community die Fähigkeiten der virtuellen Kamera verbessern und erweitern kann, ohne dass dem Unternehmen hierfür Kosten entstehen.

3D-KI

Natürlich ist kein KI-Modell perfekt und Stability AI gibt offen zu, dass noch an den Mängeln gearbeitet wird. Wenn Sie realistische Menschen und Tiere oder Materialien mit besonders chaotischen Texturen (wie Wasser) erstellen möchten, erhalten Sie möglicherweise etwas, das in einen Low-Budget-Horrorfilm gehört.

Seien Sie nicht überrascht, wenn Sie damit erstellte Videos sehen, in denen sich die Perspektiven seltsam über Objekte bewegen oder bei denen es zu Perspektivwechseln kommt, die zu flackernden, geisterhaften Effekten führen. Es bleibt abzuwarten, ob dieses Tool weite Verbreitung findet oder nur ein weiteres KI-Tool ist, das von Nischenfilmern übersehen wird.

Ganz zu schweigen von der starken Konkurrenz durch KI-Videotools wie Sora, Pika, Runway, Pollo von OpenAI und Dream Machine von Luma Labs. Stable Virtual Camera muss sich in der realen Welt des Filmemachens beweisen, um mehr als nur ein weiteres unterhaltsames Demo-Video zu sein.