Uns wird oft gefragt, was eigentlich passiert, nachdem jemand ein Video hochgeladen hat. Hier ist die kurze Antwort, ohne Fachchinesisch.
Ein flaches Video hat keine Tiefe
Ein normales Video ist flach. Dein Gehirn schätzt, was nah und was fern ist, aber die Datei selbst enthält keine Information über Entfernung. Nichts darin sagt: „Dieses Gesicht ist einen Meter entfernt und diese Wand zehn.“
Um echtes 3D zu zeigen, braucht ein Headset zwei Bilder: eines für dein linkes Auge und eines für dein rechtes, aus leicht unterschiedlichen Winkeln aufgenommen. Diesen kleinen Unterschied liest dein Gehirn als Tiefe.
Was unsere KI mit deinem Video macht
Unser System arbeitet dein Video Frame für Frame durch. Für jeden Frame:
- schätzt es, wie weit jedes Objekt entfernt ist;
- trennt es den Vordergrund vom Hintergrund;
- baut es eine zweite Ansicht aus einem leicht anderen Winkel;
- füllt es auf, was dieses zweite Auge an den Rändern von Objekten sehen würde;
- gleicht es das Ergebnis mit den Frames davor und danach ab, damit die Tiefe stabil bleibt, statt zu flimmern.
Dieser letzte Schritt ist wichtiger, als viele erwarten. Einen Frame richtig hinzubekommen ist einfach. Tausend Frames hintereinander dazu zu bringen, zueinander zu passen, ist der schwierige Teil.
Warum das so viel Rechenleistung braucht
Die meisten Videos laufen mit 25 bis 60 Bildern pro Sekunde. Eine Minute 4K-Video sind weit über tausend Bilder in voller Größe, und jedes davon durchläuft den gesamten Prozess oben. Deshalb läuft die Konvertierung auf Grafikhardware in der Cloud statt auf deinem eigenen Computer.
Deshalb rechnen wir auch pro Videominute ab. Längeres und schärferes Material macht einfach mehr Arbeit.
Was du am Ende bekommst
Du bekommst ein echtes stereoskopisches 3D-Video, bereit für dein Headset:
- Full Side-by-Side für Meta Quest und die meisten anderen Headsets;
- Spatial Video (MV-HEVC) für Apple Vision Pro.
Beide Formate sind in jedem Paket enthalten, bis 8K. Wir hosten das Ergebnis und streamen es direkt in den Browser deines Headsets, also ohne Kabel und ohne Player-Apps. Du willst die Details zu den beiden Formaten? Lies Full Side-by-Side vs. MV-HEVC.
Sieh es mit deinem eigenen Video
Über Tiefe zu lesen ist nicht dasselbe, wie sie zu sehen. Wandle deine ersten 2 Minuten kostenlos um, ohne Kreditkarte und ohne Konto, und schau es in deinem eigenen Headset.
Weiterlesen
So funktioniert die Umwandlung von 2D-Video in 3D · Ein konvertiertes Beispiel ansehen