Microsoft Hyperlapse: 3D-Stabilisierungsvideo

Die bevorstehende SIGGRAPH-Konferenz wird viele interessante Dinge beinhalten. Microsoft wird nicht zurückgelassen, was seine Pläne im Voraus bekannt gab. Sie zeigt die Hyperlapse- Technologie zur effektiven Bildstabilisierung und Bindung ungewöhnlicher und schöner Zeitraffervideos aus der ersten Person.

Microsoft arbeitet seit mehreren Jahren an dieser Technologie und hat auf der SIGGRAPH 2014 einen wissenschaftlichen Bericht über Hyperlapse vorgestellt. Jetzt funktioniert alles. Sie können die mobile Anwendung installieren und Hyperlapse in der Praxis ausprobieren (um die Version für Android zu installieren, müssen Sie beispielsweise der Community beitreten und sich als Tester registrieren).



Auf einer separaten Seite erklärt Microsoft ausführlich, wie sich seine Anwendung von der kürzlich eingeführten Instagram Hyperlapse-Anwendung für das iPhone unterscheidet. Es scheint gleich zu heißen und funktioniert ungefähr gleich.

Microsoft sagt, dass sie völlig unabhängig gearbeitet haben und erst vor wenigen Tagen von dem Programm ihrer Konkurrenten erfahren haben. Wie der Versuch gezeigt hat, weisen die beiden Technologien eine Reihe grundlegender Unterschiede auf. Das Programm von Instagram ähnelt normalen Stabilisatoren, wenn die Kante eines Frames einen anderen Frame überlappt, um Verwacklungen auszugleichen. Im Gegensatz zu den vorhandenen Programmen Adobe After Effects oder Youtube Video Stabilizer analysiert das Programm von Instagram jedoch keine Frames, sondern verwendet Informationen aus dem integrierten Gyroskop. Um Artefakte an den Rändern zu vermeiden, vergrößert sie das Bild.

All dies funktioniert nur mit einem leichten Jitter, sagt Microsoft beispielsweise, wenn Sie das Smartphone vorsichtig mit beiden Händen halten und sich reibungslos bewegen. Aber wenn Sie es in den Helm einsetzen und sich auf eine Fahrt begeben, fällt alles völlig auseinander.

Microsoft Hyperlapse implementiert eine grundlegend andere Methode. Hier wird die gesamte Route der Kamera in 3D rekonstruiert und ein Modell der Welt zusammengestellt. Auf diese Weise können Sie die Kamera in der Raumzeit reibungsloser bewegen und ein endgültiges Video erstellen, in dem sich die Kamera mit konstanter Geschwindigkeit bewegt. Das heißt, „langsame“ Fragmente werden automatisch ausgeschnitten, als würden sie in einem roten Licht stehen.



Was sehr wichtig ist, Microsoft Hyperlapse kann die fehlenden Fragmente von Frames ausfüllen und Pixel nicht von einem benachbarten Frame, sondern von mehreren Frames ausleihen.

Eine technische Erklärung zur Funktionsweise von Microsoft Hyperlapse finden Sie im Video.