Neuer Algorithmus für Hobbyfilmer Flug durch die Pixelwolke
YouTube ist voll mit solchen Videos: Da springt jemand mit einer Helmkamera aus dem Flugzeug, rast mit einem Mountainbike einen Berg hinunter oder filmt seine dreistündige Autofahrt bis zur Arbeit. Solche Videos anständig einzukürzen, ist ein Problem: Ein einfacher Zeitraffer scheitert an stark verwackelten Aufnahmen.
Drei Forscher von Microsoft Research haben jetzt auf der Computergrafik-Konferenz Siggraph einen vielversprechenden neuen Ansatz vorgestellt: Mit ihrem Hyperlapse-Algorithmus können sie überlange Videos mit verwackelten Kamerafahrten zu einer glatten Animation zusammenstauche n. Die Ergebnisse sind erstaunlich und versprechen ein großes Potenzial für künftige Anwendungen, wie das Demovideo zeigt:
Ich bin damit einverstanden, dass mir externe Inhalte angezeigt werden. Damit können personenbezogene Daten an Drittplattformen übermittelt werden. Mehr dazu in unserer Datenschutzerklärung.
Hyperlapse, den der deutsche Johannes Kopf und seine beiden Kollegen Michael Cohen und Richard Szeliski von Microsoft Research in einem Paper beschreiben , funktioniert so:
Aus dem Videokorpus - eine Fahrradfahrt, ein Kletterausflug - rekonstruiert ein Algorithmus die gesamte Szene samt der Kameraposition und -perspektive. Anhand dieser Daten wird ein neuer, virtueller Kamerapfad festgelegt, der möglichst gut mit dem vorhandenen Bildmaterial übereinstimmt. Denn aus den "überschüssigen" Bildern des Zeitraffers erstellt nun der Algorithmus eine 3D-Rekonstruktion der gesamten Szene und füllt sie mit den Einzelbildern des Videos.
Am Ende wird aus dieser virtuellen 3D-Szene wieder ein Video herausgerechnet, das viel stabiler als das Original ist - und etwas von einem Computerspiel hat. Wie das im Einzelnen aussieht, erklärt ein technisches Einführungsvideo der drei Forscher:
Ich bin damit einverstanden, dass mir externe Inhalte angezeigt werden. Damit können personenbezogene Daten an Drittplattformen übermittelt werden. Mehr dazu in unserer Datenschutzerklärung.
Diese Technik erinnert nicht zuletzt an Photosynth, eine Bildverarbeitungstechnik von Microsoft, die aus 2D-Schnappschüssen eine 3D-Welt nachbaut - und auch schon Kamerafahrten durchs Urlaubsalbum ermöglichte. Auch andere Bildbearbeiter forschen schon länger an Stabilisierungsmethoden für wacklige Handkameras .
So wie auch die allgemeine Bildstabilisierung einen Siegeszug durch die Amateurfotografie feiern konnte, könnten solche Anwendungen die Qualität von Hobbyfilmen erheblich steigern, wie etwa dieses Video eindrucksvoll demonstriert:
Ich bin damit einverstanden, dass mir externe Inhalte angezeigt werden. Damit können personenbezogene Daten an Drittplattformen übermittelt werden. Mehr dazu in unserer Datenschutzerklärung.
Die gemeinsame Grundlage all dieser Ansätze: Sie sehen aus wie Fotografie, aber sie sind etwas ganz neues. Der alte Weg des Lichts vom Motiv durch die Linse auf den Film ins Auge - der genauso in bisherigen Digitalkameras verlief, nur eben auf einen fotoempfindlichen Chip und nicht auf Film - wird nun jäh von Algorithmen unterbrochen.
Diese sogenannte Computational Photography macht sich erst selbst ein Bild von der Welt, analysiert und verändert sie, rückt Motive zurecht und korrigiert die Fotografen, um dann ihr eigenes Bild von der Welt als einen von vielen möglichen Ausgabemodi auszuwerfen. In diesem Fall: eine echte Kamerafahrt durch eine künstliche Welt.
Das Potenzial dieses Ansatzes wird in einem weiteren wissenschaftlichen Projekt, diesmal von Disney Research, deutlich: Darin rekonstruiert ein Algorithmus aus den Aufnahmen mehrerer Kameras eine Szene und schneidet die unterschiedlichen Kameraperspektiven automatisch zu einem angenehm abwechslungsreichen Video zusammen. Sieht aus wie ein TV-Beitrag, hat aber ein Algorithmus geschnitten .
Ich bin damit einverstanden, dass mir externe Inhalte angezeigt werden. Damit können personenbezogene Daten an Drittplattformen übermittelt werden. Mehr dazu in unserer Datenschutzerklärung.