Fraunhofer IIS stellt neues Software Plug-in für das Arbeiten mit Lichtfelddaten in der Postproduktion vor

/

Erlangen, 11. September 2014: Nachdrehs sind aufwändig und teuer. Aber, was tun, wenn die Schärfe falsch gewählt wurde oder der Blickwinkel verändert werden muss? Mit Aufnahmen von Multikamerasystemen, die mehrere Ansichten gleichzeitig anbieten, und einer intelligenten Algorithmik ist in der Postproduktion noch vieles möglich. Ein von Experten des Fraunhofer-Instituts für Integrierte Schaltungen IIS entwickeltes neues Software-Plug-in macht die Integration in bestehende Postproduktionssoftware möglich. Es erlaubt den Bearbeitern, die kreativen Möglichkeiten der Verarbeitung von Lichtfelddaten komfortabel über eine grafische Benutzeroberfläche zu nutzen. Das Lichtfeld-Software Plug-in ist eine der Neuheiten, die das Fraunhofer IIS auf der IBC (International Broadcasting Convention) 2014 in Amsterdam für die Film- und Videoproduktion in Halle 8 Stand B80 vorstellt.

Der unvergleichliche Sonnenaufgang, der aufwändige Stunt oder die unerreichbare Emotion der Schauspieler in der Szene sind einzigartig, unwiederholbar. Unverzeihlich, wenn dann die Schärfe nicht exakt eingestellt wurde, oder der Blickwinkel nicht passend gewählt werden konnte. Hier lässt sich in Zukunft die so genannte Lichtfeldtechnologie oder das Drehen mit Mehrkamerasystemen einsetzen.

Dabei werden mit einer Aufnahme viele unterschiedliche Ansichten aufgenommen, die dann in der Postproduktion zu einer neuen virtuellen Kameraansicht verrechnet werden können. Dies erlaubt neue kreative Möglichkeiten, die am Set verloren schienen. Die Verarbeitung solcher Lichtfelddaten oder Daten von Mehrkamerasystemen ist eine neue Trendtechnologie in der Filmproduktion. Diese Flexibilität der Nachbearbeitung in der Postproduktion reduziert aufwändige und teure Nach- oder Zusatzdrehs.

Neues Software-Plug-in für die Postproduktion macht das Arbeiten mit Lichtfelddaten möglich

Bisher war die Verarbeitung und Erprobung dieser neuartigen Arbeitsweise mit Lichtfeld- oder Multikameradaten nur mit aufwändigen, proprietären Programmen möglich, die für viele Bearbeiter in der Postproduktion kaum handhabbar sind. Daher arbeiten Experten am Fraunhofer IIS derzeit daran, diese Lichtfeldverarbeitung praxisgerecht umzusetzen. Zur IBC 2014 stellen sie ein erstes Software-Plug-in für den AVID Media Composer vor, das über eine benutzerfreundliche Oberfläche das Verarbeiten der Lichtfelddaten und das Einstellen der Parameter für verschiedenste Effekte möglich macht.

Ausgangspunkt für die Berechnung sind verschiedene Vorverarbeitungsschritte und -verfahren, die zunächst geometrische Verzerrungen der Kamerapositionen, die bei der Aufnahme mit so genannten Multikameraanordnungen oder Lichtfeldproduktionssystemen entstehen, korrigieren und dann pixeldichte Tiefenkarten aus der Szene errechnen. Mithilfe dieser Tiefenkarten können dann qualitativ hochwertige neue Ansichten für 2D-, 3D- oder Multiview-Displays erzeugt werden.

Durch die intelligente Verrechnung verschiedener Ansichten können Schärfeverlagerung, Perspektivenwechsel, 3D-Effekte und Kamerafahrten in die Tiefe berechnet werden. Dazu werden aus den vorhandenen Bildansichten virtuell beliebig viele weitere Ansichten generiert. Veränderungen bei der Parametereinstellung werden durch spezielle Algorithmen so verarbeitet, dass der Benutzer jederzeit eine Vorschau der Szene mit den jeweiligen Effekten erhält, bevor die Szene dann hochaufgelöst in der Endfassung gerendert ausgegeben wird. Die Einstellung der Effekte oder Kamerafahrten erfolgt menügestützt über Timeline und Slider, in gewohnter Bedienweise von üblicher Postproduktionssoftware. Durch die Integration – zunächst in den AVID Media Composer – muss das Programm nicht gewechselt werden, was das Arbeiten ebenfalls erleichtert und Zeit- und Kostenaufwand minimal hält. Weitere Plug-in-Integrationen sind geplant. Über ein Lizenzmodell ist das Software-Plug-in für erste professionelle Endnutzer erhältlich.