mdViPro - Multidimensionale Videoprozessierung


Digitale visuelle Medieninhalte entwickeln sich weltweit zu einem dominierenden Medientypus und sind ein zukünftiges Schlüsselmedium für die Digitalisierung. So nutzen zum Beispiel ein Drittel aller Internetnutzer das Videoportal YouTube, auf dem derzeit täglich ca. 5 Milliarden Videos angesehen und ca. 300 Stunden Videomaterial pro Minute hochgeladen 1 werden. Größtenteils handelt es sich um User­-Generated Contents (UGC), die mit immer höherer zeitlicher und räumlicher Auflösung aufgenommen werden. Ihre Nutzung findet dabei in einem Geräteökosystem statt – Videos z.B. werden auf Smartphones aufgenommen, auf Tablets bearbeitet, am Desktop professionell nachbearbeitet und über Software-­as-­a-­Service­-Systeme hochgeladen und verteilt. Die Fortschritte sowohl bei der digitalen Kameratechnologie und der Sensorik als auch bei der nachgelagerten Analyse und Prozessierung ermöglichen absehbar z.B. Stereoaufnahmen in Verbindung mit daraus abgeleiteten Tiefeninformationen oder klassifizierte Bildinhalte durch Computer Vision und maschinelles Lernen. Im Folgenden bezeichnen wir mit dem Begriff “erweiterte visuelle Medieninhalte” (Abb. 1) digitale Bild­ und Videodaten, die neben Farbinformationen auch geometrische und semantische Attribute besitzen, z.B. 3D­Tiefeninformation, Bewegungsinformation (optischer Fluss), Verhaltensinformation oder Objektklassifikation.


Erwetere Medieninhalte
Abbildung 1: (a) Klassische visuelle Medieninhalte als RGB­Frames. (b) Erweiterte visuelle Medieninhalte.


Bisherige Verfahren und Techniken in den Bereichen Visual Computing und Smart Graphics stehen hier vor vielfältigen Herausforderungen: Wie können diese Verfahren und Techniken 3D­-Geometrie und Bildsemantik, die über entsprechende Hardware bzw. durch mittlerweile anwendungsreife maschinelle Lernverfahren herleitbar sind, nutzen und durch Anwendungen in Wert setzen? Kamera­ und Sensortechnologien benötigen zwingen entsprechende Software, um Wertschöpfung in vollem Umfang zu ermöglichen. Welche generischen Visual­-Computing­ und Smart-­Graphics­-Bausteine lassen sich identifizieren, mit denen Anwendungen modular konstruiert und die Komplexität der Softwareentwicklung signifikant verringert werden kann? Ohne komponentenbasierte Softwareentwicklung entstehen enorme Aufwände bzgl. Time­-to-­Market, Personalressourcen, Testing und Expertenwissen (z.B. zu Neural Networks, 3D-­GPU-­Pipelines, OS­ und Hardware­-Diversität).

Ziel des Vorhabens ist es, das Software­-Framework mdViPro zu erforschen und zu entwickeln, mit dem effizient, modular und interoperabel Visual­-Computing­ und Smart-­Graphics-­Lösungen für erweiterte visuelle Medieninhalte in einem Geräteökosystem realisiert werden können.



Projektpartner


Digital Masterpieces GmbH Digital Masterpieces GmbH
August-Bebel-Str. 26-53
14482 Potsdam


Hasso-Plattner-Institut für Softwaresystemtechnik gGmbH Hasso-Plattner-Institut für Digital Engineering gGmbH
Fachgebiet Computergrafische Systeme
Prof.-Dr.-Helmert-Str. 2-3
14482 Potsdam


graphicsmedia.net gGmbH graphicsmedia.net gGmbH
Trippstadter Str. 122
67663 Kaiserslautern


Gefördert vom Bundesministerium für Bildung und Forschung Gefördert duch das BMBF (Förderkennzeichen 01IS18092).

Projektträger:

Deutsches Zentrum für Luft- und Raumfahrt e.V. (DLR), DLR Projektträger
PT-FW
Rosa-Luxemburg-Straße 2
10178 Berlin.



Kontakt


Ansprechpartner:

Sebastian Pasewaldt
Digital Masterpieces GmbH
E-Mail: mail@digitalmasterpieces.com


Max Reimann
Hasso-Plattner-Institut für Digital Engineering gGmbH
E-Mail: max.reimann@hpi.de

Impressum


Hasso-Plattner-Institut für Digital Engineering gGmbH
Prof.-Dr.-Helmert-Str. 2-3
D-14482 Potsdam

Tel.: +49-(0)331 5509-3909
Fax: +49-(0)331 5509-172
Mail: max.reimann(at)hpi.de

Amtsgericht Potsdam, HRB 12184
Geschäftsführung: Prof. Dr. Christoph Meinel

Inhaltlich Verantwortlicher gemäß § 5 TMG: Max Reimann

Rechtliche Hinweise:

Das Hasso-Plattner-Institut (HPI) überprüft und aktualisiert regelmäßig die Inhalte seiner Websites. Trotz größtmöglicher Sorgfalt können wir nicht ausschließen, dass einzelne Informationen auf unseren Seiten veraltet oder nicht zutreffend sind. Daher können wir keine Haftung für Aktualität, Genauigkeit und Vollständigkeit der publizierten Informationen übernehmen. Das gleiche gilt für alle Websites, die von den HPI-Seiten über Hyperlinks erreichbar sind. Für alle diese Links gilt: Wir erklären ausdrücklich, dass wir keinen Einfluss auf die Gestaltung und die Inhalte der verlinkten Seite haben. Deshalb distanzieren wir uns hiermit ausdrücklich von allen Inhalten aller verlinkten Seiten und machen uns ihre Inhalte nicht zu Eigen. Diese Erklärung gilt für alle auf unserer Seite angebrachten Links zu fremden Seiten. Für den Inhalt dieser verlinkten Seiten ist das HPI nicht verantwortlich. Weiterhin behält sich das HPI jederzeit Änderungen und Ergänzungen der angezeigten Informationen vor. Inhalt und Struktur der HPI-Website sind durch das Copyright geschützt. Die Weiterverwendung von Informationen und Daten, vor allem die Verwendung von Texten und Illustrationen ist nur nach unserer Zustimmung zulässig.