Events that made my day - creating a visual diary

01.01.2011 - 31.12.2013
Forschungsförderungsprojekt
Das Ziel dieses Projektes ist die Entwicklung von Techniken und Algorithmen, die in Verbindung mit einer tragbaren "always-on"-Kamera, automatisch Bilder ermitteln sollen, die die persönlichen "Highlights" des Tages darstellen. Tragbare "always-on"-Kameras sind bereits auf dem Markt und können jeden wachen Moment des Lebens erfassen. Jedoch produzieren die meisten enorme Datenmengen, die weder notwendig noch interessant sind. In diesem Projekt wollen wir uns einer der großen Herausforderungen für die Fotografie der Zukunft (laut Ranskar et al.[10]) stellen, und zwar, wie man in der Flut der Videos/Bilder das finden kann, was uns wichtig ist. Wir stellen uns die Auswahl der besten persönlichen Schnappschüsse des Tages zum Ziel. Diese soll aufgrund von ästhetischen und emotionalen Merkmalen ermittelt werden. Hierfür stellen wir die folgenden zwei Annahmen auf: 1) die wichtigsten persönlichen Momenten ("Highlights") des Tages sind diejenigen, in denen man emotional involviert ist, 2) die resultierenden Bilder, die diese Momenten illustrieren, sollten ästhetisch ansprechend sein. Um nur ein paar Highlights aus den Unmengen von Bildern, die von der Kamera während des ganzen Tages gemacht werden, zu selektieren, schlagen wir den folgenden Filter-Prozess vor: Die erste Filter-Ebene wählt die Bildsequenzen aus, während denen der Benutzer (emotional) erregt war. Um die emotionale Erregung festzustellen, benutzen wir tragbare Bio-Sensoren, die der Benutzer gleichzeitig mit der Kamera tragen soll. Die zweite Filterebene wird dann automatisch die besten Einzelbilder aus jeder Szene aufgrund ihrer Ästhetik und Originalität auswählen. Die resultierenden Bilder werden nachbearbeitet werden, um ihren emotionalen Kontext zu verstärken. Diese können dann in Form eines visuellen Tagebuches gespeichert, oder in Blogs und Social Network Sites benutzt werden. Eine User-Feedback/Machine Learning Schleife soll ermöglichen, dass das System persönliche ästhetische Vorlieben und tägliche Rituale des Users lernen kann, sowie zur Feinabstimmung der Interpretation der Bio-Signale dienen.

Personen

Projektleiter_in

Projektmitarbeiter_innen

Institut

Förderungsmittel

  • FFG - Österr. Forschungsförderungs- gesellschaft mbH (National) Österreichische Forschungsförderungsgesellschaft mbH (FFG)

Forschungsschwerpunkte

  • Computational Science and Engineering
  • Information and Communication Technology

Schlagwörter

DeutschEnglisch
VerhaltensanalyseBehaviour Analysis
Interfaces für affektive/emotionale Bild- und VideoerfassungAffective/emotional interaction or interfaces for image/video retrieval
Intelligente KamerasSmart Cameras
Menschliche WahrnehmungHuman perception
Analyse und Verstehen von Multimedia-InhaltenMultimedia content analysis and understanding

Publikationen