Semantische Verarbeitung audiovisueller Inhalte

Moderne Methoden der Signalanalyse helfen, aus audiovisuellen Inhalten automatisiert verschiedenste Informationen für deren Beschreibung zu extrahieren. Nach einer semantischen Interpretation ermöglichen die so gewonnenen Metadaten die Identifikation, das Auffinden und die Organisation von Inhalten in digitalen Mediensystemen. So können beispielsweise identische oder ähnliche Inhalte in großen Datenbeständen gefunden oder personalisierte Empfehlungen von Inhalten abgeleitet werden. Auch eine automatisierte Verschlagwortung nach semantischen Kriterien ist möglich. Außerdem werden multi-modale Analyseverfahren zur Bestimmung von emotionalen Eindrücken in Bildern, Videos und Musik entwickelt.

Digitales Fernsehen – Dienste, Komponenten und Systeme

Digitale Rundfunknetze bieten vielfältige Möglichkeiten für zusätzliche Dienste und Informationen, interaktive Angebote oder gänzlich neue Programmstrukturen. Die Gruppe Audiovisuelle Systeme arbeitet an Lösungen für die Produktion und Verteilung von neuartigen Diensten für den digitalen Rundfunk und für mobile Endgeräte. Darüber hinaus entwickeln die Forscher Technologien zur Steuerung und Überwachung von Rundfunkdiensten. Mit der Technologieplattform »iKabel« können beispielsweise Informationsdienste und interaktive Dienste für die weit verbreiteten Fernsehkabelnetze kostengünstig zur Verfügung gestellt werden.

Immersive Systeme

Aufbauend auf den Ergebnissen des Forschungsprojekts »Interaktive audiovisuelle Anwendungssysteme (IAVAS)« der Technischen Universität Ilmenau wird an immersiven Multimedia-Systemen gearbeitet, die eine dreidimensionale Bild- und Tonwiedergabe mit vielfältigen Interaktionsmöglichkeiten verbinden. Schwerpunkt sind die Kombination von synthetischen und natürlichen Elementen in interaktiven Anwendungen sowie die plattformunabhängige Beschreibung dieser Inhalte.

Evaluation von A/V Technologien

Die automatisierteEvaluation von audiovisuellen Systemen und Verfahren erfordert die Spezifikation von Testfällen, die Entwicklung von Testmethodologien und die Definition von Evaluationsmaßen. Mit Hilfe neuartiger Ansätze wie z. B. Crowdsourcing baut die Gruppe große Testkollektionen auf und entwickelt statistische Verfahren über die Aussagekraft von Ergebnissen. Ein Schwerpunkt liegt in der Planung, Organisation, Durchführung und Auswertung des Photo Annotation Task im Benchmark ImageCLEF, in dem mit internationaler Beteiligung an der semantischen Verschlagwortung von Bildern geforscht wird.