Technologien und Lösungen

Das Fraunhofer IDMT entwickelt innovativen Technologien zur automatischen Analyse von audiovisuellem Material. Integriert in bestehende Systeme und Anwendungen helfen sie Broadcastern und digitalen Archiven das Potenzial ihrer Inhalte voll auszuschöpfen.

Wir bieten modernste Technologien für die automatische und effiziente Annotation von A/V-Inhalten, um sicherzustellen, dass Inhalte gefunden, verlinkt und verwendet oder den Benutzern empfohlen werden können:

• SoundsLike – Musikannotation und Ähnlichkeit, Musikanteilsmessung und Music Transcription (Audio)
  
• Video Shot Detection und Key frame Extraktion, Video Motion Analysis, Actor Recognition and FaceEdutain (Video)
  
• Multi-modale Analyse und Empfehlung

Mit Hilfe der einzigartigen Kombination von A/V-Matching- und Phylogenie-Analyse-Tools lassen sich wiederverwendete Medieninhalte und Überschneidungen in Audio- und Videodatensätzen automatisiert identifizieren. Sie ermöglichen es außerdem, die Verarbeitungshistorie und die Beziehungen zwischen den verwendeten Inhalten zu verstehen und so zwischen Originalinhalten und transkodierten Inhaltskopien unterscheiden zu können.

• Query-based Audio Matching
  
• Partial Matching (Audio Segment Matching and Video Segment Matching)
• Audio Phylogeny Analysis
• Music Plagiarism Detection

Das Audioforensik-Toolset erkennt Aufzeichnungs-, Bearbeitungs- und Codierspuren im Audiomaterial und kann zur Qualitätskontrolle und Manipulationserkennung verwendet werden:

• Mikrofonanalyse, um die für eine Aufnahme verwendeten Mikrofone zu identifizieren und Material aus verschiedenen Mikrofonen zu harmonisieren
• Codec-Analyse, um Spuren vorangegangener Codierschritten zu erkennen und um Mehrfachcodierung zu vermeiden
  
• Bit-Tiefe und ENF-Analyse, zur Erkennung, wie Inhalte erfasst und verarbeitet wurden
• Werkzeuge zur Erkennung von Audiomanipulationen basierend auf den oben genannten Ansätzen

Wir verfügen über langjährige Erfahrung in der kombinierten, systematischen Bewertung von KI-Tools, Sicherheits- und Urheberrechts- und Datenschutzlösungen. Wo andere sich auf Konflikte zwischen Analyse-, Datenschutz- und Sicherheitsanforderungen fokussieren, setzen wir auf deren Harmonisierung und stellen entsprechende Werkzeuge zur Verfügung.

• On-premises Analyse und Austausch und Anreicherung von Metadaten, ohne dass sensibles Material Dritten zur Verfügung gestellt werden muss
• Systematische Evaluation von KI-Tools, einschließlich automatischer und vergleichender Tests von Analysekomponenten
• Privacy Enhancing Tools (PET), einschließlich Anonymisierungs- und Re-Identifizierungsanalysen und eines patentierten Ansatzes zur starken Entkopplung virtueller IDs (Pseudonymen) von realen IDs in einem System, die datenschutzkonforme Analysen und Empfehlungen ermöglichen
• Sicherheits- und Privacy-by-design-Lösungen für KI- und Mediensysteme
• Werkzeuge für das Copyright-Management