Ilmenau

Fraunhofer IDMT entwickelt intelligente Soundvisualisierung für renommierten deutschen Automobilhersteller

Pressemeldung /

Die Mercedes-Benz AG hat zusammen mit dem Fraunhofer-Institut für Digitale Medientechnologie IDMT eine Soundvisualisierung für die aktive Ambientebeleuchtung entwickelt. Die Innovation kommt seit dem Frühjahr dieses Jahres in der neuen Generation E-Klasse Fahrzeuge zum Einsatz. Mit der neuen Algorithmik passt sich die Lichtstimmung im Fahrzeug an Musik und Sounds an.

Innenraum der neuen E-Klasse mit Lichtbändern
© Mercedes-Benz AG
In der neuen E-Klasse der Mercedes-Benz AG wird dank intelligenter Musikanalyse des Fraunhofer IDMT Ilmenau Musik auch visuell erlebbar. Dafür wird ein Lichtband im Fahrzeuginnenraum passend zu Musik und Sounds angesteuert.

Dank der neuen Aktiven Ambientebeleuchtung mit Soundvisualisierung können die Fahrzeuginsassen Musik jetzt mit drei Sinnen erleben: sie hören Musik, sie »fühlen« die Musik mittels integrierter Körperschallwandler in den Autositzen und seit diesem Jahr »sehen« sie die Musik dank passender Lichtsteuerung. Für dieses neuartige visuelle Erlebnis werden die Lichtbänder genutzt, die in der Instrumententafel und in den vorderen Türverkleidungen verbaut sind.

Fraunhofer-Knowhow aus Ilmenau für neues Musikerlebnis im Fahrzeuginnenraum

Für die Entwicklung und die technische Umsetzung des neuen Innenraum-Features setzte der Automobilhersteller auf die jahrelange Expertise des Ilmenauer Forschungsinstituts im Bereich der Echtzeitverarbeitung von Audiodaten. Das Fraunhofer IDMT ist international anerkannt für seine Audiosignalverarbeitung und Musikanalyse mittels Künstlicher Intelligenz (KI) und war bereits Forschungs- und Entwicklungspartner für verschiedene interaktive Musikanwendungen.

Bei der Umsetzung der soundgesteuerten Lichtanpassung gab es verschiedene Herausforderungen zu meistern. So mussten die spektralen und dynamischen Eigenschaften verschiedener Audiosignale – von Sprache über Hip-Hop, Klassik, Smooth-Jazz bis hin zu Heavy Metal – in Echtzeit in eine ausgewogene und beat-synchrone farbliche Darstellung übersetzt werden.

Zeitsynchrone Visualisierung von Musik

»Eine nachvollziehbare Visualisierung mit geringer Latenz ist enorm wichtig für das synchrone Erlebnis von Klang und Licht. Das ist für die emotionale Wirkung ganz entscheidend«, erklärt Holger Großmann vom Fraunhofer IDMT, der die audiogesteuerte Lichtwiedergabe am Fraunhofer IDMT entwickelt hat. Mit der neuen Musikvisualisierung werden beispielsweise schnelle Taktfolgen mittels rascher Lichtwechsel visualisiert und fließende Rhythmen eher mit weich ineinander übergehenden Lichtstimmungen dargestellt.

Eine weitere Herausforderung war, dass die soundangepasste Lichtwiedergabe sowohl bei lauten als auch bei leisen Tönen funktionieren muss und auch dann, wenn die Unterschiede zwischen den Tönen eines Musikstücks nur sehr gering sind. »Unsere im Fahrzeug verbaute, intelligente Signalanalyse muss sich also sehr flexibel an die jeweiligen Audiodaten anpassen«, so Holger Großmann. 

Ausgewogene Visualisierung der Töne

Für den verkehrssicheren Einsatz im Fahrzeug war es außerdem wichtig, eine ausgewogene Visualisierung der Töne sicherzustellen, um den Fahrer oder die Fahrerin nicht vom Verkehrsgeschehen abzulenken.

»Es macht uns natürlich stolz, dass wir mit der Soundvisualisierung für die neue Generation E-Klasse-Fahrzeuge jetzt eine weitere Erfolgsgeschichte unserer intelligenten Musikanalyse erzählen dürfen, und wir freuen uns jetzt schon auf zukünftige Kooperationen«, so Holger Großmann. 

Letzte Änderung: