Ein Duett mit dem Geist in der Maschine

Nürnberger Hochschulen und Steinway & Sons kooperieren in einzigartigem KI-Forschungsprojekt

Nürnberg (25. Mai 2020) — Kann ein Flügel mithilfe Künstlicher Intelligenz in einem Jazz-Quartett mitspielen und sich damit in einen kreativen Schöpfungsprozess einbringen? Mit diesen und weiteren Fragen beschäftigt sich das interdisziplinäre Forschungsprojekt der TH Nürnberg und der Hochschule für Musik Nürnberg gemeinsam mit dem Konzertflügelhersteller Steinway & Sons. Im LEONARDO – Zentrum für Kreativität und Innovation forschen sie auf dem Gebiet des maschinellen Klang- und Sprachverständnisses.

Die Technische Hochschule Nürnberg und die Hochschule für Musik Nürnberg kooperieren mit Steinway & Sons in dem interdisziplinären Forschungsprojekt „Spirio Sessions“ zu Künstlicher Intelligenz – konkreter: zu Künstlicher Kreativität. Als erste akademische Institution europaweit wird LEONARDO – Zentrum für Kreativität und Innovation, an dem unter anderem die TH Nürnberg und die HfM Nürnberg beteiligt sind, mittels des neuartigen Steinway & Sons-Flügels, Modell Spirio R, die Interaktion zwischen Musikerinnen und Musikern mit intelligenten Maschinen erforschen.

„Ein klassischer Konzertflügel auf höchstem Exzellenzniveau und ein hochinnovatives robotisches Digitalinstrument: Der Spirio R ist beides in einem“, erklärt Prof. Dr. Martin Ullrich, Professor für interdisziplinäre Musikforschung an der HfM Nürnberg. „Damit ist er für uns das ideale Werkzeug, um neue Welten der künstlichen Kreativität zu erschließen.“ Das analog-digitale Hybrid-Instrument des weltweit führenden Herstellers für Konzertflügel Steinway & Sons bildet den Mittelpunkt des interdisziplinären Forschungsprojekts. Dank der erarbeiteten Expertise in Forschungsprojekten zur Co-Kreation von Mensch und Maschine war es möglich, eine Entwicklungspartnerschaft zwischen LEONARDO und Steinway & Sons zu schließen und so den neuartigen Spirio R Flügel bereits mehrere Monate vor Markteinführung zu erhalten.

Die Sensorik des Instruments erlaubt es nicht nur, Tastenbewegungen in einer bisher unübertroffenen Präzision und Komplexität zu erfassen und wiederzugeben – der Flügel bietet auch digitale Analysewerkzeuge sowie eine Schnittstelle, anhand derer der Flügel mit einer Künstlichen Intelligenz erweitert werden kann. Ursprünglich wurde das Instrument entwickelt, um Live-Konzerte aus der Ferne zu geben, nun beschreitet ein Forschungsteam aus Professoren der TH Nürnberg und der HfM Nürnberg neue Wege und versucht stattdessen, die Potentiale der Schnittstelle zwischen dem Flügel und Künstlicher Intelligenz auszuloten.

Dabei kooperieren die Fachgebiete der Interdisziplinären Musikforschung der HfM Nürnberg – welche erst kürzlich im KI-Wettbewerb des Bayerischen Staatsministeriums für Wissenschaft und Kunst mit einer Professur für „Künstliche Kreativität und musikalische Interaktion“ erfolgreich war – mit Wissenschaftler*innen für Maschinelles Lernen an der Fakultät Informatik der TH Nürnberg.

Das durch das Bundesministerium für Bildung und Forschung geförderte und finanzierte LEONARDO – Zentrum für Innovation und Kreativität ist ein Kooperationsprojekt von drei Nürnberger Hochschulen: der Technischen Hochschule Nürnberg, der Hochschule für Musik und der Akademie der Bildenden Künste. Der Fokus des Innovationszentrums liegt in diesem Jahr auf dem Themenfeld „Künstliche Intelligenz und Mensch-Maschine-Interaktion“. Genau darum dreht sich das Forschungsprojekt „Spirio Sessions“.

Die Wissenschaftlerinnen und Wissenschaftler entwickeln innovative technologische Lösungen für ein Zusammenspiel zwischen Mensch und Maschine. In der jüngsten Vergangenheit gab es wiederholt Bestrebungen, eine KI auf Basis von Datenmaterial neue Kompositionen erschaffen zu lassen. Auch der Einsatz von KI als Werkzeug in der Musikproduktion wird stetig vorangetrieben. Doch klassische Herangehensweisen des maschinellen Lernens stießen dabei schnell an ihre Grenzen. „Die Ergebnisse konnte man bestenfalls als ‚interessant‘ bezeichnen“, so Prof. Dr. Korbinian Riedhammer, Professor für Softwarearchitektur und Maschinelles Lernen an der TH Nürnberg. Ein Treffen auf Augenhöhe, wie es etwa beim Schach schon lange problemlos möglich ist, hielt man in der Musik bisher noch für Science Fiction. „Darum wollen wir uns in diesem gemeinsamen Forschungsprojekt einen Schritt weiter bewegen“, erläutert Prof. Dr. Korbinian Riedhammer die Kooperation zwischen LEONARDO und Steinway & Sons. „Im Mittelpunkt wird die Entwicklung künstlicher Kreativität in der Interaktion zwischen menschlichen Musizierenden, innovativen Musikinstrumenten und Künstlichen Intelligenzen stehen. Bisher konzentrierte sich die Forschung auf eine symbolische Repräsentation der Musik wie etwa MIDI, eine Art Notenschrift für Computer. Mit dem Spirio können wir nun mit der tatsächlichen Interpretation der Musik arbeiten.”

Die Wissenschaftlerinnen und Wissenschaftler widmen sich komplexen Fragen: Kann eine Künstliche Intelligenz auf gleichem Niveau mit einem Menschen in einem kreativen Schöpfungsprozess in Echtzeit zusammenarbeiten – und wie kann eine solche Kooperation aussehen? Kann der Flügel in einem Jazz-Quartett improvisieren? Gar seine persönliche Note hinzufügen? Und welche Erkenntnisse erlangen wir dadurch über den vermeintlich exklusiv menschlichen Kreativprozess? Die Antworten auf diese Fragen sind dabei nicht nur für die Musik interessant: Erkenntnisse auf dem Gebiet maschinellen Klang- und Sprachverständnisses könnten langfristig auch auf andere Anwendungsszenarien wie beispielsweise die Medizin übertragen werden, so die Hoffnung des Projektteams.

 

  • Am 29. Mai 2020 werden Marcus König, neuer Oberbürgermeister der Stadt Nürnberg, und Prof. Dr. Julia Lehner, 2. Bürgermeisterin der Stadt Nürnberg und zuständig für den Geschäftsbereich Kultur, die Hochschule für Musik Nürnberg besuchen und dort unter anderem auch den Spirio R-Flügel von LEONARDO – Zentrum für Innovation und Kreativität präsentiert bekommen.

 


Quelle: Technische Hochschule Nürnberg Georg Simon Ohm, 25.05.2020 (tB).

MEDICAL NEWS

New guidance to prevent the tragedy of unrecognized esophageal intubation
Overly restrictive salt intake may worsen outcomes for common form…
COVID-19 vaccines are estimated to have prevanented 20 million deaths…
Novel sleep education learning modules developed for nurse practitioners
Scientists discover how salt in tumours could help diagnose and…

SCHMERZ PAINCARE

Aktuelle Versorgungssituation der Opioidtherapie im Fokus
Individuelle Schmerztherapie mit Opioiden: Patienten im Mittelpunkt
Versorgung verbessern: Deutsche Gesellschaft für Schmerzmedizin fordert die Einführung des…
Pflegeexpertise im Fokus: Schmerzmanagement nach Operationen
Versorgung verbessern: Bundesweite Initiative der Deutschen Gesellschaft für Schmerzmedizin zu…

DIABETES

Menschen mit Diabetes während der Corona-Pandemie unterversorgt? Studie zeigt auffällige…
Suliqua® zur Therapieoptimierung bei unzureichender BOT
„Wissen was bei Diabetes zählt: Gesünder unter 7 PLUS“ gibt…
Kaltplasma bei diabetischem Fußsyndrom wirkt via Wachstumsfaktoren
Typ-1-Diabetes: InRange – auf die Zeit im Zielbereich kommt es…

ERNÄHRUNG

Gesunde Ernährung: „Nicht das Salz und nicht das Fett verteufeln“
Mangelernährung gefährdet den Behandlungserfolg — DGEM: Ernährungsscreening sollte zur klinischen…
Wie eine Diät die Darmflora beeinflusst: Krankenhauskeim spielt wichtige Rolle…
DGEM plädiert für Screening und frühzeitige Aufbautherapie: Stationäre COVID-19-Patienten oft…
Führt eine vegane Ernährungsweise zu einer geringeren Knochengesundheit?

ONKOLOGIE

Nahrungsergänzungsmittel während der Krebstherapie: Es braucht mehr Bewusstsein für mögliche…
Fusobakterien und Krebs
Fortgeschrittenes Zervixkarzinom: Pembrolizumab verlängert Leben
Krebspatienten unter Immuntherapie: Kein Hinweis auf erhöhtes Risiko für schwere…
Aktuelle Kongressdaten zum metastasierten Mammakarzinom und kolorektalen Karzinom sowie Neues…

MULTIPLE SKLEROSE

Multiple Sklerose: Analysen aus Münster erhärten Verdacht gegen das Epstein-Barr-Virus
Aktuelle Daten zu Novartis Ofatumumab und Siponimod bestätigen Vorteil des…
Multiple Sklerose durch das Epstein-Barr-Virus – kommt die MS-Impfung?
Neuer Therapieansatz für Multiple Sklerose und Alzheimer
„Ich messe meine Multiple Sklerose selbst!“ – Digitales Selbstmonitoring der…

PARKINSON

Alexa, bekomme ich Parkinson?
Meilenstein in der Parkinson-Frühdiagnose
Parkinson-Erkrankte besonders stark von Covid-19 betroffen
Gangstörungen durch Kleinhirnschädigung beim atypischen Parkinson-Syndrom
Parkinson-Agenda 2030: Die kommenden 10 Jahre sind für die therapeutische…