Ein Duett mit dem Geist in der Maschine

Nürnberger Hochschulen und Steinway & Sons kooperieren in einzigartigem KI-Forschungsprojekt

Nürnberg (25. Mai 2020) — Kann ein Flügel mithilfe Künstlicher Intelligenz in einem Jazz-Quartett mitspielen und sich damit in einen kreativen Schöpfungsprozess einbringen? Mit diesen und weiteren Fragen beschäftigt sich das interdisziplinäre Forschungsprojekt der TH Nürnberg und der Hochschule für Musik Nürnberg gemeinsam mit dem Konzertflügelhersteller Steinway & Sons. Im LEONARDO – Zentrum für Kreativität und Innovation forschen sie auf dem Gebiet des maschinellen Klang- und Sprachverständnisses.

Die Technische Hochschule Nürnberg und die Hochschule für Musik Nürnberg kooperieren mit Steinway & Sons in dem interdisziplinären Forschungsprojekt „Spirio Sessions“ zu Künstlicher Intelligenz – konkreter: zu Künstlicher Kreativität. Als erste akademische Institution europaweit wird LEONARDO – Zentrum für Kreativität und Innovation, an dem unter anderem die TH Nürnberg und die HfM Nürnberg beteiligt sind, mittels des neuartigen Steinway & Sons-Flügels, Modell Spirio R, die Interaktion zwischen Musikerinnen und Musikern mit intelligenten Maschinen erforschen.

„Ein klassischer Konzertflügel auf höchstem Exzellenzniveau und ein hochinnovatives robotisches Digitalinstrument: Der Spirio R ist beides in einem“, erklärt Prof. Dr. Martin Ullrich, Professor für interdisziplinäre Musikforschung an der HfM Nürnberg. „Damit ist er für uns das ideale Werkzeug, um neue Welten der künstlichen Kreativität zu erschließen.“ Das analog-digitale Hybrid-Instrument des weltweit führenden Herstellers für Konzertflügel Steinway & Sons bildet den Mittelpunkt des interdisziplinären Forschungsprojekts. Dank der erarbeiteten Expertise in Forschungsprojekten zur Co-Kreation von Mensch und Maschine war es möglich, eine Entwicklungspartnerschaft zwischen LEONARDO und Steinway & Sons zu schließen und so den neuartigen Spirio R Flügel bereits mehrere Monate vor Markteinführung zu erhalten.

Die Sensorik des Instruments erlaubt es nicht nur, Tastenbewegungen in einer bisher unübertroffenen Präzision und Komplexität zu erfassen und wiederzugeben – der Flügel bietet auch digitale Analysewerkzeuge sowie eine Schnittstelle, anhand derer der Flügel mit einer Künstlichen Intelligenz erweitert werden kann. Ursprünglich wurde das Instrument entwickelt, um Live-Konzerte aus der Ferne zu geben, nun beschreitet ein Forschungsteam aus Professoren der TH Nürnberg und der HfM Nürnberg neue Wege und versucht stattdessen, die Potentiale der Schnittstelle zwischen dem Flügel und Künstlicher Intelligenz auszuloten.

Dabei kooperieren die Fachgebiete der Interdisziplinären Musikforschung der HfM Nürnberg – welche erst kürzlich im KI-Wettbewerb des Bayerischen Staatsministeriums für Wissenschaft und Kunst mit einer Professur für „Künstliche Kreativität und musikalische Interaktion“ erfolgreich war – mit Wissenschaftler*innen für Maschinelles Lernen an der Fakultät Informatik der TH Nürnberg.

Das durch das Bundesministerium für Bildung und Forschung geförderte und finanzierte LEONARDO – Zentrum für Innovation und Kreativität ist ein Kooperationsprojekt von drei Nürnberger Hochschulen: der Technischen Hochschule Nürnberg, der Hochschule für Musik und der Akademie der Bildenden Künste. Der Fokus des Innovationszentrums liegt in diesem Jahr auf dem Themenfeld „Künstliche Intelligenz und Mensch-Maschine-Interaktion“. Genau darum dreht sich das Forschungsprojekt „Spirio Sessions“.

Die Wissenschaftlerinnen und Wissenschaftler entwickeln innovative technologische Lösungen für ein Zusammenspiel zwischen Mensch und Maschine. In der jüngsten Vergangenheit gab es wiederholt Bestrebungen, eine KI auf Basis von Datenmaterial neue Kompositionen erschaffen zu lassen. Auch der Einsatz von KI als Werkzeug in der Musikproduktion wird stetig vorangetrieben. Doch klassische Herangehensweisen des maschinellen Lernens stießen dabei schnell an ihre Grenzen. „Die Ergebnisse konnte man bestenfalls als ‘interessant’ bezeichnen”, so Prof. Dr. Korbinian Riedhammer, Professor für Softwarearchitektur und Maschinelles Lernen an der TH Nürnberg. Ein Treffen auf Augenhöhe, wie es etwa beim Schach schon lange problemlos möglich ist, hielt man in der Musik bisher noch für Science Fiction. „Darum wollen wir uns in diesem gemeinsamen Forschungsprojekt einen Schritt weiter bewegen”, erläutert Prof. Dr. Korbinian Riedhammer die Kooperation zwischen LEONARDO und Steinway & Sons. „Im Mittelpunkt wird die Entwicklung künstlicher Kreativität in der Interaktion zwischen menschlichen Musizierenden, innovativen Musikinstrumenten und Künstlichen Intelligenzen stehen. Bisher konzentrierte sich die Forschung auf eine symbolische Repräsentation der Musik wie etwa MIDI, eine Art Notenschrift für Computer. Mit dem Spirio können wir nun mit der tatsächlichen Interpretation der Musik arbeiten.”

Die Wissenschaftlerinnen und Wissenschaftler widmen sich komplexen Fragen: Kann eine Künstliche Intelligenz auf gleichem Niveau mit einem Menschen in einem kreativen Schöpfungsprozess in Echtzeit zusammenarbeiten – und wie kann eine solche Kooperation aussehen? Kann der Flügel in einem Jazz-Quartett improvisieren? Gar seine persönliche Note hinzufügen? Und welche Erkenntnisse erlangen wir dadurch über den vermeintlich exklusiv menschlichen Kreativprozess? Die Antworten auf diese Fragen sind dabei nicht nur für die Musik interessant: Erkenntnisse auf dem Gebiet maschinellen Klang- und Sprachverständnisses könnten langfristig auch auf andere Anwendungsszenarien wie beispielsweise die Medizin übertragen werden, so die Hoffnung des Projektteams.

 

  • Am 29. Mai 2020 werden Marcus König, neuer Oberbürgermeister der Stadt Nürnberg, und Prof. Dr. Julia Lehner, 2. Bürgermeisterin der Stadt Nürnberg und zuständig für den Geschäftsbereich Kultur, die Hochschule für Musik Nürnberg besuchen und dort unter anderem auch den Spirio R-Flügel von LEONARDO – Zentrum für Innovation und Kreativität präsentiert bekommen.

 


Quelle: Technische Hochschule Nürnberg Georg Simon Ohm, 25.05.2020 (tB).

MEDICAL NEWS

The best (and worst) materials for mask
Therapy delivered electronically more effective than face to face
COVID-19 brain complications found across the globe
Remdesivir can save more lives where ICUs are overwhelmed
Novel biomarker discovery could lead to early diagnosis for deadly…

SCHMERZ PAINCARE

DBfK: Besondere Rolle für Pflegeexpert/innen Schmerz – nicht nur in…
Vagus-Stimulation: Neuartige Strom-Impulse lindern Schmerz
Aktuelle Aspekte der Anwendung von Cannabinoiden in Schmerz- und Palliativmedizin:…
Deutsche Gesellschaft für Neurologie (DGN): Ingwerextrakt hilft nicht zur Prophylaxe…
„LONTS“ – Langzeitanwendung von Opioiden bei nicht tumorbedingten Schmerzen: Dt.…

DIABETES

“Körperstolz”: Michael Krauser managt seinen Diabetes digital
Der richtige Sensor – von Anfang an
Diabetes mellitus: Ein Risikofaktor für frühe Darmkrebserkrankungen
Fastenmonat Ramadan: Alte und neue Herausforderung für chronisch Erkrankte während…
Sanofi setzt sich für die Bedürfnisse von Menschen mit Diabetes…

ERNÄHRUNG

Corona-Erkrankung: Fehl- und Mangelernährung sind unterschätze Risikofaktoren
Gesundheitliche Auswirkungen des Salzkonsums bleiben unklar: Weder der Nutzen noch…
Robert Koch-Institut: Fast Food, Bio-Lebensmittel, Energydrinks – Journal of Health…
Neue Daten zur Ernährungssituation in deutschen Krankenhäusern und Pflegeheimen: Mangelernährung…
Baxter: Parenterale Ernährung von Patienten mit hohem Aminosäurenbedarf

ONKOLOGIE

Lungenkrebsscreening mittels Low-Dose-CT: Anhaltspunkt für einen Nutzen
Eisenmangel/-anämie bei Tumorpatienten: Frühzeitige Diagnose und Therapie sind entscheidend
Gentest zur Vorbeugung von Chemotherapie-Nebenwirkungen. Alte Substanzen vor neuen Herausforderungen
Fortbildung für Pflegende zum „OncoCoach“
Hochauflösende 3D-Ansicht des Tumorinneren bei Brustkrebs mit optoakustischer Mesoskopie

MULTIPLE SKLEROSE

Multiple Sklerose: Novartis’ Siponimod verzögert Krankheitsprogression und Hirnatrophie bei aktiver…
Neurofilamente als Diagnose- und Prognosemarker für Multiple Sklerose
Bedeutung der Langzeittherapie bei Multipler Sklerose – mehr Sicherheit und…
Einige MS-Medikamente könnten vor SARS-CoV-2/COVID-19 schützen
Welchen Verlauf nimmt COVID-19 bei Patienten mit Multipler Sklerose?

PARKINSON

Neue Studie zur tiefen Hirnstimulation bei Parkinson-Erkrankung als Meilenstein der…
Parkinson-Patienten in der Coronakrise: Versorgungssituation und ein neuer Ratgeber
Neuer Test: Frühzeitige Differenzialdiagose der Parkinson-Erkrankung
Gegen das Zittern: Parkinson- und essentiellen Tremor mit Ultraschall behandeln…
Projekt VAFES: Expertenteam entwickelt Diagnosesystem für Parkinson-Patienten