Gimme GeMMA: Komposition kommt auf Knopfdruck

FH St. Pölten entwickelt Kompositions-Tool mit Fingerspitzengefühl

Musik für Filme und Games einfach selbst komponieren. Dies wird nun möglich durch das von der Fachhochschule St. Pölten entwickelte Software-Framework GeMMA. Dieses nützt ausgeklügelte Algorithmen, um die Kompositionswünsche der NutzerInnen umzusetzen. Die Einsatzmöglichkeiten von GeMMA stießen bereits vor Kurzem auf internationalen Konferenzen in Laibach und Korfu auf großes Interesse. Tatsächlich ist das Framework auch eine Basis für pädagogisch wertvolle Applikationen. Diese können zukünftig Kindern und Jugendlichen einen spielerischen Zugang zu klassischer Musik sowie Jazz eröffnen. Damit entwickelt die FH St. Pölten erneut Technologien, die zum interaktiven Entdecken von Komposition und Musik einladen.

(firmenpresse) - Bewegte Bilder bewegen Gemüter erst mit dem richtigen Soundtrack. Doch woher nehmen, ohne zu stehlen? Nun wurde an der FH St. Pölten ein Software-Framework namens GeMMA (Generative Music for Media Applications) entwickelt, das Musikwünsche durch Beschreibung in Worten in eigens komponierte Musikstücke verwandelt. FH-Prof. DI Hannes Raffaseder, Leiter des ICM/T – Institut für CreativeMedia/Technologies – über GeMMA: "Die Einsatzmöglichkeiten reichen von der Erstellung von Soundtracks, Games und Imagevideos bis hin zur pädagogischen Musikvermittlung."

Das Auge hört mit
Zum Komponieren mit GeMMA brauchen NutzerInnen neben dem Bildmaterial, das vertont werden soll, ein wichtiges Hilfsmittel: die Sprache. Den Kompositionsprozess beginnen NutzerInnen nämlich mit sogenannten "semantischen Beschreibungen" der einzelnen Szenen im Film, Video oder Spiel. Diese lassen sich aus einer Vielzahl an Möglichkeiten wie z. B. "Liebe", "Krieg" oder "Tod" in einem Pulldown-Menü anwählen und festlegen. Aus diesen Einzel-Beschreibungen erstellt das Software-Framework ein Beschreibungsdokument. Es "erkennt" diese darin zusammengefassten Annotationen, indem es sie mit der eigens von der FH St. Pölten entwickelten Datenbank "Clip Library" vergleicht. In dieser befinden sich 500 Szene-Clips von 250 Blockbustern verschiedener Genres – von Madagaskar bis Matrix – gemeinsam mit Soundtracks und Beschreibungen dafür. Die Komposition erfolgt mithilfe von Algorithmen und auf Basis mathematisch formulierter Gesetzmäßigkeiten von Kompositionen, welche je nach Genre variieren. Nach Fertigstellung erhalten NutzerInnen eine Komposition basierend auf ihrem Beschreibungsdokument. Das Musikstück wird als MIDI-Datei ausgegeben und darf, als Neukomposition, lizenzfrei genutzt werden. Alternativ können NutzerInnen auch Referenzstücke als MIDI-Dateien an das System übergeben. Diese werden auf ihre Struktur hin analysiert und zu neuen Stücken verarbeitet, wobei NutzerInnen die "Distanz" bzw. "Ähnlichkeit" zu dem vorgegebenen Musikstück selbst wählen und einstellen können. Die Gestaltung bleibt also, ob beim Annotieren oder beim Komponieren auf Basis eines Referenzstücks, immer in den Händen der NutzerInnen.



Komposition – ein Kinderspiel
Bei der Entwicklung der Algorithmen von GeMMA achtete das Team der FH St. Pölten von Beginn an darauf, dass diese auch für weitere Anwendungen genutzt werden können. Ein Beispiel dafür ist die Applikation "JazzPainter". Mithilfe dieser Applikation können NutzerInnen auf einem Tablet-PC ein virtuelles Jazz-Ensemble aus Bass, Gitarre, Klavier und Schlagzeug interaktiv zum Klingen bringen. Durch einfache Fingerbewegungen werden dabei die Instrumente in Relation zueinander auf dem Bildschirm positioniert: Nach "hinten" gestellte Instrumente werden hörbar leiser, während nach vorne gezogene Instrumente lauter werden. Möglich macht dies GeMMA, das im Hintergrund auf eine Datenbank mit Jazz-Standard-Melodien zugreift und laufend auf Basis der auf der Oberfläche veränderten Parameter Musik generiert. Nach zwei Jahren umfangreicher Entwicklungsarbeit wurde nun auf internationalen Konferenzen in Laibach und Korfu ein Teil der Projektergebnisse einem internationalen Fachpublikum vorgestellt. Auch Institutionen, die sich mit Musikvermittlung beschäftigen, haben das Potenzial softwaregestützter Lernangebote längst erkannt. So entwickelt die FH St. Pölten derzeit eine Software-Anwendung für den schulischen Musikunterricht gemeinsam mit dem Ernst-Krenek-Forum Krems: Kinder und Jugendliche können damit künftig unterschiedliche Kompositionsmodelle spielerisch verstehen. Möglich wird dies durch eigens dafür konzipierte Benutzeroberflächen, die zum spielerischen Entdecken einladen.
Weitere Infos zu dieser Pressemeldung:
Unternehmensinformation / Kurzprofil:
PresseKontakt / Agentur:
Bereitgestellt von Benutzer: PRD
Datum: 15.10.2012 - 13:35 Uhr
Sprache: Deutsch
News-ID 742089
Anzahl Zeichen: 4594

Kontakt-Informationen:
Ansprechpartner: Till C. Jelitto
Stadt:

Wien

Telefon: +43 / (0)1 / 505 70 44

Kategorie:

Computer & Technik

Meldungsart: Erfolgsprojekt
Versandart: Veröffentlichung
Freigabedatum: 15.10.2012

Diese Pressemitteilung wurde bisher 350 mal aufgerufen.

Demenz: Gezielte Prävention ist ein gutes Investment ...
Krems, Österreich, 24. Jänner 2024: Maßnahmen zur Prävention von Demenz in Risikogruppen können nicht nur die Lebensqualität verbessern, sondern machen auch volkswirtschaftlich viel Sinn. Das ist die Kernaussage einer jetzt veröffentlichten Analyse der IMC Krems University of Applied Sciences

Kombi-Therapie gegen Darmkrebs zeigt Wirkung trotz mutierter RAS-Gene ...
Krems (Österreich), 19. Dezember 2023: Eine erst vor kurzem zugelassene Kombinationstherapie für die Behandlung des metastasierenden Darmkrebses scheint unabhängig vom Mutationsstatus des Proto-Onkogens RAS zu wirken. Das zeigt eine Studie fünf österreichischer Krebszentren, die Daten von über

Neue Immuntherapie des kleinzelligen Lungenkarzinoms überzeugt in klinischer Studie der Phase II ...
Das kleinzellige Lungenkarzinom ist eine schwerwiegende Erkrankung, die mit schlechten Überlebenschancen verbunden ist. Obwohl die meisten Betroffenen auf eine Erst- und Zweitlinientherapie ansprechen, kommt es in der Regel innerhalb weniger Monate zu einem Fortschreiten der Erkrankung. Die Optione

Weitere Mitteilungen von PR&D - Public Relations für Forschung & Bildung

Frankfurt am Main wird neue Deutschland-Zentrale von Progress ...
Der künftige Hauptsitz von Progress Deutschland verstärkt die Rolle des Unternehmens im europäischen Markt. Im Rahmen der Entwicklung von Progress im deutschsprachigen Raum setzt das Unternehmen Akzente für den Ausbau von Marktanteilen in allen Branchen, besonders auch mit einem dedizierten Ang

Rapide wachsendes Datenvolumen birgt neue Herausforderungen für IT-Unternehmen ...
(arvato Systems) Gütersloh -- Die Studie "In-Memory-Datenanalyse in Zeiten von Big Data" wurde jetzt von Pierre Audoin Consultants (PAC) veröffentlicht. arvato Systems, einer der Sponsoren der aktuellen Studie, kann bereits auf erfolgreiche Big Data Projekte zurückblicken. Laut PA

notdienstpc.de - Notebook Reparatur Hannover ...
Die Notebook Reparatur Werkstatt und PC Notdienst seit 2007. Marienstraße 93, Südstadt Hannover Die Notebook,Laptop,Netbook,MacBook Reparatur Werkstatt in Hannover. Sie Wünschen eine Reparatur oder eine kostenlose Fehleranalyse? Hier geht's zur kostenlosen Fehleranalyse: http:/

Moderne Scannerkassen ...
Scanner finden Sie fast an jeder Computerkasse im Einzelhandel, die Barcodes liest. Der Barcode ist die Abbildung von Daten (z.B. Land, Hersteller und Artikelnummer, machmal auch den Preis) in binären Symbolen. 1 D Barcodes haben meist breite, parallete Striche mit Lücken. 2D Barcodes bestehen aus