| Beide Seiten der vorigen Revision
Vorhergehende Überarbeitung
Nächste Überarbeitung
|
Vorhergehende Überarbeitung
Nächste Überarbeitung
Beide Seiten der Revision
|
tutorium_vamp [2021/05/13 15:59]
martin |
tutorium_vamp [2021/05/14 10:02]
martin |
| ===== Visualierungen mit Sonic Visualiser und Vamp Plugins ===== | ===== Visualierungen mit Sonic Visualiser und Vamp Plugins ===== |
| In diesem Tutorial sollen die im [[tutorium_spektral|Tutorial: Spektraldarstellung mit dem Sonic Visualiser]] gewonnenen Einsichten weitergeführt werden. Dabei geht es zunächst um eine Wiederholung anhand einer Gesangsaufnahme, dann um weitere Visualisierungsmöglichkeiten von Klang, Melodie und Rhythmus, die mit Hilfe sog. //Vamp Plugins// aus den spektralen Daten der Audio-Datei errechnet werden. | In drei fortgeschrittenen Tutorials des Moduls //Audio Advanced// sollen die im [[tutorium_spektral|Tutorial: Spektraldarstellung mit dem Sonic Visualiser]] und [[tutorium_singing|Tutorial: Spektraldarstellung von Gesangsaufnahmen]] gewonnenen Einsichten ergänzt und weitergeführt werden. Dabei geht es um automatisierte Analyse- und Visualisierungsmöglichkeiten von Klang, Harmonik und Rhythmus, die mit Hilfe sog. //Vamp Plugins// aus den spektralen Daten der Audio-Datei errechnet werden. |
| |
| | Die drei Tutorials befinden sich auf eigenen Unterseiten: |
| | - [[tutorium_rhythm|Tutorial: Analyse von Rhythmus, Tempo, Mikrotiming]] |
| | - [[tutorium_chroma|Tutorial: Analyse von Tonalität und Harmonien]] |
| | - [[tutorium_sound|Tutorial: Analyse von Klangfarbe und Geräuschhaftigkeit]] |
| |
| ==== Spektraldarstellung von Gesangsaufnahmen ==== | == Installation der Vamp Plugins == |
| Bitte laden sie sich come_back_baby.mp3 auf Ihren Computer. | |
| Hören Sie sich die Aufnahme in Ruhe an. Was fällt auf? | |
| | |
| [[https://analyse.hfm-weimar.de/lib/exe/fetch.php?media=come_back_baby.mp3|come_back_baby.mp3]] | |
| Es handelt sich um die Aufnahme des Songs "Come Back, Baby" (1954) des Soul-Sängers Ray Charles. | |
| Bitte fertigen Sie im //Sonic Visualiser// eine Spektraldarstellung der Aufnahme an. | |
| Schauen Sie sich beim erneuten Anhören die Spektraldarstellung an. | |
| Was fällt nun zusätzlich auf? | |
| Hier einige Ausschnitte aus dem Sepktrogramm: | |
| | |
| [To-Do: Ausschnitte zu: | |
| * Starkes Gleiten der Stimme und Vibrato | |
| * Passagen mit Rauigkeit | |
| * Obertonstruktur und Formantbereiche bei einzelnen Vokalen | |
| * zeitliches Verhältnis zwischen Gesang und Band/Schlagzeug] | |
| | |
| ==== Installation der Vamp Plugins ==== | |
| Die [[https://www.vamp-plugins.org/|Vamp Plugins]] sind ein Audio Processing Plugin System, in dem MIR-Forscher*innen Plugin-Erweiterung für den Sonic Visualiser entwickeln und zur freien Verfügung stellen. Die einzelnen Plugins extrahieren jeweils unterschiedliche Information aus den Audiodateien und visualisieren diese in eine neue Visualisierungsschicht (//Layer//) im Sonic Visualiser. | Die [[https://www.vamp-plugins.org/|Vamp Plugins]] sind ein Audio Processing Plugin System, in dem MIR-Forscher*innen Plugin-Erweiterung für den Sonic Visualiser entwickeln und zur freien Verfügung stellen. Die einzelnen Plugins extrahieren jeweils unterschiedliche Information aus den Audiodateien und visualisieren diese in eine neue Visualisierungsschicht (//Layer//) im Sonic Visualiser. |
| |
| Eine [[https://www.vamp-plugins.org/download.html|Liste]] der bislang entwickelten Vamp Plugins enthält kurze Beschreibungen und Links zu den entsprechenden Dokumentations- und Download-Seiten. Nach dem Download müssen die Plugin-Dateien in einen Ordner namens "Vamp Plugins" gelegt werden, der sich in demselben Ordner befindet wie der //Sonic Visualiser//-Programmordner, z.B. in //C\:Programme// oder //C\:Program files//. Anschließend sind die Plugins über den Menupunkt //Transform// im Sonic Visualiser abrufbar und lassen sich auf die geöffnete Audiodatei anwenden. | Eine [[https://www.vamp-plugins.org/download.html|Liste]] der bislang entwickelten Vamp Plugins enthält kurze Beschreibungen und Links zu den entsprechenden Dokumentations- und Download-Seiten. Nach dem Download müssen die Plugin-Dateien in einen Ordner namens "Vamp Plugins" gelegt werden, der sich in demselben Ordner befindet wie der //Sonic Visualiser//-Programmordner, z.B. in //C\:Programme// oder //C\:Program files//.\\ |
| | Anschließend sind die Plugins über den Menupunkt //Transform// im Sonic Visualiser abrufbar und lassen sich auf die geöffnete Audiodatei anwenden. |
| |
| Für das Tutorial [[tutorium_vamp|Visualierungen mit Sonic Visualiser und Vamp Plugins]] werden folgende Plugin-Pakete benötigt: | Für die Tutorials werden folgende Plugin-Pakete benötigt: |
| * [[https://vamp-plugins.org/plugin-doc/qm-vamp-plugins.html|Queen Mary plugin set]] | * [[https://vamp-plugins.org/plugin-doc/qm-vamp-plugins.html|Queen Mary plugin set]] |
| * [[https://aubio.org/vamp-aubio-plugins/|Vamp Aubio Plugins]] | * [[https://aubio.org/vamp-aubio-plugins/|Vamp Aubio Plugins]] |
| |
| ==== Visualisierung der Melodielinie ==== | |
| |
| Aubio-Vamp Plugin. | |
| |
| |
| |
| * Gleiten der Tonhöhe, Ornamente | |
| |
| //-> Tool im Jupyter-Notebook? | |
| * Automatische Bestimmung der Grundtonhöhe mit Vamp Plugin | |
| * Visualisierung der Melodiebewegung (Grundton) und Bezug auf ein Tonhöhenraster | |
| * Eingabe des Zeitrahmens | |
| * Eingabe der Bezugstonhöhe / Grundtonhöhe | |
| * automatisierte Erstellung einer Grundtonkurve mit Tonhöhenraster// | |
| |
| |
| ==== Rhythmus, Tempo, Mikrotiming ==== | |
| |
| |
| |
| |
| |
| ==== Klangfarbe ===== | |
| |
| |
| ==== Harmonik ===== | |
| Chroma | |
| |
| |
| |