Beide Seiten der vorigen Revision
Vorhergehende Überarbeitung
Nächste Überarbeitung
|
Vorhergehende Überarbeitung
|
tutorium_vamp [2021/05/13 15:57] martin |
tutorium_vamp [2022/02/27 10:35] (aktuell) andres_romero |
===== Visualierungen mit Sonic Visualiser und Vamp Plugins ===== | ===== Visualierungen mit Sonic Visualiser und Vamp Plugins ===== |
In diesem Tutorial sollen die im [[tutorium_spektral|Tutorial: Spektraldarstellung mit dem Sonic Visualiser]] gewonnenen Einsichten weitergeführt werden. Dabei geht es zunächst um eine Wiederholung anhand einer Gesangsaufnahme, dann um weitere Visualisierungsmöglichkeiten von Klang, Melodie und Rhythmus, die mit Hilfe sog. //Vamp Plugins// aus den spektralen Daten der Audio-Datei errechnet werden. | In drei fortgeschrittenen Tutorials des Moduls //Audio Advanced// sollen die im [[tutorium_spektral|Tutorial: Spektraldarstellung mit dem Sonic Visualiser]] und [[tutorium_singing|Tutorial: Spektraldarstellung von Gesangsaufnahmen]] gewonnenen Einsichten ergänzt und weitergeführt werden. Dabei geht es um automatisierte Analyse- und Visualisierungsmöglichkeiten von Klang, Harmonik und Rhythmus, die mit Hilfe sog. //Vamp Plugins// aus den spektralen Daten der Audio-Datei errechnet werden. |
| |
| Die drei Tutorials befinden sich auf eigenen Unterseiten: |
| - [[tutorium_rhythm|Tutorial: Analyse von Rhythmus, Tempo, Mikrotiming]] |
| - [[tutorium_chroma|Tutorial: Analyse von Tonalität und Harmonien]] |
| - [[tutorium_sound|Tutorial: Analyse von Klangfarbe und Geräuschhaftigkeit]] |
| |
==== Spektraldarstellung von Gesangsaufnahmen ==== | == Installation der Vamp Plugins == |
Bitte laden sie sich come_back_baby.mp3 auf Ihren Computer. | |
Hören Sie sich die Aufnahme in Ruhe an. Was fällt auf? | |
{{ :come_back_baby.mp3 |come_back_baby.mp3}} | |
Es handelt sich um die Aufnahme des Songs "Come Back, Baby" (1954) gesungen von des Soul-Sängers Ray Charles. | |
Bitte fertigen Sie im //Sonic Visualiser// eine Spektraldarstellung der Aufnahme an. | |
Schauen Sie sich beim erneuten Anhören die Spektraldarstellung an. | |
Was fällt nun zusätzlich auf? | |
Hier einige Ausschnitte aus dem Sepktrogramm: | |
| |
[To-Do: Ausschnitte zu: | |
* Starkes Gleiten der Stimme und Vibrato | |
* Passagen mit Rauigkeit | |
* Obertonstruktur und Formantbereiche bei einzelnen Vokalen | |
* zeitliches Verhältnis zwischen Gesang und Band/Schlagzeug] | |
| |
==== Installation der Vamp Plugins ==== | |
Die [[https://www.vamp-plugins.org/|Vamp Plugins]] sind ein Audio Processing Plugin System, in dem MIR-Forscher*innen Plugin-Erweiterung für den Sonic Visualiser entwickeln und zur freien Verfügung stellen. Die einzelnen Plugins extrahieren jeweils unterschiedliche Information aus den Audiodateien und visualisieren diese in eine neue Visualisierungsschicht (//Layer//) im Sonic Visualiser. | Die [[https://www.vamp-plugins.org/|Vamp Plugins]] sind ein Audio Processing Plugin System, in dem MIR-Forscher*innen Plugin-Erweiterung für den Sonic Visualiser entwickeln und zur freien Verfügung stellen. Die einzelnen Plugins extrahieren jeweils unterschiedliche Information aus den Audiodateien und visualisieren diese in eine neue Visualisierungsschicht (//Layer//) im Sonic Visualiser. |
| |
Eine [[https://www.vamp-plugins.org/download.html|Liste]] der bislang entwickelten Vamp Plugins enthält kurze Beschreibungen und Links zu den entsprechenden Dokumentations- und Download-Seiten. Nach dem Download müssen die Plugin-Dateien in einen Ordner namens "Vamp Plugins" gelegt werden, der sich in demselben Ordner befindet wie der //Sonic Visualiser//-Programmordner, z.B. in //C\:Programme// oder //C\:Program files//. Anschließend sind die Plugins über den Menupunkt //Transform// im Sonic Visualiser abrufbar und lassen sich auf die geöffnete Audiodatei anwenden. | Eine [[https://www.vamp-plugins.org/download.html|Liste]] der bislang entwickelten Vamp Plugins enthält kurze Beschreibungen und Links zu den entsprechenden Dokumentations- und Download-Seiten. Nach dem Download müssen die Plugin-Dateien in einen Ordner namens "Vamp Plugins" gelegt werden, der sich in demselben Ordner befindet wie der //Sonic Visualiser//-Programmordner, z.B. in //C\:Programme// oder //C\:Program files//.\\ |
| Anschließend sind die Plugins über den Menupunkt //Transform// im Sonic Visualiser abrufbar und lassen sich auf die geöffnete Audiodatei anwenden. |
| |
Für das Tutorial [[tutorium_vamp|Visualierungen mit Sonic Visualiser und Vamp Plugins]] werden folgende Plugin-Pakete benötigt: | Für die Tutorials werden folgende Plugin-Pakete benötigt: |
* [[https://vamp-plugins.org/plugin-doc/qm-vamp-plugins.html|Queen Mary plugin set]] | * [[https://vamp-plugins.org/plugin-doc/qm-vamp-plugins.html|Queen Mary plugin set]] |
* [[https://aubio.org/vamp-aubio-plugins/|Vamp Aubio Plugins]] | * [[https://aubio.org/vamp-aubio-plugins/|Vamp Aubio Plugins]] |
| |
==== Visualisierung der Melodielinie ==== | |
| |
Aubio-Vamp Plugin. | |
| |
| |
| |
* Gleiten der Tonhöhe, Ornamente | |
| |
//-> Tool im Jupyter-Notebook? | |
* Automatische Bestimmung der Grundtonhöhe mit Vamp Plugin | |
* Visualisierung der Melodiebewegung (Grundton) und Bezug auf ein Tonhöhenraster | |
* Eingabe des Zeitrahmens | |
* Eingabe der Bezugstonhöhe / Grundtonhöhe | |
* automatisierte Erstellung einer Grundtonkurve mit Tonhöhenraster// | |
| |
| |
==== Rhythmus, Tempo, Mikrotiming ==== | |
| |
| |
| |
| |
| |
==== Klangfarbe ===== | |
| |
| |
==== Harmonik ===== | |
Chroma | |
| |
| |
| |