Intelligent structuring and exploration of digital music collections

M. Schedl, E. Pampalk, G. Widmer
2005 e & i Elektrotechnik und Informationstechnik  
In this paper we present a general approach to the automatic content-based organization and visualization of large digital music collections. The general methodology consists in extracting musically and perceptually relevant patterns ('features') from the given audio recordings (e.g., mp3 files), using topology-preserving data projection methods to map the entire music collection onto two-dimensional visualization planes (possibly in a hierarchical fashion), and using a new display metaphor
more » ... 'Islands of Music') to display the inherent structure of the music collection to the user. It is shown how arbitrary meta-data can be integrated into the visualization process, and how similarity according to different viewpoints can be defined and exploited. The basic methodology is briefly described, three prototype systems are presented, and a general discussion of the practical application possibilities of such technologies is offered. Abstract (German) Diese Arbeit präsentiert eine allgemeine Methodik zur automatischen inhaltsbasierten Strukturierung und Visualisierung großer digitaler Musiksammlungen. The Methode besteht im Extrahieren musikalisch und perzeptuell relevanter Muster ('Features') aus Audioaufnahmen (z.B. mp3-Files), der Projektion der Daten und der Musiksammlung auf zweidimensionale (möglicherweise hierarchisch strukturierte) Visualisierungsebenen mittels topologiererhaltender Projektionsmethoden, und der Visualisierung der resultierenden Strukturen mittel einer neuen graphischen Metapher (den sogenannten 'Islands of Music'), so dass die inhärente Struktur der Musiksammlung für den Benutzer sichtbar wird. Es wird auch gezeigt, wie beliebige zusätzliche Meta-Daten in den Visualisierungsvorgang integriert und verschiedene Gesichtspunkte von (musikalischer) Ähnlichkeit definiert und mit einbezogen werden können. Die Arbeit bietet eine kurze Beschreibung der Grundmethodik, präsentiert drei Softwareprototypen und diskutiert dann die praktischen Anwendungsmöglichkeiten solcher Technologien. Schlüsselwörter: intelligente Musikverarbeitung, musikalische Ähnlichkeit, automatische hierarchische Strukturierung, Schnittstellen zu Musik Title (German): Intelligente Strukturierung und Exploration von digitalen Musiksammlungen
doi:10.1007/bf03054434 fatcat:bpilvvvy4vaa5cy3kvc357hjv4