Content-based audio search: from fingerprinting to semantic audio retrieval

Cano Vila, Pedro

Content-based audio search: from fingerprinting to semantic audio retrieval

Document Type

Doctoral thesis
Published Version

Author

Cano Vila, Pedro

Director

Serra, Xavier

Publication Date

2007-04-27

Citation

Cano Vila, P. Content-based audio search: from fingerprinting to semantic audio retrieval. Universitat Pompeu Fabra; 2007. handle: http://hdl.handle.net/10803/7543

This citation was generated automatically.

Doctoral program

Programa de doctorat en Tecnologies de la Informació i les Comunicacions

Abstract

Aquesta tesi tracta de cercadors d'audio basats en contingut. Específicament, tracta de desenvolupar tecnologies que permetin fer més estret l'interval semàntic o --semantic gap' que, a avui dia, limita l'ús massiu de motors de cerca basats en contingut. Els motors de cerca d'àudio fan servir metadades, en la gran majoria generada per editors, per a gestionar col.leccions d'àudio. Tot i ser una tasca àrdua i procliu a errors, l'anotació manual és la pràctica més habitual. Els mètodes basats en contingut àudio, és a dir, aquells algorismes que extreuen automàticament etiquetes descriptives de fitxers d'àudio, no són generalment suficientment madurs per a permetre una interacció semàntica. En la gran majoria, els mètodes basats en contingut treballen amb descriptors de baix nivell, mentre que els descriptors d'alt nivell estan més enllà de les possibilitats actuals. En la tesi explorem mètodes, que considerem pas previs per a atacar l'interval semàntic.
This dissertation is about audio content-based search. Specifically, it is on developing technologies for bridging the semantic gap that currently prevents wide-deployment of audio content-based search engines.<br/>Audio search engines rely on metadata, mostly human generated, to manage collections of audio assets.<br/>Even though time-consuming and error-prone, human labeling is a common practice.<br/>Audio content-based methods, algorithms that automatically extract description from audio files, are generally not mature enough to provide a user friendly representation for interacting with audio content. Mostly, content-based methods are based on low-level descriptions, while high-level or semantic descriptions are beyond current capabilities. In this thesis we explore technologies that can help close the semantic gap.

Keywords

búsqueda de información basada en contenido, classificacio d'audio, ontologies, identificacio d'audio, recuperacio d'informacio audio, cerca d'audio basada en contingut, audio classification, wordnet, ontology, audio fingerprinting, audio retrieval, content based audio search, recuperación de información de audio, identificación de audio, ontologías, clasificación de áudio