Diemo Schwarz
dates de séjour
discipline
Fonction d’origine
Institution d’origine
pays d'origine
lien internet
projet de recherche
CoCAVS: Concatenative Corpus-based Audio–Visual Synthesis
The proposal is about extending the principle of interactive corpus-based concatenative synthesis to the visual domain: Instead of creating music by navigating through sound grains in a space of audio descriptors, we build up a corpus of still images, calculate image descriptors (colour, texture, brightness, entropy, etc.), and navigate through that corpus interactively with gestural control via movement sensors. This will evoke an esthetic of visual collage or cut-up, juxtaposing similar images when navigation is local, and opposing contrasting images when the navigation jumps to different parts of the image descriptor space.
The fascinating artistic question to be explored during the residency is then how to link the image descriptors to the sound descriptors in order to create multi-modal AV performances and installations. Here, the questions of multi-sensorial correspondences and synesthesia to be explored in the mapping might even lead towards new research directions in multi-modal perception.
biographie
Diemo Schwarz est musicien improvisateur et compose pour des installations, la danse et la vidéo, chercheur en interactions musicales temps-réel à l'Ircam et développeur en arts numériques. Il joue avec l'électronique des matières riches en timbres et textures, explorant différents corpus de sons à l'aide de contrôleurs gestuels, permettant ainsi à l’expressivité et au corps de dialoguer avec l'instrument numérique.
Son utilisation de la synthèse concaténative recompose l'espace des sons et interroge leurs qualités intrinsèques. Enfin il compose pour la danse, la vidéo et des installations. Ses recherches scientifiques à l'Ircam portent sur l'interaction entre musicien et machine, et l'exploitation de grandes masses de sons pour la synthèse sonore temps-réel et interactive, en collaboration avec des compositieurs, ou pour des installations grand public avec des interfaces tangibles intuitifs.
Il a participé dans de nombreux projets collaboratifs: MICA, CoSiMA Collaborative Situated Media, Physis, Topophonie, DISCO, SampleOrchestrator (financements ANR) et ABC_DJ, SAME, i-Maestro, SemanticHIFI, AGNULA (financements européens).
