Recherches en création et pédagogie musicales assistées par la technologie

Transcription

1 Recherches en création et pédagogie musicales assistées par la technologie Hugues Vinet Directeur scientifique

2 Présentation de l Ircam Institut de recherche et de coordination acoustique/ musique Tutelle : Ministère de la culture et de la communication Activités : Recherche interdisciplinaire, création musicale contemporaine, enseignement (dont formations supérieures) Création : plus de 20 œuvres créées/an + concerts et tournées Recherche et développement 100 chercheurs/ingénieurs/doctorants + 40 stagiaires/invités UMR Sciences et technologies de la musique et du son (STMS) IRCAM/CNRS/UPMC Développement d une douzaine d environnements logiciels avancés pour la création musicale/ production sonore Projets de R&D collaboratifs en cours : 26 dont 8 en tant que coordinateur Positionnement : leader international en R&D en STMS et création musicale contemporaine retour d usage : utilisateurs in-house + Forum Ircam (1300 utilisateurs) + produits diffusion : événements publics, communication 2

3 Recherche pour la création musicale : enjeux et disciplines scientifiques Enjeux artistiques Fonctions techniques Disciplines scientifiques Extension du matériau sonore Espaces sonores virtuels Composition, création assistées par ordinateur Extension de la notion d instrument Œuvres interactives, mixtes instrument/ordinateur Etude des œuvres et des processus créatifs Synthèse, traitement, analyse du son Spatialisation sonore, dispositifs de captation/reproduction Représentations et langages informatiques spécialisés Interaction geste/son : captation/interaction/synthè se temps réel Traitement et synchronisation temps réel, Langages d interaction Documentations hypermédia Traitement du signal, acoustique, psychoacoustique Traitement du signal, acoustique, cognition multimodale Informatique (langages, IA, temps réel, IHM) Traitement du signal, apprentissage, bioinformatique Traitement de signal, informatique Musicologie, anthropologie, cognition située 3

4 Domaines d applications des STMS Sciences et technologies de la musique et du son Cercles concentriques autour de la création musicale Ŕ Lutherie et production musicales (musique, film, jeu) : synthèse, traitement, interaction geste/son, générativité, modélisation acoustique Ŕ Technologies pour le spectacle vivant (danse, théâtre, installations) : geste, voix, interaction temps réel, spatialisation Ŕ Education musicale (scolaire, interprétation, composition) : Musique Lab, geste, analyse signal, suivi de partition, composition et analyse assistées Ŕ Post-production audio (cinéma, TV, multimédia) : spatialisation, traitement audio et voix Ŕ Design sonore : manufacture (notamment automobile), IHM, environnements intérieurs et extérieurs, communication Ŕ Distribution musicale, UGC (user generated contents) : indexation musicale, traitement audio Ŕ Indexation multimédia (TV, vidéo) : indexation audio & crossmedia Ŕ Réalité virtuelle et simulation multimodale : synthèse, spatialisation, geste 4

5 Exemples de réalisations 5

6 Synthèse sonore par modélisation physique Logiciel Modalys : lutherie virtuelle La représentation modale comme formalisme commun aux objets de base Synthèse modale à partir d éléments finis Ŕ maillages 3D d instruments 6

7 Ircam Tools : Spat 7

8 Logiciel Audiosculpt : Edition temps-fréquence des sons 8

9 Ircam Tools : Voice Processing 9

10 Max/MSP Langage visuel pour le traitement temps réel Référence mondiale pour l interactivité multimédia Licence exclusive de l Ircam à Cycling 74 - San Francisco, CA utilisateurs enregistrés sur tous les continents 10

11 OpenMusic Composition musicale assistée par ordinateur 11

12 Synchronisation interprète/ordinateur : Antescofo suivi de partition 12

13 Interaction geste/ son Captation, reconnaissance et suivi de geste 13

14 Analyse et générativité musicales: OMax pour l improvisation par ordinateur 14

15 hugues.vinet (à) ircam.fr 15