Résumés. Disque photosonique : interactions entre recherche graphique et contrôle gestuel

Transcription

1 773 Résumés Table ronde Une table ronde virtuelle a réuni par Internet neuf participants qui, ensemble, représentent des approches significatives et multiples, musicalement et techniquement, du contrôle gestuel D. Buchla, W. Buxton, C. Chafe, T. Machover, M. Mathews, R. Moog, J.-C. Risset, L. Sonami and M. Waisvisz. Ils évoquent leur expérience avec les contrôleurs gestuels, ce qu'ils considèrent être la situation actuelle dans ce domaine et comment ils voient sont évolution. Des points de vue très intéressants, parfois très surprenants et engageants intellectuellement, ont été exprimés et jettent un jour nouveau sur ce sujet. D. Arfib et J. Dudon Disque photosonique : interactions entre recherche graphique et contrôle gestuel Le but de cet article est de montrer quels gestes sont utilisés par un interprète de l instrument photosonique et de comprendre la relation entre les graphiques et les ressources gestuelles. Cet instrument montre l'importance d'un geste véritablement guidé par l'oreille. Il utilise l'interception de rayons de lumière par des disques et des filtres semitransparents ; lorsque le disque entre en rotation, le son est créé par un courant induit dans la cellule photo. Cet article contient plusieurs exemples de vidéo et des extraits sonores. R. Auzet Dispositif d acquisition gestuelle MIDI pour percussionniste Cet article soulève la question de l'écriture et de l'interprétation de musique pour percussion et électronique en situation de concert. L auteur, percussionniste et compositeur, expose ses propres approches et expérimentations avec des dispositifs divers qui ont été conçus à l'ircam pour deux projets récents. M. Battier Musique électronique et geste En constatant que l'histoire de la musique électroacoustique attire de plus en plus d'attention, l auteur examine les étapes du développement des instruments de musique électroniques, tels que le theremin ou les ondes Martenot, et dégage de la lutherie électronique son rapport au geste instrumental.

2 774 C. Cadoz et M. Wanderley Geste-musique Cet article examine les diverses définitions du mot Geste dans le domaine de l'interaction homme homme et homme machine. Il présente ensuite deux types de classification des gestes instrumentaux : le premier est basé sur des caractéristiques physiologiques des mouvements des êtres humains et le second sur la fonction du geste. A. Camurri et R. Trocca Mouvement et geste dans les systèmes musicaux interactifs intelligents Les deux auteurs introduisent un domaine de recherche sur la musique et l'interaction en soulevant les problèmes de l'intégration du mouvement et des langages musicaux. En ce qui concerne le mouvement, ils examinent l'analyse qualitative de haut niveau du mouvement humain, en commençant par des études précédentes sur le mouvement pris de ce point de vue, comme la théorie de l'effort de Laban, et le traitement de l'information de Kansei. Des scénarios d'application typiques qu ils évoquent incluent la musique interactive, le théâtre, l'art et les installations de musées, et vont jusqu'aux robots sur scène. J. Chadabe Les dispositifs que j ai connus et aimés L auteur adresse ces questions : les dispositifs de jeu satisfont-ils les demandes de la représentation en concert? Il examine l'interaction de jeu dans certaines de ses œuvres et fait des observations sur plusieurs dispositifs qu'il a utilisé : l'antenne theremin de Moog et le touchsurface, contrôleur 3-dimensions sensible au toucher. Il conclut avec une discussion sur les gestes non - essentiels dans le cas des instruments à vent. I. Choi Primitives gestuelles et un contexte pour le traitement informatique dans un système interactif d exécution musicale Cet article présente des exemples expérimentaux de compositions et de recherche en cours. Des primitives gestuelles sont exposées et classifiées en fonction des aspects cognitifs et physiques des interprètes, appliquées à la conception et à l'adaptation de capteurs et d'architecture logicielle et testées dans un environnement logiciel comme une infrastructure qui puisse faciliter des interprétations multimodales avec simulations interactives. Pour justifier d'un modèle complet d'interactivité, la dernière section est consacrée à la représentation de l'espace interactif par la construction d'un plan cognitif hypothétique.

3 775 I. Choi Une interface multiple pour la notation kinesthésique dans des systèmes à grands nombres de dimensions Cet article décrit la réalisation technique du système de l'auteur à la NCSA. Il inclut des discussions sur les stratégies de relations utilisées, et sur le dispositif de génération du son et de la vidéo. Plusieurs clips vidéo montrent des exemples de son jeu avec ce système. E. Flety Acquisition de gestes tridimensionnels avec des capteurs à ultra-sons La recherche et la création musicale avec des interfaces gestuelles ont récemment vu un regain d'intérêt et d'activité à l'ircam. Lors de plusieurs projets musicaux issus de jeunes compositeurs inscrits au Cursus de Composition et de Musique Informatique ou d'artistes invités, les départements de Pédagogie et de Création de l'ircam ont proposé diverses solutions pour la synthèse et le traitement de sons contrôlés par le geste. Dans cet article, l auteur, ingénieur électronicien, décrit les aspects techniques d'un dispositif gestuel spécifique, conçu pour la musique de percussion acoustique et électronique. La fabrication d'un prototype basé sur la technologie de l'ultrason sera présentée après une brève introduction du contexte musical. M. Goldstein Interprétation électronique avec des mailloches extension des possibilités gestuelles L auteur, percussionniste et compositeur, examine les liens entre la captation de gestes instrumentaux et la façon dont ces gestes sont reliés à des synthétiseurs MIDI dans la pratique habituelle d'interprétation sur des contrôleurs de percussion avec mailloches. Un aperçu est donné sur les contrôleurs avec mailloches, et un nouveau contrôleur, le Marimba Lumina est décrit. Cet instrument étend les possibilités de jeu du percussionniste tout en préservant la technique traditionnelle du clavier à mailloches, ce qui demande très peu de nouvelles compétences techniques de la part du musicien, mais qui permet d'utiliser des mouvements de jeu habituels, de façon originale. S. Goto Instruments de musique virtuels : aspects technologiques et questions d exécutions interactives Cet article vise à exposer les expériences et les développements de l'auteur dans la création de divers interfaces gestuelles pour une utilisation dans ses œuvres pour instruments de musique virtuels, qui ne se réfèrent pas seulement aux instruments physiques, mais impliquent aussi en grande partie de la programmation de synthèse de son et de la vidéo interactive. Utilisant les instruments de musique virtuels, l auteur a expérimenté de nombreuses compositions et interprétations. Cet article conclut avec une discussion qui étend et dépasse le problème de la notion même d'interactivité.

4 776 A. Hunt et R. Kirk Stratégies de correspondances dans l exécution musicale Cette contribution examine diverses stratégies pour relier les gestes humains à des paramètres de synthèse pour l'interprétation en situation de concert. Elle décrit un travail expérimental qui compare trois types de relations d'interfaces pour une application de contrôle musical en temps réel. Les résultats des expériences suggèrent que certaines formes de relations multiparamétrées et continues sont bénéfiques pour la lutherie numérique. F. Iazzetta La signification dans les gestes musicaux L'auteur soulève la question du sens des gestes musicaux dans les interprétations avec de nouveaux instruments. Il décrit plusieurs utilisations de gestes dans la musique électronique, y compris la perception musicale par un public. Dans une perspective théorique, l'auteur classifie l'interaction par rapport à la sémiotique. S. de Laubier Le Méta-Instrument. Début du projet Dans cet article Serge de Laubier présente les motivations qui l ont conduit à créer le Méta-instrument : exploration de l espace et jeu en temps réel d une musique électroacoustique. Plusieurs réalisations sont décrites et leur fonctionnement est abordé de façon précise. T. Marrin Nakra La recherche de sens dans les données gestuelles : extraction de caractères de l interprétation et traitement du contenu affectif et expressif Cet article présente une méthode originale qui a été développée pour améliorer l'utilité et l'attrait des instruments de musique sont basés sur l informatiques. La première tâche a été de collecter, analyser et interpréter les données gestuelles et physiologiques d interprètes dans des situations réelles de répétition et de concert. De nombreuses considérations sur le contexte et la conception sont présentés et suivis par les résultats d'une analyse visuelle approfondie. Les implications pour ces résultats et la suite du travail sont enfin examinés. P. Modler Réseaux neuronaux pour l affectation des gestes de la main aux paramètres de synthèse sonore Cet article expose le travail de l auteur travail sur la mise en relation de gestes de la main vers des paramètres musicaux dans une interprétation de musique interactive et un environnement de réalité virtuelle. Une architecture de réseaux de neurones pour des sous-gestes est introduite afin de fournir un mécanisme pour obtenir des paramètres de contrôle significatifs.

5 777 A. Mulder Vers un choix de contraintes gestuelles pour les instrumentistes (reprint) Cet article tente d'identifier des moyens d'autoriser des instruments de musique à s adapter à l'habileté moteur qu'un interprète possède, préfère ou à laquelle il est limité. Cette approche de la relation entre interprète et instrument devrait mener à une plus grande liberté pour que l'interprète puisse choisir et développer son vocabulaire gestuel personnel, et, si l'interprète peut déjà exprimer ces gestes habilement, atteindre plus rapidement une plus grande aisance dans l'interprétation musicale. L. Pottier et O. Stalla Interprétation et espace Dans ce seul article de ce volume à aborder de façon approfondie le contrôle de la diffusion dans l espace de la salle de concert, les auteurs passent en revue plusieurs systèmes de spatialisation: Chowning, Spat de l Ircam, l Acousmonium de l Ina-GRM et le Sigma de Berlin. Ils mentionnent plusieurs jalons de l emploi de l espace dans des œuvres musicales du XX e siècle. Enfin, ils décrivent en détail le système de contrôle qu ils ont développé et appliqué dans plusieurs œuvres. J. Rovan et V. Hayward Typologie de sons tactiles et leur synthèse dans l exécution musicale pilotée par le geste Les deux auteurs présentent les principes essentiels pour qu'un système de retour tactile soit utilisé conjointement avec des dispositifs informatiques de jeu musical sans contact physique. Certains mécanismes physiologiques et tactilo-kinesthésiques sous-jacent ainsi que des contrôleurs de plein air actuellement disponibles sont examinés. Les technologies et expériences précédentes sur le retour d effet tactilo-kinesthésique sont passées en revue. Le système VR/TX des auteurs est proposé comme solution pour ajouter un retour tactile aux contrôleurs sans contact physique. Une typologie de sons tactiles est aussi décrite, ainsi que la notion d'événement de simulation tactile. S. Serafin et R. Dudas Un contrôleur non traditionnel pour instrument virtuel à corde frottée Les deux auteurs ont développé un contrôleur instrumental à partir d un simple périphérique d ordinateur: une tablette graphique. Une section de l article est consacrée à la comparaison précise avec l utilisation à un archet de violon. Le jeu de la tablette s effectue dans un environnement Max/MSP.

6 778 A. Tanaka Exécution musicale avec contrôleurs gestuels L'auteur a une grande expérience de la conception et de l'interprétation avec des systèmes interactifs. Dans cet article, il fait des commentaires sur plusieurs aspects fondamentaux de l'interprétation avec un instrument basé sur des capteurs, comprenant retour, gestes, relations et perception du public. L. Tarabella La recherche sur les interfaces gestuelles au CNUCE/CNR Cette contribution décrit le développement de la conception de contrôleurs gestuels d'alternative au CNUCE de Pise (Italie). Les différents contrôleurs incluent la mesure de la position et de la rotation d'une main avec un contrôleur infrarouge à courte distance, ainsi qu'un système de captation vidéo utilisé pour des applications musicales et pour la peinture. T. Ungvary et R. Vertegaal Cognition et ergonomie dans les cyberinstruments Dans cet article, les auteurs présentent le SensOrg, un cyberinstrument musical conçu comme un assemblage modulaire de dispositifs d'entrée/sortie et de logiciels musicaux, reliés et arrangés selon des caractéristiques fonctionnelles d un système homme instrument. Ils exposent comment l'ergonomie cognitive de modalités de tâches non verbales et symboliques a influencé la conception de leur interface matérielle pour des situations de tâches aussi bien synchrones qu'asynchrones.