Xavier Hautbois

Xavier Hautbois, « Synthèse bimodale des Unités Sémiotiques Temporelles », in L. Stranska, H. Zénouda, Son - Image - Geste : une interaction illusoire ? Actes du colloque du Festival aCROSS’13. Paris, L’Harmattan, 2016, p. 245-252.

Résumé

Les Unités Sémiotiques Temporelles (UST) constituent un outil d’analyse musicale élaboré par le laboratoire de Musique et Informatique de Marseille (MIM) dès 1992, sous la direction de François Delalande. Un certain nombre d’observations et d’analyses dans d’autres domaines que le son ont conduit à examiner la sémiotique temporelle sous un angle plus général, indépendamment des caractéristiques propres du média. Les recherches menées dans cette voie ont permis d’apporter des précisions semi-quantitatives sur les UST par le jeu de la modélisation : le modèle développé, appelé Motifs Temporels Paramétrés (MTP), donne une représentation graphique et analytique du comportement temporel des UST. Afin de mieux comprendre les interactions entre la sémiotique temporelle sonore et visuelle, nous avons conçu un synthétiseur d’UST multimédia permettant de produire, à partir du modèle des MTP, des UST sonores, visuelles ou audiovisuelles. Il est donc possible, avec ce logiciel, d’éprouver les possibilités d’un transfert des UST sonores dans le domaine visuel et d’envisager des transitions bimodales d’UST : fabriquer des UST qui débutent dans le visuel, puis se terminent dans le sonore, ou vice versa. L’objectif étant de tester les limites du modèle et d’étudier dans quelle mesure les UST s’associent ou se complètent dans les deux médias.