Représenter les médias de manière structurée

Une introduction aux tuiles hiérarchisées

Alice Rixte

Université de Bordeaux

14 Septembre 2023
Journée Musiscale, CRIStAL, Lille
Alice Rixte

Qu'est-ce que la structure (en musique) ?

William E. Thomson, Functional Ambiguity in Musical Structures, 1983
Musical structure [...] refers to the way elements are organized into patterns of coherence, the perceptual act of small events joining to create large events.
Morris R. Cohen, A preface to logic, 1944
Anything acquires meaning if it is connected with, or indicates, or refers to, something beyond itself, so that its full nature points to and is revealed in that connection.
Alice Rixte

La structure pourrait donc être

1. Une hiérarchie

Des atomes sont combinés pour former des structures, elles-mêmes combinées en des métastructures de plus en plus complexes.

2. Une articulation de cette hiérarchie

Les différents composants de cette hiérarchie sont mis rapport les uns avec les autres.

Alice Rixte

Plan

1. Hiérarchie de motifs

  • Niveau 0 (atomes) : note de musique, lettre, pixel ...
  • Niveau 1 (motif d'atomes) : mesure, mot ...
  • Niveau 2 (motif de motif d'atomes) : phrase ...
  • Niveau 3 (motif de motif de motif d'atomes) : section, paragraphe ...
  • ...
Alice Rixte

Plan

2. Transformation des motifs

Elles permettent d'exprimer les similarités entre motifs.

  • Déplacements
  • Symmétries
  • Dilatations
  • Déformations
  • ...
Alice Rixte

Plan

3. Construction de motifs

  • Processus de composition
  • Opérations algébrique sur les motifs
  • Langage de programmation
Alice Rixte

1. La hiérarchie des motifs

Alice Rixte

Plus formellement

  • Un motif est une fonction partielle d'un espace dans un ensemble de couleurs ou d'évènements
  • Le type des motifs est
Alice Rixte
Alice Rixte

Métamotifs

Et si ?
Et si on remplaçait les couleurs par des motifs ?
  • Le type des métamotifs est alors
Alice Rixte

Récapitulons

  • Les motifs sont des fonctions partielles d'un espace vers les couleurs
  • Les méta-motifs sont des fonctions partielles d'un espace vers les sous-motifs
  • En réitérant cette construction, on obtient une hiérarchie de motifs.
Alice Rixte

2. Transformations de motifs

Alice Rixte

Motifs de transformations

  • On aimerait exprimer le fait que "La Perdrix" correspond à une version constante de "Do Ré Mi".
  • Utilisons des motifs de transformations !
  • Un motif de transformation associe aux points de l'espace une transformation :
Alice Rixte
Alice Rixte
Alice Rixte
Alice Rixte
Alice Rixte

Récapitulons

  • On peut transformer des motifs en appliquant des transformations de l'espace.
  • Les motifs de transformations permettent d'appliquer les transformations localement.
Alice Rixte

3. Construction de motifs

Alice Rixte

Les tuiles

  • Combiner motifs et transformations permet d'obtenir un processus itératif pour dessiner.
  • Les motifs sont du contenu hiérarchisé.
  • Les transformations explicitent l'articulation de ce contenu.
Les tuiles, enfin !

Une tuile est une paire d'une transformation et d'un motif .

Alice Rixte
Alice Rixte
Alice Rixte
Alice Rixte
Alice Rixte

Ce que les tuiles permettent

  • Placer des motifs les uns par rapports aux autres.
  • Dupliquer des motifs dans l'espace et dans le temps.
  • Les chevauchements de motifs
  • ...
Alice Rixte

Conclusion

Les tuiles hiérarchisées sont un langage mathématique permettant :

  1. la structuration hiérarchique d'un media
  2. la mise en évidence des similarités des sous-motifs via les transformations
  3. une approche constructiviste (ou compositionnelle) reposant sur l'opérateur des tuiles.
Alice Rixte

Travaux en cours et futurs

  • Implémentation
  • Moteur de rendus vers différents média
  • Contrôle temps-réel sur la structure
  • Performances multimédia
Alice Rixte

Des questions ?

Alice Rixte