Organization : AFIM/MINT-OMF

June 27, 2013 - 9:00-5:30PM

Université Paris-Sorbonne 
Maison de la recherche
Room D040
26 rue Serpente 75006 Paris
(Métro Saint-Michel ou Odéon)

Presentation

The research group “New Fields of Music Notation” organizes a workshop in June 27, 2013 at the Paris-Sorbonne University in collaboration with the research group Musicologie, Informatique et Nouvelles Technologies (MINT). This session will provide an opportunity to make a state of art of recent research in the field of musical notation through creation and musical research.

Le groupe de travail de l'AFIM Les nouveaux espaces de la notation musicale organise une session de travail le 27 juin 2013 à l'Université Paris-Sorbonne en collaboration avec le groupe Musicologie, Informatique et Nouvelles Technologies (MINT). Cette session sera l'occasion de faire un état de l'art sur les recherches récentes dans le domaine de la notation musicale.

Programme

Programme détaillé : programme09.pdf

• 9h00-9h15 Ouverture

• 9h15-9h45 - Alice Tacaille, Dang Nguyen Bac
  Deux bases de données musicales avec développements musicxml : Carnet de Notes (analyse) et Neuma (CNRS - Bibliothèque numérique)
• 9h45-10h15 - Clarisse Bardiot, Guillaume Marais
  Rekall : un environnement open-source pour documenter, analyser les processus de création et simplifier la reprise des œuvres
• 10h15-10h45 - Véronique Alexandre Journeau
  Informatisation de la notation chinoise en tablature pour guqin

• 10h45-11h00 Pause

• 11h00-11h30 - Mathieu Chailloux, Jérémie Garcia & Carlos Agon
  Vers des partitions interactives pour l’aide à la composition et à l’analyse musicale
• 11h30-12h00 - Yannick Chapuis
  La librairie OMXmulti pour OpenMusic un outil d'aide à la précomposition musicale
• 12h00-12h30 - José Echeveste, Thomas Coffy
  The Antescofo musical notation: programming realtime musical interactivity

• 12h30-14h00 Déjeuner

• 14h00-14h30 Marlon Schumacher
  A Dictionary-Based Approach for the Notation of Musical Audio
• 14h30-15h00 Jean-Louis Di Santo
  L'acousmoscribe
• 15h00-15h30 Gabriel Shalom
  Audiovisual Notation & Transcription. Case Study : The Tosso Variations

• 15h30-15h45 Pause

• 15h45-16h15 - Bertrand Merlier
  Notation de lʼespace en musique électroacoustique : du geste au signe
• 16h15-16h45 - Guillaume Jacquemin, Matthieu Ranc
  Iannix 0.9 : Partition graphique interactive
• 16h45-17h15 - Emile Ellberger
  SSMN: A research project at the ICST (ZHdK)

• 17h15-17h30 - Conclusion de la journée

Alice Tacaille (Université Paris-Sorbonne), Dang Nguyen Bac (ENS Lyon)

Carnet de Notes (PLM) et Neuma (CNRS) sont deux programmes de librairie musicale digitale. Ils sont fondés sur des corpus rares, que les usagers notent eux-mêmes en notation musicale pour leur usage personnel, pour l'indexation ou pour la publication. Le format dans lequel ils sont chargés (uploadés) , musicxml, permet des applications d'analyse (PLM) ou d'annotation, partage, création de métadonnées (Neuma) ouvertes à l'expérimentation.

Clarisse Bardiot (UVHC - CNRS), Guillaume Marais (Association Rekall)

Rekall est une réponse aux problématiques de documentation et de conservation des arts à composante technologique, ainsi qu’aux difficultés rencontrées par les artistes lors de la reprise d’un spectacle dont les technologies sont devenues obsolètes. En période de création, il permet de gagner du temps pour retrouver facilement les choix techniques et artistiques effectués d’une résidence à une autre.

À la fois clair et facile à prendre en main, Rekall permet de nombreux usages. Il est conçu pour :

• les régisseurs : prise de note rapide pendant les répétitions, mémorisation des différentes conduites techniques (son, lumière, vidéo, dispositifs technologiques), regroupement de tous les documents techniques ;
• les artistes : regroupement et sauvegarde des différents éléments du spectacle (artistiques et technologiques) afin d’en assurer la reprise en prenant en compte l’obsolescence programmée des technologies et l’intentionnalité des concepteurs ;
• les historiens : documentation des œuvres en prenant en compte le processus de création, les différentes variantes et la multiplicité des types de documents ;
• les responsables pédagogiques et les éditeurs : création de documentaires enrichis.

Rekall permet de documenter un spectacle à plusieurs moments de sa vie :

• pendant les répétitions (aide aux régisseurs et aux techniciens) ;
• au moment de la création (aide aux artistes pour la reprise du spectacle) ;
• après la création (aide aux historiens et aux éditeurs pour la réalisation de documentaires enrichis).

Le fonctionnement de Rekall repose sur les éléments qui décrivent ou retranscrivent une œuvre (une captation vidéo, une partition, un patch, un texte, un enregistrement sonore ou encore de simples notes). Ces éléments sont agrégés sur un axe du temps correspondant au déroulement de l’œuvre.

D’autres documents (notes, photographies, vidéos, textes, mails, commentaires, etc.) liés à la création ou simplement utiles à la compréhension gravitent autour de l’axe du temps. Présentés de façon ingénieuse, ils offrent un autre éclairage sur l’œuvre, donnent des précisions sur des aspects singuliers. Il est possible d’afficher les documents recherchés selon différents filtres : par date, par type de document, par auteur, etc. Les liens entre les documents permettent d’établir des cartographies et des explorations multiples. Toutes les personnes concernées par le projet collaborent au sein d’un même espace: ainsi, l’éclairagiste, le metteur en scène, le régisseur, le créateur vidéo et le scénographe partagent une plate-forme de travail commune.

Véronique Alexandre Journeau

L’écriture millénaire en tablature pour la cithare qin (古琴 guqin) est une notation si ingénieuse des paramètres du geste pour la production et la vie du son qu’elle reste présente même lorsqu’on a transcrit sur portée occidentale l’air ainsi noté. Parce qu’elle n’est pas constituée de caractères de la langue chinoise (et elle ne se prononce pas) mais procède par concaténation codifiée d’éléments de ces caractères linguistiques, un logiciel spécifique a été conçu sous la direction de ZHOU Changle 周昌乐, qui dirige le laboratoire Mind-Art & Computation de l’Institut d’intelligence artificielle de l’université de Xiamen (Chine) pour produire de façon informatisée cette notation. C’est cependant une notation pour initiés et qui ne facilite pas l’analyse des airs de musique. Les perspectives seraient de pouvoir aussi transcrire, de façon complémentaire, les paramètres du son sur portée. Il est ici proposé de montrer le fonctionnement du logiciel et de poser les prémisses d’une transcription automatisée des hauteurs de son.

Mathieu Chailloux (IRCAM - UPMC), Jérémie Garcia (Université Paris Sud - IRCAM), Carlos Agon (IRCAM - UPMC)

Grâce aux technologies de papier interactif qui associent une trame presque invisible et un stylo doté d’une petite caméra, l'ordinateur peut détecter ce qu'écrit le compositeur. Ce lien « amont » entre le papier et l'ordinateur est complété par un lien « aval » de l'ordinateur vers le papier grâce à l'impression, créant ainsi un cycle de production inédit. Des travaux précédents ont proposé plusieurs pistes pour l'intégration de cette technologie avec des environnements de composition assistée par ordinateur. Nous explorons actuellement les possibilités offertes par des partitions interactives comme interfaces d’entrées pour l’ordinateur. En effet, grace aux formats actuels de description de partitions comme MusicXML3, il est possible de rendre tous les éléments graphiques interactifs. Le stylo peut ainsi être utilisé pour naviguer dans la partition, écouter des passages, modifier et ajouter des informations musicales. Une intégration dans le logiciel d'édition de partitions Finale est prévue.

Bibliographie:

• “InkSplorer: Exploring Musical Ideas on Paper and Computer”, Garcia, J., Tsandilas, T., Mackay, W.E. and Agon, C. New Interface for Musical Expression Conference (NIME), Oslo 2011.
• “Musink: composing music through augmented drawing.” Tsandilas, T., Letondal, C., and Mackay, W.E. Proc. CHI’09, 2009.

Yannick Chapuis

L'objectif de la librairie OMXmulti est de mettre à disposition des utilisateurs un outil permettant d'étendre les fonctionnalités d'édition de la partition et de manipulation des objets musicaux dans OpenMusic. Elle propose un objet unique xmulti qui peut être utilisé en remplacement des objets standard chord-seq et multi-seq.

De la même manière que les objets qu'il remplace, l'objet “xmulti” utilise la notation proportionnelle pour représenter les événements de la partition mais il met à disposition de l’utilisateur un certain nombre de nouvelles fonctionnalités intuitives :

• l’affichage de la partition a été amélioré (grille temporelle, nommage des portée/instruments, affichage intelligent des silences, des dynamiques et des durées, etc.) ;
• on a introduit de nouveaux moyens plus pratiques de saisie, de sélection et de déplacement des événements musicaux ;
• on dispose désormais d’une batterie de traitements musicaux complexes mais néanmoins courants qui sont directement utilisables sur les événements de la partition ; ces traitements peuvent être appliqués aux hauteurs, au rythme, aux dynamiques ou encore à plusieurs paramètres de façon conjointe (compression/expansion, répétition, division, rétrogradation, inversion, construction d'échelles, génération pseudo-aléatoire, etc.).

En outre, l'objet “xmulti” étend et facilite la manipulation des objets “extra” d'OpenMusic : on peut désormais manipuler les liaisons et bien d'autres annotations musicales courantes, qu'elles soient individuelles (dynamiques, texte libre, articulations, ornementations, indications techniques, etc.) ou qu'elles s'appliquent à des phrases entières (crescendi, ligatures, tremoli, glissandi, etc.) La plupart de ces opérations sont réalisables à la souris, par raccourci-clavier ou en utilisant les menus contextuels.

La librairie est disponible pour toutes les versions d'OpenMusic comprises entre la 5.2.1 et la 6.5.1. Elle a été testée sur Windows 32 et 64 bits. Elle est développée par Yannick Chapuis et David Echevarria.

Thomas Coffy (IRCAM -INRIA) et José Echeveste (IRCAM - UPMC)

Antescofo~, developped at IRCAM, is a modular polyphonic Score Following system as well as a Synchronous Programming language for musical composition. The module allows for automatic recognition of music score position and tempo from a realtime audio Stream coming from performer(s), making it possible to synchronize an instrumental performance with computer realized elements. The synchronous language within Antescofo allows flexible writing of time and interaction in computer music.
The Antescofo musical notation embeds in the same score : the instrumental part, and the electronical part triggered by the instrumental one. Electronic music can then be written by composers in a natural textual way, or using a graphical editor specialized in the Antescofo musical notation : AscoGraph (editing of Break Point Functions, etc).
The presentation will include explanations on several key features of the language.

Marlon Schumacher (IDMIL, DCS, CIRMMT - McGill University)

In this talk I will discuss a new approach for the notation of tape parts in the context of mixed music, i.e. the visualization of musical content in an audio signal. Traditionally, we seem to be stuck in a kind of dilemma typified by two extremes on a continuum: On the one end are signal-based notations, such as sonograms, waveforms, etc. -which however don’t provide much information about musical semantics. On the other end are symbolic notations, such as icons, characters, etc. -which in turn may not provide much information about the sonic details. Both aspects, however, are important for the interpretation of a musical work, in particular for contemporary music, which does not rely on common musical idioms.

I will present an approach attempting to combine aspects of both worlds, implemented as the library “OM-Pursuit” (for dictionary-based analysis/synthesis) within the computer-aided composition environment OpenMusic. This library allows the transcription of an audio signal based on a user-defined collection of smaller-scale sound files (so-called ‘atoms’). The individual atoms can be associated with arbitrary visual representations (symbolic, iconic, etc.). The user can then design simple programs to algorithmically arrange these visual elements on a 2D-canvas into a kind of cartographic map of the higher-level sonic content in the signal. I will discuss these concepts and show their use in the example of my recent piece for 2 pianists and tape “6 Fragments on 5’05” - 1 Act of cleaning a piano”.

http://idmil.org/software/om-pursuit

Jean-Louis Di Santo

L'acousmoscribe est un système de notation symbolique du son suivant des critères perceptifs, issu de la notion d'écoute réduite. Il emprunte sa philosophie à la linguistique qui permet de réaliser un grand nombre de combinaisons avec un petit nombre d'éléments. L'acousmoscribe autorise actuellement cinq milliards d'occurences pour une description à la fois simple et précise du son. Le SCRIME travaille à l'élaboration d'un logiciel qui utilise ces données.

http://jean-louis.disanto.pagesperso-orange.fr/recherche.html

Gabriel Shalom

The process of composing audiovisual material can be aided by the creation of unique graphic notation systems. In this case study I will provide an insight into my working process in creating the audiovisual suite The Tosso Variations (2012). I will examine the role that graphic notation played in transcribing the improvised performances of my collaborator Shingo Inao playing his instrument Tosso - a hybrid electro-acoustic sensor instrument. The talk will conclude with the video screening of one of the five movements of the suite.

http://www.gabrielshalom.com/portfolio/the-tosso-variations/

Bertrand Merlier (Université Lumière Lyon 2)

Cette intervention prend appui sur une analyse des fonctionnalités des divers dispositifs et logiciels permettant de travailler la spatialisation du son, sur une recherche portant sur les modes de perceptions de l’espace et enfin sur une étude approfondie des différents systèmes de notation. Au vu de l’ensemble de ces connaissances, une notation des activités de spatialisation reposant sur le paradigme de la notation de la musique classique occidentale est proposée. Divers exemples illustrent le bien-fondé et les aspects pratiques de cette proposition. La notation proposée est à la fois descriptive et prescriptive. C’est ainsi qu’une implémentation pratique basée sur la norme MIDI rend aussi envisageable un jeu instrumental de l’espace, la mise en place de processus algorithmiques en lien avec la structuration des idées, mais aussi l’usage de toute la panoplie de logiciels tels que séquenceur MIDI ou écriture de partition.

Lire l'article complet

Guillaume Jacquemin, Matthieu Ranc (association Iannix)

IanniX est un séquenceur graphique open source, inspiré des travaux de Iannis Xenakis et destiné à la création numérique. À l’aide d’une palette d’objets fondamentaux que sont les triggers (événements), les courbes (trajectoires dans l’espace) et les curseurs (progression dans le temps), IanniX permet une représentation graphique du temps dans l’espace3D et assure un échange bidirectionnel vers plusieurs protocoles de communication, dont l’Open Sound Control (supporté dans PureData, SuperCollider, CSound, MaxMSP, InScore…). IanniX permet d’écrire ces partitions interactives du temps et de l’espace (quelqu’il soit, fréquences, hauteurs, filtres, paramètres de synthèse…) au travers :

• d’une interface graphique ;
• de messages réseaux (OSC, MIDI…) ;
• de code Javascript (en fichier ou en live coding) ;
• de capteurs (Arduino, Kinect…) ;
• ou en récursivité (partition en s’autocontrôlant).

À l’occasion de la sortie de IanniX 0.9, une série de nouveautés permettent d’exploiter de manière encore plus efficace les partitions graphiques de IanniX :

• Courbes : au-delà du dessin manuel ou génératif, les courbes peuvent maintenant être des équations paramétriques cartésiennes ou polaires, permettant ainsi d’introduire des représentations géométriques plus précises et rigoureuses ;
• Performance/scène : les partitions sont désormais facilement intégrables dans les outils de vidéastes grâce au protocole Syphon. La partition peut donc être montrée/video-mappée au public lors de concerts ;
• Messages : l’usage des messages réseaux (OSC, MIDI, Arduino…) pour manipuler les partitions est grandement facilité (aide contextuelle) et plus performant.

Pour ce Workshop Music Notation #1, nous proposons d’illustrer ces nouvelles formes d’écritures grâce à une démonstration pas-à-pas, en partant d’une partition vierge. La partition finale produite à l’issue des 15 min sera interactive (à l’aide de capteurs), graphique (usage des notations spécifiques à IanniX — triggers, courbes, curseurs) et récursive (« mise en résonnance » ,de l’écriture, de la partition).

Emile Ellberger

The aim of SSMN is to open new ways of substantial integration of spatial relationships and processes in musical thinking as well as in composition, rehearsal and performance practice. For this purpose SSMN defines a typology of spatial movements and designs a library of symbols to represent them, able to be used in creative processes.

In order to validate its impact in the practice, an open source software tool that integrates this library within a common western musical notation context has been developed, allowing editing and acoustic feedback through a rendering engine. Composers are able to use and edit symbols describing spatialization in a notation program and immediately hear the results. Performers have full information of spatialization in the score and are able to hear the results from the beginning of the learning process. Since SSMN aims to meet the demands of the practice, composers and performers are involved in the project, writing and performing pieces using the SSMN tools. Their experience is the basis for the assessment of the project.

The basic research questions related to SSMN can be summarized as follows:

What could be the real impact (positive / negative) of a symbolic music notation of spatialization in composition, performance and analysis? Is there a set of basic types of spatial movement? What are the difficulties and the limits of representation of spatial movements and virtual spatial qualities in a, 2-dimensional graphic manner, and what kind of representation is more suitable? SSMN argues that a deeper understanding of the nature and kinds of spatial movement helps composers to integrate spatialization into musical thinking in a substantial way especially if they have a proper tool, and that an adequate notation of spatial information has a positive impact in the way performers prepare for and act in a musical situation where spatialization plays an important role. If evidence of performance remains in notated form, it can become a subject of study and tradition. This may therefore influence also the sound diffusion practice, the interpretation research and the analysis of electroacoustic music.

The SSMN software tools may also be a model for successful interoperability between applications with different functions such as symbolic representation, music notation and audio rendering. In order to focus on spatialization, SSMN first concentrates on instrumental sound notated using CWMN and being spatialized by means of electroacoustics. This can be extended to other user cases in a further stage of research.

Organisation: Pierre Couprie (MINT-OMF, Université de Paris-Sorbonne), Dominique Fober (Grame), Yann Geslin (INA / GRM) Jean Bresson (IRCAM - UMR STMS). Groupe de travail AFIM “Les nouveaux espaces de la notation musicale” en collaboration avec le groupe Musicologie, Informatique et Nouvelles Technologies (MINT).