RoadMusic - Autosync
Peter Sinclair
© Yohanne Lamoulère / Transit
Et puis, cela cesse. L’instant magique laisse place à l’habitude du même tempo, le trafic ralenti n’est plus en phase avec le rythme, le soleil passe derrière un nuage, un rond-point casse la fluidité de la route, et la synchronisation est perdue.Nous nous mettons à fuir dans la boîte à gants pour un autre CD, à naviguer sur la clef usb pour changer de station radio et trouver un autre morceau, un autre titre, une autre ambiance ... RoadMusic propose de resoudre ce probleme: la musique jouée dans la voiture est entièrement générée par la voiture elle-même. Ainsi les mouvements continus, les événements ponctuels, les vibrations dûes à la surface de la route, le défilement du paysage visuel, tout contribue à créer les séquences sonores.RoadMusic remodèle cette relation entre l’audio, le visuel et le tactile, relation acceptée aujourd'hui comme espace "artificiel" par obligation car tout simplement nous ne pouvons pas entendre le son du paysage qui défile, alors que tous les efforts sont mis de nos jours pour atténuer les bruits provenant du moteur ou du contact avec la route (à priori désagréables pour nos oreilles). Il s'agit ici, de rétablir une relation entre la situation et ce qui est à entendre tout en restant dans la musique composée, tout en maintenant le lien imaginaire entre musique et paysage.
Autosync: Le système fonctionne sur un "miniPC" dédié et embarqué dans la voiture, branché sur l'entrée auxiliaire du poste radio. Les informations concernant le voyage, et la conduite (accélérations, freinage, positionnement de la voiture sur ses axes x y et z) sont capturées par un contrôleur "wiimote", (fixé à l’intérieur de la voiture sur le pare-brise), et transmises à l'ordinateur par une liaison sans fil "bluetooth". Le capteur infra-rouge du « wiimote » à été adapté (suppression du filtre) afin de capturer aussi des événements lumineux extérieurs : variations du paysage, zones d'ensoleillement et d’ombre, phares de voitures.
La musique jouée n'est jamais la même. Non seulement la mélodie et le rythme sont générés automatiquement à chaque pause durant le trajet, mais la conduite de la voiture fait varier aussi sans cesse cette mélodie et les paramètres des sons. Le timbre provient de la surface de la route et les vibrations de la voiture elle-même, le défilement du paysage est re-interprété en objets sonores dans le champ stéréo.
doc Vidéo
Détails sur le fonctionnement :
Les vibrations capturées et transmises par la « wii » sont écrites de manière continue dans des "lookup tables" (tables de correspondance), une pour chaque axe afin qu’elles soient interprétées en tant que source audio (« wavetable oscillators »). Ainsi, tandis que les hauteurs (la mélodie) sont définies de façon algorithmique à l'intérieur du programme, le timbre des sons varie continuellement en fonction de la surface de la route, vibrations du moteur ou d'autre mouvements plus amples de la voiture.
Les mouvements de la voiture sont analysés afin de distinguer des événements tels que, virages, accélérations, bosses, arrêts etc. Ces événements sont utilisés pour introduire des variations dans des séquences qui sont générées chaque fois que la voiture marque un arrêt.
Le nombre moyen de chaque type d’événement est calculé pour donner des statistiques qui reflètent le type de route empruntée. Ils servent à changer des paramètres de la composition tels que : le tempo , la forme des enveloppes, la gamme harmonique, etc.
La capture des mouvements sert également de "contrôleur continu" pour faire varier certains paramètres du son (niveaux, panoramiques, filtres...).
Les objets lumineux (blobs) sont également interprétés, traduits en variations de pitch et d’amplitude, et spatialisés dans le champ visuel en fonction de leur position.
Perspectives:
Dans un premier temps, Road Music est présenté publiquement en tant que projet artistique, cependant il sera bientôt possible d'en commander le stysteme Autosync pour votre propre voiture. Par rapport à la version présentée dans la vidéo documentaire, le programme de « Road Music » a continué d’évoluer de jour en jour, pour donner des sons et des compositions de plus en plus riches.
À terme, d'autres compositeurs et artistes seront invités à travailler sur de nouvelles versions de programme. De cette façon, l’utilisateur pourra choisir entre différentes propositions musicales, différentes interprétations des données. Ces nouvelles versions pourront être télé chargés à partir d'un site Internet et installées sur l’ordinateur embarqué avec une clef usb.
Le programme d'AutoSync fonctionne sous PD (pure data).
Peter Sinclair est membre du groupe de recherche "Locus Sonus audio in art" et professeur à L'Ecole Supérieur d'Art d'Aix-en Provence.
l'idée du projet Road Music est issue d'une conversation avec Lydwine Van der Hulst (membre à l'époque de Locus Sonus).
Remerciements à Cyrille Henry, Charles Bascou, Guillaume Stagnaro, et Locus Sonus pour l'aide et les conseils.
© Yohanne Lamoulère / Transit
We all love driving down a open road with music on the car radio, at times there seems to be an almost magical synchronization between the music playing and the passing landscape, the speed, the hum of the motor, sounds harmonize with the machine. Then somehow it stops, we get bored of the same rhythm, or it starts to rain, or traffic slows down and suddenly it doesn't seem right anymore. We start grubbing around for CDs or changing radio stations or navigating on our USB key.
Road music resolves this problem in that the music played is entirely generated by the car itself: Vibrations of the car on the road, recognizable movements (accelerations, gear changes, bends etc.) and the passing landscape.
Road music remodels the relationship between audio, visual and tactile particular to driving while listening to music. We have come to accept this as inherently artificiel, since it is practically impossible to hear the sound of the landscape through which we are travelling and since great efforts are made to reduce sounds produced by the machine itself, generally considered as being unpleasant. Road music re-creates a relationship between the situation of driving and what we listen to, while maintaining the notion of composition and at the same time reinforcing our links betwen imagination and the passing landscape.
Autosync: The program runs on a small onboard mini PC which is plugged into the aux jack of the car hifi. Information about the drive is captured by à Wiimote controller, fixed with a suction cup inside the windshield, which continuously sends data concerning the xyz movements of the car. The Infra Red sensor has been adapted (the filter taken out), so that it detects position and size of any luminous objects (headlamps or tail lights of other cars, areas of sunlight or shade etc).
The vibrations from the wii are continuously written into lookup tables (one for each axis) then read as audio (wavetable oscillators) this means that while pitch (the tune) is defined algorythmically within the program the timbre of the sounds varies continuously in relation to the road surface vibrations of the motor or other larger movements of the car. Movements of the car are analyzed and categorized to distinguish bends, accelerations, decelerations, bumps in the road and standstill, these events are used to trigger variations on sequences which are automatically generated when ever the car marks a stop. The music played is never the same, not only are the melody rhythm etc automatically generated at each pause in the cars movement but driving the car creates endless variations on that tune and the parameters of the sounds that play it. The timbre comes from the road surface and the car itself. Variations in light are interpreted continuously as variations in pitch amplitude etc. and panned in the stereo field according to their visual position.
What's Next ?
RoadMusic will initially be presented publically as an art project, however it will soon be possible to place an order so that you can have one in your own car. The version of the program which you see in the video is progressing on a daily basis to provide more and more varied sounds and compositions and in the future other composers and artists will be invited to work on different setups for the program so that eventually the user will be able to chose between musics generated from programs by these collaborators.These new versions may be downloaded from a webpage and fed into the onboard computer with a usb key.
The program for AutoSync runs under PD (pure data).
Peter Sinclair is a member of the research group Locus Sonus audio in art and professor at L'Ecole Superieure d'Art d'Aix en Provence.
The idea for the project AutoSync originated in a conversation with Lydwine Van der Hulst (at that time member of Locus Sonus).
Thanks to Cyrille Henry, Charles Bascou, Guillaume Stagnaro, Peter Gena et Locus Sonus for help and advice.