Capteurs, interfaces et machine learning interactif pour la musique
Objectifs pédagogiques
À l’issue de la formation, les stagiaires auront les notions théoriques et pratiques pour réaliser des systèmes interactifs sonores et musicaux utilisant les capteurs R-IoT (accéléromètres 9 axes WIFI), ainsi que des systèmes de reconnaissance de gestes. La programmation d’interfaces (Arduino, R-IoT) sera également abordée.
Public concerné
Compositeurs, compositrices, musiciens, musiciennes, performers, performeuses, enseignants, enseignantes, designers, designeuses
Prérequis
Bonne connaissance en programmation dans Max ou avoir suivi la formation Max initiation, certification niveau 1.
Moyens pédagogiques et techniques
Salle de formation équipée d’ordinateurs avec les logiciels utilisés, de casques audio et de claviers MIDI
Format de la formation : exposés théoriques et travaux pratiques
Supports pédagogiques : présentations vidéo-projetées et support de cours en .pdf
Les stagiaires auront à disposition des kits composés d’une carte R-IoT et de deux capteurs physiologiques (respiration, battement cardiaque)
Le module R-IoT est compris dans le coût de la formation (valeur : 99 euros)
Suivi et évaluation
Accueil le premier jour de la formation à partir de 9h45
Contrôle du suivi par la signature d’une feuille de présence pour chaque demi-journée
Evaluation : travaux pratiques au cours de la formation
Remise d’un certificat de réalisation, qui intègre les résultats de l’évaluation.
Durée de la formation et modalités d’organisation
24h, du mardi 9 au vendredi 12 mai 2023, de 10h à 13h et de 14h30 à 17h30
10 stagiaires maximum
Cette formation professionnelle se tiendra à l’Ircam dans le strict respect des règles sanitaires qui prévaudront lors de leur tenue et en fonction de l’évolution de la crise sanitaire liée au COVID 19. Au cas où elle ne pourrait avoir lieu en présentiel, la formation ne pourra pas être maintenue. Pour plus d'informations : info-pedagogie (at) ircam.fr.
Programme de la formation
Mardi
| Matin | Aperçu des différents types de capteurs, d’interfaces, et des fournisseurs de matériel. Le cas particulier du sans fil ; Travaux pratiques : prendre en main les environnements de programmation Arduino et Energia. |
| Après-midi | Travaux pratiques : maîtriser les bases de la programmation dans Arduino et Energia, premiers exemples simples de code, télé-verser du code vers les interfaces Arduino et R-IoT. |
Mercredi
| Matin | Récupération et traitement des données de capteurs dans Max (Arduino et R-Iots) ; Filtrage (moyenne, filtre médian, filtre passe-bas) et normalisation. |
| Après-midi | Mise en place d’un système de mapping ; Utilisation directe des données de capteurs avec des processus sonores simples : contrôle de synthèses, lecture de fichiers sons. |
Jeudi
| Matin | Travaux pratiques : réaliser un système de sonification - captation physiologique (battement du cœur, respiration) via des capteurs reliés à l’interface R-IoT, récupération des données et sonification dans Max. |
| Après-midi | Introduction à la librairie MuBu et au suivi de geste. |
Vendredi
| Matin | Formation théorique : introduction au « machine learning » avec la librairie Mubu for Max permettant des applications avancées de reconnaissance de gestes et mouvements. Présentation d’exemples d’utilisation dans des projets de sonification du mouvement et des projets artistiques (art perfomatif) |
| Après-midi | Travaux pratiques : réaliser un système avec capteurs R-IoT, apprentissage et reconnaissance dans Max avec MuBu. |