Nicolas Obin
I am lecturer at Sorbonne University and a senior research scientist s in the Sound Analysis and Synthesis team at the Sound and Music Sciences and Technologies laboratory (Ircam, CNRS, Sorbonne University). My background is mainly in mathematics, computer science, and physics and I am a member of the 2005-2006 class of the Master 2 ATIAM (Acoustics, Signal Processing and Computer Science Applied to Music) at the Université Pierre et Marie Curie; and secondarily in musicology, with a Master 2 in Arts, Philosophy and Aesthetics from the Université Vincennes Saint-Denis in 2006 under the supervision of Ivanka Stoïanova. I have a doctoral thesis in computer science and telecommunications entitled: ‘’ (2011) under the supervision of Xavier Rodet, for which I was awarded the prize for the best doctoral thesis by the Fondation Des Treilles in 2011. In 2023, I defended my Habilitation à Diriger des Recherches (HDR) entitled: ‘From signal modelling to representation learning: structured modelling of speech signals’.
At the interface of the bio-sensible world and formal theories of information, communication, and cognition, I have developed through time a keen interest in modelling behaviour and interactions between humans, animals and robots. My research activities focus mainly on generative modelling of complex human productions such as speech, singing and music with various applications in sound and multimodal generation, cyber-physical human and musical systems, and augmented creation. I am a researcher committed to the technological, creative and ethical implications of my research, particularly the impact of artificial intelligence on artistic creation, the creative professions and the creative and cultural industries. I am also involved in the issues of inclusion and digital sovereignty in order to promote the presence and diversity of dialects, languages and cultures in the digital world.
I am responsible for the Master's degree in Intelligent Systems Engineering (ISI), in which I teach digital audio signal processing, machine learning and deep neural networks, and I am also responsible for the ‘Deep Learning par la Pratique’ professional training course offered at Sorbonne University. I am the founder of DeepVoice, Paris (since 2020), the Paris event on speech technologies and artificial intelligence, SophIA (2021): Sorbonne University's student association for Artificial Intelligence in collaboration with the Sorbonne Centre for Artificial Intelligence (SCAI), and Fast-Forward (2022) the informal and experimental meetings of science and technology and sound design in cinema and the moving image.
As part of my artistic commitment at Ircam, I am very involved in promoting digital science and technology for the arts, culture and heritage with numerous collaborations with renowned artists such as Eric Rohmer, Philippe Parreno, Roman Polansky, Leos Carax, George Aperghis and Alexander Schubert.
My detailed CV is available here
Email : Nicolas.Obin (at) ircam.fr
- Team : Analyse et synthèse des sons
(Sorbonne Université)
Supervision de thèses de doctorat
Encadrement de thèse (en cours)
[ 2024-2027 ] Diego Andres Torres Guarrin, Conversion neuronale des attributs de la voix, projet ANR EVA, Ecole doctorale informatique, télécommunications et électronique (EDITE). Co-encadrement avec Axel Roebel (STMS).
[ 2023-2026 ] Téo Guichoux, Génération multimodale du comportement et transfert de style pour l’animation
d’un agent virtuel, bourse du ministère, Ecole doctorale informatique, télécommunications et électronique (EDITE). Co-encadrement avec Laure Soulier et Catherine Pelachaud (ISIR)
[ 2023-2026 ] Mathilde Abrassart, Conversion neuronale de la voix pour la création d’attaques à l’usurpation d’identité, projet ANR BRUEL, Ecole doctorale informatique, télécommunications et électronique (EDITE). Co-encadrement avec Axel Roebel (STMS).
[ 2023-2026 ] Théodor Lemerle, Expressive text-to-speech synthesis for virtual storytelling, projet ANR EXOVOICES, Ecole doctorale informatique, télécommunications et électronique (EDITE). Co-encadrement avec Axel Roebel (STMS).
Encadrement de thèse (soutenue)
[ 2019-2022 ] Clément Le Moine, Neural conversion of social attitudes in speech signals, en collaboration avec Stellantis, programme doctoral Ph2D/IDF, Ecole doctorale informatique, télécommunications et électronique (EDITE). Co-encadrement avec Axel Roebel (STMS). Thèse soutenue le 27 février 2023
[ 2019-2022 ] Mireille Fares, Multimodal expressive gesturing with style, programme doctoral AI @ Sorbonne Université, Ecole doctorale informatique, télécommunications et électronique (EDITE). Co-ecandrement avec Catherine Pelachaud (ISIR). Thèse soutenue le 15 février 2023
[ 2019-2022 ] Killian Martin, Cognitive control of Rooks’ vocalizations, ED 549 Santé, Sciences Biologiques et Chimie du Vivant, Université de Tours, 2019. Co-encadrement avec Valérie Dufour (CNRS). Thèse soutenue le 13 décembre 2022.
[ 2013-2016 ] Olivier Migliore, Analyser la prosodie musicale du punk, du rap et du ragga français (1977-1992)
à l’aide de l’outil informatique, co-encadrement avec Yvan Nommick, Ecole doctorale Langues, littératures,
cultures, civilisations, Université Montpellier 3. Participation à l'encadrement. Thèse soutenue le 13 décembre 2016.
Tribune : Pour une intelligence artificielle responsable au service d’une création musicale inventive et diverse (2024)
L'IA au service du sonore ? UNESCO (2024)
Soutenance d'habilitation à diriger des recherches
Composition du jury
• M. Thomas HUEBER, Directeur de recherche CNRS, GIPSA lab, Rapporteur
• M. Emmanuel VINCENT, Directeur de recherche INRIA, MultiSpeech, Rapporteur
• M. Bjorn SCHULLER, Professeur, Imperial College London, Rapporteur
• M. Gérard BIAU, Professeur, Sorbonne Université, Examinateur
• M. Jean-François BONASTRE, Directeur de Recherche INRIA, Défense et Sécurité, Examinateur
• Mme Catherine PELACHAUD, Directrice de recherche CNRS, ISIR, Examinatrice
• M. Axel ROEBEL, Directeur de recherche, IRCAM, Examinateur
• Mme Isabel TRANCOSO, Professeure, INESC - Université de Lisbonne, Examinatrice
• Mr Nicolas BECKER, Designer sonore et artiste, Membre Invité
Le texte de mon HDR est librement accessible sur HAL.
Deep Voice, Paris
