Analyse et Synthèse des Sons

L’équipe effectue des recherches et des développements en analyse, transformation et synthèse des signaux sonores.

© Philippe Barbosa

L’analyse de sons comprend les méthodes permettant l’extraction ou la structuration automatique de divers types d’informations provenant du signal, comme la fréquence fondamentale ou les évolutions spectrales déterminant la hauteur et le timbre du son perçu.


Des informations non strictement musicales sont également prises en compte et intéressent des domaines tels que l’acoustique industrielle, le design sonore et le multimédia. On peut citer, en particulier, l’indexation automatique des enregistrements sonores. Les méthodes utilisées reposent sur le traitement du signal, l’analyse statistique, les techniques d’apprentissage et l’apprentissage profond, la reconnaissance des formes mais aussi sur la connaissance de la perception auditive.


Les techniques de transformation et de synthèse des sons sont d’abord développées pour répondre aux besoins des musiciens dans la création de nouveaux sons et de nouvelles formes musicales. Ces travaux trouvent également de nombreuses applications dans des domaines tels que le cinéma, les jeux vidéo, l’aide à la navigation ou plus largement la réalité virtuelle. Des exemples typiques en sont la synthèse du chant par ordinateur ou la création de voix et instruments transformés et augmentés. Les recherches en analyse et synthèse reposent sur la conception, d’une part, de modèles de signaux permettant de décrire et de reproduire la production des sons à l’aide de méthodes de traitement du signal et, d’autre part, de modèles d’apprentissage profond visant à capturer les corrélations entre les sons et les caractéristiques visées. Ces modèles sont implémentés sous la forme de logiciels pour ordinateurs (macOS, Windows et Linux), spécifiquement conçus à l’intention d’utilisateurs professionnels ou non : musiciens, ingénieurs du son, acousticiens et amateurs.

Membres de l'équipe

Axel Roebel

Responsable d'équipe

Nicolas Obin

Chercheur

Remi Mignot

Chercheur

Frederic Cornu

Ingénieur

Guillaume Doras

Chargé de R&D

Mahdi Lakbar

Chargé(e) de recherche et de développement

Simon Rouard

Doctorant

Téo Guichoux

Doctorant

Antoine Salmona

Post-doctorant

Emilio PICARD

Stagiaire

  • Modélisation des sons et apprentissage profond
  • Caractérisation des sons
  • Analyse, caractérisation et transformation des enregistrements musicaux
  • Analyse, transformation et synthèse de la voix, conversion de locuteurs
  • Analyse de scènes sonores

Traitement du signal, techniques d’apprentissage profond, statistiques, théorie de l’information, analyse numérique, modélisation.

PostGenAI@Paris

Projet ayant pour ambition de renforcer la stratégie française en intelligence artificielle en créant un pôle d’excellence international spécialisé dans l’IA post-générative

Dates : janvier 2025 à décembre 2029

EVA

Explicite Voice Attributes

Dates : octobre 2023 à janvier 2028

DeTOX

Lutte contre les vidéos hyper-truquées de personnalités françaises

Dates : janvier 2023 à décembre 2025

Logiciels liés

Logiciel

RAVE

RAVE est un outil deep learning pour générer et transformer l’audio en temps réel via des modèles neuronaux, offrant synthèse rapide et haute qualité dans Max et Pd avec nn~ decoder.

Logiciel gratuit

Design et traitement sonores

Logiciel

Partiels

Partiels est une application d’analyse et un ensemble de modules complémentaires qui vous permettent d’explorer le contenu et les caractéristiques des sons.

Logiciel gratuit

Design et traitement sonores

Logiciel

nn~

Un external Max/Pd pour le traitement audio par IA en temps réel.

Logiciel gratuit

Design et traitement sonores

Avec la tutelle de :

IrcamSorbonne UniversitéCNRSMinistère de la Culture