Français (French) English
ÉCOLE NATIONALE SUPÉRIEURE DES SCIENCES APPLIQUÉES ET DE TECHNOLOGIE

Équipe Expression

Quoi de plus naturel que de joindre le geste à la parole pour se faire comprendre. De nombreuses avancées scientifiques permettent d’ores et déjà d’envisager des interactions naturelles avec les machines.
Cependant, un manque de qualité limite encore les contextes d’usage de ces interfaces « naturelles ». Notamment, pour la parole, le traitement de l’expressivité suivant le contexte d’élocution déboucherait sur de nouvelles applications.

Le projet de recherche de l’équipe Expression cible l’étude des données produites par l’homme (en particulier langagières) et véhiculées par différents médias : le geste ou le mouvement, la parole et le texte. Ces données présentent une complexité intrinsèque caractérisée par l’imbrication de caractéristiques multidimensionnelles et séquentielles. En outre, ces caractéristiques appartiennent à des niveaux de représentation différents et souvent hétérogènes. Certaines d’entre elles sont symboliques (par exemple, des mots, des phonèmes, etc.) tandis que d’autres sont numériques(par exemple, des positions, des angles, des échantillons sonores).
Au sein de cette complexité, les données langagières au sens large intègrent des modèles structurels latents sur lesquels le sens se construit, l’expressivité et l’acte de communication émergent. Appréhender cette expressivité, et plus généralement la variabilité liée au style, dans les séries temporelles multidimensionnelles, les données séquentielles ou encore les structures linguistiques est le principal défi proposé par l’équipe Expression. Cet objectif conduit à étudier les questions de représentation et de caractérisation de la variabilité et de l’expressivité dans les données humaines, en particulier pour tenter d’identifier des formes invariantes et améliorer la caractérisation ou l’extraction de classes d’expression.

Les travaux de l’équipe Expression concernent les axes de recherche suivants :

  • Synthèse et reconnaissance de gestes expressifs,
  • synthèse de parole expressive,
  • expressivité du texte et des langues.


L’équipe est répartie sur trois sites : Lannion, Lorient et Vannes. En particulier, sur le site de Lannion, les activités menées se focalisent sur la synthèse de parole expressive. Le divertissement (par ex. lecture expressive de livres audio, jeux vidéo), l’éducation (notamment apprentissage des langues) et le handicap (voix pathologiques, remédiation) font partie des secteurs visés par nos travaux.

Prototypes

  • ROOTS : structure de données flexible multi-niveaux pour la représentation de la parole et du texte
  • Moteur de synthèse de parole expressive.

Équipement

  • Studio d'enregistrement.

Liens utiles