Facebook
  • Acceuil
  • Concept
  • LipNet: un programme informatique qui maîtrise la lecture labiale

LipNet: un programme informatique qui maîtrise la lecture labiale

title..

On devra bientôt parler la main devant la bouche, parce qu’un programme informatique peut désormais lire sur les lèvres avec une exactitude redoutable. Des scientifiques de l’université d’Oxford en Grande-Bretagne, de DeepMind de Google, et de l’institut canadien de recherche avancée viennent de dévoiler un nouveau concept innovant baptisé "LipNet", il s'agit d'une nouvelle application qui est capable de décrypter les mots qui ont été dits en étudiant les caractéristiques visuelles spatio-temporelles d’une personne s’exprimant sur une vidéo avec une précision de 93,4 pc, bien meilleure que la précision moyenne des personnes sourdes capables de lire sur les lèvres, qui est de 52,3 pc. En fait, ces spécialistes ont fourgué au système des milliers de vidéos de trois secondes. 29.000 vidéos pour être précis, toute la playlist est sur YouTube. Chaque texte suivait pile la même structure grammaticale. Et c'est à partir de ces textes que LipNet a appris à matcher le mouvement des lèvres et ce qu'elles disent. Pour l'instant, il faudrait que la vidéo soit parfaitement éclairée et bien cadrée pour que l’engin soit efficace. Impossible, donc, de décrypter une conversation sur une vidéo surveillance de mauvaise qualité.