Google lance le défi de la synchronisation labiale de l’IA

Google a lancé un défi de synchronisation labiale pour quiconque souhaite participer. Les personnes intéressées peuvent visiter le site que Google a mis en place et tester leurs compétences en synchronisation labiale. Le défi est géré par le groupe AI Experiments de Google, le même groupe derrière l’appareil Pixel de Google.

Le but du défi est de permettre à Google d’utiliser de vrais chanteurs pour apprendre à son système d’intelligence artificielle (que la société appelle simplement LipSync par YouTube) à lire sur les lèvres. Google espère utiliser le système d’IA dans le cadre d’un effort visant à développer des applications pour les personnes souffrant de troubles de la parole tels que la SLA.

Le défi est simple: les utilisateurs peuvent cliquer sur le bouton « Lancer l’expérience », ce qui les amène à un autre écran qui configure apparemment le système de Google pour fonctionner avec l’équipement de l’utilisateur. Aucun microphone n’est requis – juste une caméra vidéo. Dans un écran suivant, l’utilisateur apparaît dans une bulle similaire à celles des chats vidéo sur smartphone. L’utilisateur clique sur le bouton « Je suis prêt », lançant la mélodie de synchronisation labiale, « Dance Monkey » par Tones et moi – il n’y a pas d’autre choix. L’utilisateur est alors censé chanter la chanson à voix haute ou en silence. Une fois la chanson terminée, l’utilisateur est dirigé vers un autre écran où il reçoit son score représenté par une à cinq étoiles.

Sur la page du défi initial, Google note que le défi repose sur la technologie d’intelligence artificielle TensorFlow.js de l’entreprise et qu’il fonctionne en suivant les points de repère du visage lorsque l’utilisateur se synchronise sur les lèvres. Ils notent également que l’application a été optimisée pour fonctionner au mieux avec Google Chrome. Ils ne révèlent pas si le défi de synchronisation labiale sera étendu ou mis à jour, ni combien de temps il sera disponible.

Les visiteurs du site peuvent également choisir d’obtenir le code de l’application Web et des instructions sur sa configuration et son utilisation avec d’autres applications Web.

© 2020 Réseau Science X