Connectez-vous avec nous

Gadgets

Vos yeux peuvent contrôler votre smartphone grâce à un nouvel outil de suivi du regard

Crédit : Pixabay/CC0 Domaine public

De plus en plus de personnes regardent des films, montent des vidéos, lisent les nouvelles et se tiennent au courant des médias sociaux sur leurs smartphones. Ces appareils se sont développés pour s’adapter à des écrans plus grands et à une puissance de traitement plus élevée, nécessaires à des activités plus exigeantes.

Le problème des téléphones peu maniables est qu’ils nécessitent souvent une seconde main ou des commandes vocales pour fonctionner, ce qui peut être encombrant et peu pratique.

En réponse, les chercheurs du Future Interfaces Group du Human-Computer Interaction Institute (HCII) de l’université Carnegie Mellon développent un outil appelé EyeMU, qui permet aux utilisateurs d’exécuter des opérations sur un smartphone en combinant le contrôle du regard et des gestes simples de la main.

« Nous avons posé la question suivante : « Existe-t-il un mécanisme plus naturel à utiliser pour interagir avec le téléphone ? ». Et le précurseur d’une grande partie de ce que nous faisons est de regarder quelque chose », a déclaré Karan Ahuja, doctorant en interaction homme-machine.

L’analyse et la prédiction du regard ne sont pas nouvelles, mais atteindre un niveau acceptable de fonctionnalité sur un smartphone serait une avancée notable.

« Les yeux ont ce que l’on pourrait appeler le problème du toucher de Midas », a déclaré Chris Harrison, professeur associé au HCII et directeur du Future Interfaces Group. « Vous ne pouvez pas avoir une situation dans laquelle quelque chose se passe sur le téléphone partout où vous regardez. Trop d’applications s’ouvriraient. »

Un logiciel qui suit les yeux avec précision peut résoudre ce problème. Andy Kong, étudiant en dernière année d’informatique, s’est intéressé aux technologies de suivi des yeux dès son arrivée à la CMU. Il a donc écrit un programme qui utilise la caméra intégrée d’un ordinateur portable pour suivre les yeux de l’utilisateur, qui à son tour déplace le curseur sur l’écran – une première étape importante vers EyeMU.

Les chercheurs de la CMU montrent comment l’estimation du regard à l’aide de la caméra du téléphone peut être associée à des gestes de mouvement pour permettre une technique d’interaction rapide sur les téléphones portables. Crédit : Université Carnegie Mellon

« Les téléphones actuels ne répondent que lorsque nous leur demandons des choses, que ce soit par la parole, des tapotements ou des clics de bouton », a déclaré Kong. « Si le téléphone est largement utilisé aujourd’hui, imaginez combien il serait plus utile si nous pouvions prédire ce que l’utilisateur veut en analysant le regard ou d’autres données biométriques. »

Il n’a pas été facile de rationaliser l’ensemble pour qu’il puisse fonctionner à la vitesse d’un smartphone.

« C’est une contrainte de ressources. Vous devez vous assurer que vos algorithmes sont suffisamment rapides », a déclaré Ahuja. « Si cela prend trop de temps, votre œil passera son chemin ».

Kong, l’auteur principal de l’article, a présenté les résultats de l’équipe avec Ahuja, Harrison et le professeur adjoint de HCII Mayank Goel lors de la conférence de l’année dernière. Conférence internationale sur l’interaction multimodale. L’acceptation d’un article évalué par des pairs dans le cadre d’une conférence majeure a été une grande réussite pour Kong, un chercheur de premier cycle.

Kong et Ahuja ont perfectionné ce premier prototype en utilisant l’outil Face Mesh de Google pour étudier les modèles de regard des utilisateurs regardant différentes zones de l’écran et rendre les données cartographiques. Ensuite, l’équipe a développé un prédicteur de regard qui utilise la caméra frontale du smartphone pour verrouiller ce que le spectateur regarde et l’enregistrer comme cible.

L’équipe a rendu l’outil plus productif en combinant le prédicteur de regard avec les capteurs de mouvement intégrés du smartphone pour activer des commandes. Par exemple, un utilisateur peut regarder une notification suffisamment longtemps pour l’enregistrer comme cible et faire glisser le téléphone vers la gauche pour la rejeter ou vers la droite pour répondre à la notification. De même, un utilisateur peut rapprocher le téléphone pour agrandir une image ou l’éloigner pour désactiver le contrôle du regard, tout en tenant un grand café au lait dans l’autre main.

« Les grandes entreprises technologiques comme Google et Apple se sont rapprochées de la prédiction du regard, mais il ne suffit pas de regarder fixement quelque chose pour y arriver », a déclaré Harrison. « La véritable innovation de ce projet est l’ajout d’une deuxième modalité, comme le fait de donner une pichenette au téléphone à gauche ou à droite, combinée à la prédiction du regard. C’est ce qui en fait la force. Cela semble si évident rétrospectivement, mais c’est une idée intelligente qui rend EyeMU beaucoup plus intuitif. »


De nouvelles techniques de suivi du regard pourraient changer l’interaction avec les ordinateurs


Plus d’informations :
Andy Kong et al, EyeMU Interactions : Gaze + IMU Gestures on Mobile Devices, Actes de la 2021e conférence internationale sur l’interaction multimodale. (2021). DOI : 10.1145/3462244.3479938

Fourni par
Université Carnegie Mellon

Citation:
Vos yeux peuvent contrôler votre smartphone grâce à un nouvel outil de suivi du regard (2022, 22 avril).
récupéré le 23 avril 2022
à partir de https://techxplore.com/news/2022-04-eyes-smartphone-gaze-tracking-tool.html

Ce document est soumis au droit d’auteur. En dehors de toute utilisation équitable à des fins d’étude ou de recherche privée, aucune
partie ne peut être reproduite sans autorisation écrite. Le contenu est fourni à titre d’information uniquement.


Continuer la lecture
Cliquez pour commenter

Laissez un commentaire

Votre adresse e-mail ne sera pas publiée.

Test et Avis Accessoires4 heures ago

Une nouveauté amusante et utile – Hitech-world

Test et Avis Streaming4 heures ago

Netflix réprime gentiment le partage de compte dans un nouveau test – Hitech-world

Test et Avis Wearables4 heures ago

La mise à jour d’Insta360 facilite l’édition et le transfert des séquences de la caméra d’action – Hitech-world

Test et Avis Ordinateurs5 heures ago

La Logitech Lift est une souris verticale abordable pour le grand public – Hitech-world

Smartphones et Tablettes8 heures ago

La fuite du Samsung Galaxy Z Fold 4 laisse présager une sérieuse mise à niveau de l’appareil photo.

Ordinateurs et informatique8 heures ago

Google devrait faire suivre la tablette Pixel d’un autre grand rafraîchissement de produit

Internet8 heures ago

Vous cherchez du haut débit gratuit en Californie du Sud ? Voici comment le trouver

Gadgets8 heures ago

Notre étude suggère qu’ils stimulent l’intelligence des enfants

Gadgets8 heures ago

Notre étude suggère qu’ils stimulent l’intelligence des enfants

Test et Avis Accessoires1 jour ago

Mieux que le câble USB-C fourni – Hitech-world

Test et Avis Streaming1 jour ago

Le premier téléviseur QD-OLED de Samsung est désormais disponible en pré-commande – Hitech-world

Test et Avis Wearables1 jour ago

La première Smartwatch Pixel de Google pourrait être lancée en 2022 – Hitech-world

Test et Avis Gaming1 jour ago

Achetez deux jeux ou livres et recevez-en un autre gratuitement chez Amazon – Hitech-world

Test et Avis Ordinateurs1 jour ago

La recherche Google teste un étrange nouveau design – Hitech-world

Tests et Avis Smartphones1 jour ago

Le nouveau prix du forfait illimité de Google Fi est difficile à refuser – Hitech-world

Internet3 semaines ago

Google facilite la désactivation des cookies après une amende en France

Internet4 semaines ago

Les leçons de la France sur la réglementation de la pornographie sur Internet

Test et Avis Wearables2 semaines ago

Obtenez la balance intelligente à prix réduit de Withings et commencez à suivre votre composition corporelle – Hitech-world

Smartphones et Tablettes3 semaines ago

Voici pourquoi Apple supprime un iPhone 14 mini de l’équipe

Test et Avis Domotique3 semaines ago

Tous les produits Wyze qui coûtent plus cher maintenant (jusqu’à présent) – Hitech-world

Gadgets3 semaines ago

Pourquoi n’y a-t-il pas d’Uber pour la musique en direct ?

Internet1 semaine ago

Les géants américains de la technologie cherchent à se débarrasser des mots de passe

Internet2 semaines ago

Un chercheur crée un logiciel gratuit de modération des commentaires pour YouTube

Ordinateurs et informatique3 semaines ago

Date de sortie, prix, spécifications et design

Internet2 semaines ago

Qu’est-ce qu’un logiciel malveillant ? | Critiques de confiance

Test et Avis Audio3 semaines ago

55 dollars seulement pour un son et une autonomie exceptionnels – Hitech-world

Tests et Avis Smartphones3 semaines ago

Apple ajoute l’iPhone 6 Plus à sa liste de produits « vintage », voici ce que cela signifie – Hitech-world

Test et Avis Domotique4 semaines ago

Les nouveaux produits d’éclairage intelligent de Nokia ne perturberont pas les membres de votre famille – Hitech-world

Test et Avis Wearables1 semaine ago

La bague Movano vise à surveiller les maladies chroniques et à suivre d’autres paramètres – Hitech-world

Smartphones et Tablettes4 semaines ago

Meilleure tablette Android : Nos 4 plus grandes recommandations

ARTICLES POPULAIRES