Le geste de double-clic d’Apple résout-il le problème de l’interface mobile/humaine ?

Les smartphones sont sans doute plus puissants que les PC. Considérez que l’iPhone 12, à 11 téraflops, a surpassé de plus de 5 000 fois le supercalculateur Cray 2. Et c’est un téléphone vieux de trois ans maintenant.

Même Samsung affirme que les smartphones modernes sont plus puissants que les PC. Même si ce n’est pas le cas pour les PC haut de gamme, les performances des deux classes d’appareils sont très proches entre les smartphones haut de gamme et les PC gros volumes avec carte graphique intégrée.

Alors pourquoi n’avons-nous pas encore abandonné les PC au profit des smartphones ? À cause de l’interface humaine. Un ordinateur utilise un clavier et une souris (ou un trackpad), tandis qu’un smartphone, qui a abandonné le clavier physique avec l’arrivée du premier iPhone, s’appuie généralement sur un clavier virtuel et un toucher, qui compromettent tous deux un écran déjà beaucoup plus petit.

Les visiocasques pourraient un jour résoudre le problème de la taille de l’écran, mais l’absence de clavier et de souris pour la saisie et la navigation reste un obstacle majeur à la perte d’un PC de plus en plus redondant.

Cette semaine, Apple a lancé l’iPhone 15 et une nouvelle Apple Watch. L’Apple Watch a encore moins d’espace d’écran (de beaucoup) que l’iPhone, mais elle est désormais dotée d’une nouvelle fonctionnalité qui pourrait bouleverser les choses : une capacité de double-clic qui pourrait ouvrir la porte à une nouvelle interface qui remplace le clavier et souris et fonctionnera avec un visiocasque comme le prochain Apple Vision Pro.

Explorons.

Le double tapotement

La fonction de double-clic, disponible depuis un certain temps en tant qu’option d’accessibilité peu connue, permet à un utilisateur d’Apple Watch d’exécuter une commande sans toucher sa montre ou son téléphone en tapotant simplement deux fois ses doigts l’un contre l’autre. Le téléphone n’est pas impliqué (c’est ainsi que Microsoft a résolu un problème similaire avec HoloLens). Le mouvement de tapotement est plutôt basé sur les mouvements du poignet. Même si au départ cette manœuvre particulière se limite à un seul geste, il n’y a aucune raison pour qu’une grande variété d’autres gestes ne puissent pas émerger.

Imaginez si vous pouviez communiquer avec votre appareil en utilisant une seule main au lieu de deux ; vous pouvez créer des documents deux fois plus vite qu’aujourd’hui (et c’est sans que l’IA finisse les mots et les phrases à votre place, ce qui serait encore plus rapide). Vous n’aurez besoin que d’un smartphone et d’un casque au lieu d’un PC à part entière pour effectuer votre travail.

Langue des signes américaine vs clavier et souris

Il y a des années, je me suis entraîné à utiliser la langue des signes américaine (ASL) – non pas pour communiquer avec des personnes malentendantes, mais pour pouvoir communiquer dans des environnements bruyants (où j’étais fondamentalement sourd). L’ASL utilise une variété de gestes principalement à une main.

C’est là que ça devient intéressant.

En règle générale, vous devez être capable de signer à une vitesse de 110 à 130 mots par minute pour avoir une conversation, tandis que les dactylographes professionnels tapent entre 43 et 95 mots par minute. C’était une nouveauté pour moi lorsque je l’ai appris pour la première fois. Mais pensez aux implications du passage de la dactylographie à la langue des signes : vous constaterez un impact positif significatif sur la productivité et les avantages secondaires de pouvoir mieux communiquer dans des environnements bruyants et avec des personnes malentendantes.

Pour les tâches liées à l’informatique, vous aurez toujours besoin de quelque chose comme une souris. Mais les nouveaux visiocasques comme l’Apple Vision Pro disposent d’un suivi oculaire, vous pouvez donc utiliser vos yeux pour déplacer la « souris » et ce geste de double pression pour sélectionner ce qui est mis en évidence par votre curseur oculaire.

ASL contre voix

Les gens peuvent parler entre 110 et 150 mots par minute, mais à ces vitesses plus élevées, ils deviennent plus difficiles à suivre. Même si la synthèse vocale a été présentée comme un autre moyen de remplacer le clavier sur un petit appareil, vous devez toujours faire face à des accessoires inconfortables et relativement peu attrayants qui vous passent par la bouche. Même avec la réalité virtuelle, qui a du sens pour les jeux et la collaboration, cette solution constitue un vilain remplacement de clavier. Et les mêmes types de problèmes (pensez à la ponctuation) existent pour la langue des signes et la voix. (Heureusement, nous disposons désormais d’outils d’IA capables d’analyser ce qui est dit et d’ajouter de la ponctuation.)

Il existe peut-être un moyen d’utiliser la technologie du double tapotement qu’Apple a démontrée cette semaine pour créer une sorte de capture vocale : vous bougeriez silencieusement vos lèvres et votre langue pour créer du texte. Mais je ne connais personne qui travaille encore sur ce type de solution.

Un geste qui change la donne

Je pense que le double-clic d’Apple pourrait changer la donne dans la façon dont nous interagissons avec la technologie. Même dans cette première utilisation, où elle ne fait qu’une chose, elle rend l’Apple Watch bien plus utile. Et s’il peut être conçu pour capturer des gestes plus complexes comme ceux requis pour la langue des signes, il pourrait devenir la prochaine grande interface homme/machine. Cela permettrait enfin au smartphone d’atteindre son potentiel et de remplacer le PC par un appareil et une expérience beaucoup plus portables.

Nous verrons si Apple va dans cette direction. Si ce n’est pas le cas, quelqu’un d’autre innovera presque certainement pour créer la prochaine révolution mobile. Les smartphones sont sur le point de remplacer les PC, et le geste de double-clic d’Apple, associé au Vision Pro, indique un moyen intéressant d’y parvenir.

Partager Cet Article
Quitter la version mobile