Vision Pro : le gros Pencil d’Apple veut dessiner dans l’air

Apple explore un contrôleur épais inspiré de l’Apple Pencil pour son Apple Vision Pro. Le casque fonctionne sans manette dédiée, mais les brevets étudiés ajoutent une pointe virtuelle, un suivi des mouvements et des sensations de texture.

En 2024, Apple présentait le suivi du regard, les gestes de la main et la voix comme les principales méthodes de contrôle du casque. Pourquoi ajouter un accessoire alors que deux doigts levés suffisent à sélectionner une icône? La réponse tient dans les tâches qui demandent de la stabilité : dessiner, écrire ou déplacer un objet en trois dimensions est plus difficile quand la main travaille dans le vide.

Un document de brevet publié en janvier 2024 décrit un contrôleur allongé, tenu comme un stylo, un marqueur, une baguette ou un outil. Un autre, publié le 29 février 2024, s’intéresse au rangement et à la recharge. Le 2 juin 2026, Apple a aussi détaillé un système capable de détecter et de restituer des textures virtuelles. Le contrôleur Vision Pro reste une piste de recherche, pas un produit annoncé.

Le Pencil prend de la bouteille

Les illustrations ne montrent pas un fin Apple Pencil à glisser dans une housse d’iPad. L’objet paraît plus épais et assez long pour couvrir la largeur de la main, avec une forme de marqueur et une prise plus ferme. Il ressemble donc davantage à une manette professionnelle qu’à un simple stylet.

Le document intitulé Computer System with Handheld Controllers ne limite pas le dispositif au casque. Apple envisage aussi une utilisation avec un téléphone, une tablette, un ordinateur portable, une montre connectée, un appareil doté d’un haut-parleur ou un autre équipement électronique. Le texte reste large, comme souvent dans un brevet, mais le contrôleur se veut transversal.

Avec l’Apple Vision Prola pointe physique pourrait recevoir une pointe virtuelle visible uniquement par le porteur du casque. Un pinceau, un marqueur ou une autre tête d’outil se superposerait à l’extrémité réelle. Les personnes autour verraient surtout quelqu’un agiter un gros stylo dans le vide. La réalité mixte a parfois des allures d’atelier invisible.

Le doigt dans l’engrenage, la précision au bout du stylet

Les gestes libres conviennent à une sélection ou à un défilement. Ils deviennent plus délicats lorsqu’il faut suivre une trajectoire précise, écrire longtemps ou placer un objet au millimètre dans l’espace. Une surface solide stabilise naturellement la main, tandis qu’un mouvement sans point d’appui fatigue et fournit moins de repères.

Le contrôleur pourrait donc viser le dessin en trois dimensions, l’écriture manuscrite, la retouche d’objets virtuels et la manipulation de maquettes. Dans ces usages, l’accessoire ne remplacerait pas forcément les gestes : il ajouterait un point de contact physique quand le pincement des doigts commence à coincer.

Une pointe virtuelle, un vrai problème

Apple décrit une extrémité capable d’accueillir un pinceau généré par ordinateur ou une autre tête d’outil numérique. Le principe ne consiste pas à faire sortir physiquement un pinceau du contrôleur. Le casque ferait coïncider une image virtuelle avec la pointe réelle dans le champ de vision du porteur.

La même poignée pourrait ainsi devenir un pinceau, un marqueur ou une baguette de sélection, sans changer d’accessoire. Le geste reste physique, mais l’outil devient logiciel. L’idée est simple sur le papier. La synchronisation entre la pointe réelle, son image virtuelle et le mouvement de la main devra, elle, être suffisamment fiable pour éviter de dessiner à côté de la cible.

Le gyroscope ne fait pas du surplace

Pour suivre le contrôleur, Apple décrit une unité de mesure inertielle avec accéléromètre. Le système pourrait recueillir les balayages, les mouvements d’écriture, les gestes de dessin, les rotations, les secousses et les déplacements dans l’espace. Une connexion sans fil transmettrait ces données au casque ou à un autre appareil.

Le suivi pourrait aussi utiliser des marqueurs visuels actifs ou passifs, détectés par un capteur optique placé dans un équipement externe. L’ensemble fournirait des indices sur la position, l’orientation et la vitesse du contrôleur. On est loin du stylo qui envoie simplement un clic : chaque mouvement devient une donnée à interpréter.

Le document publié le 29 février 2024 ajoute des fonctions de rangement et de recharge. Les dessins montrent un casque qui rappelle l’Apple Vision Pro. Apple réfléchit donc aussi à la corvée très terre à terre qui accompagne l’accessoire : où le poser et comment éviter de le retrouver vide au moment de s’en servir?

Le Pencil veut maintenant faire sentir les pixels

Le document publié le 2 juin 2026, intitulé Surface texture detection and emulationajoute une dimension haptique. Apple y décrit un appareil capable de détecter des propriétés d’une surface virtuelle, comme sa rugosité, puis de transmettre cette sensation à la main par des forces, des vibrations ou de petits mouvements mécaniques.

Un gyroscope pourrait modifier la sensation selon l’angle de rotation du contrôleur. Des actionneurs linéaires pourraient étendre ou rétracter une partie de l’appareil. Le document évoque aussi une unité de mesure inertielle, des capteurs de couleur, une caméra, des interféromètres et des capteurs de surface placés près de la pointe.

Le texte compte près de 12 000 mots et neuf pages de dessins. Cette précision ne transforme pas une paroi virtuelle en papier de verre sous les doigts. Elle décrit plutôt un accessoire capable de rapprocher le mouvement réel et la sensation simulée. Le stylo veut toucher l’intangible, mais le brevet ne dit pas encore si la main y croira.

Le jardin clos sort le stylo

Le contrôleur n’est pas associé à une seule catégorie de produit. Le brevet mentionne les casques, les téléphones, les tablettes, les ordinateurs portables, les montres connectées et d’autres appareils. Dans le jardin clos d’Apple, un accessoire gagne en intérêt lorsqu’il circule entre plusieurs équipements, à condition que les fonctions compatibles restent réservées à cet écosystème.

Cette compatibilité théorique pose aussi une question de simplicité. Le Vision Pro est présenté comme un ordinateur spatial qui se passe de manette. Ajouter un contrôleur épais, un système de recharge et des fonctions haptiques pourrait aider les utilisateurs qui ont besoin de précision, mais rendre l’expérience plus complexe. Le casque vendu sans manette devrait alors expliquer pourquoi il faut en acheter une.

Brevet, pas billet pour la keynote

La description du Apple Vision Pro repose toujours sur le regard, les gestes et la voix. Le Pencil bodybuildé, les marqueurs visuels et la texture simulée appartiennent à plusieurs pistes explorées dans des brevets. Aucun prix ni calendrier ne permet de juger un produit qui n’existe pas encore.

La piste répond toutefois à une limite concrète du contrôle dans le vide : la liberté du geste ne remplace pas toujours le contact, la stabilité et le retour tactile. Apple peut continuer à défendre le casque sans manette tout en préparant un accessoire pour les tâches qui coincent. Les doigts gardent la télécommande. Le gros Pencil attend peut-être dans les coulisses, batterie vide et brevet bien rangé.