Bracelet neuronal TASBI suivi des mains précis à retour haptique VR/AR

par | 1 Juin 2021 | Actualités, AR VR PC, Casques, PC et accessoires

Bracelet neuronal TASBI suivi des mains précis avec retour haptique pour casque de réalité virtuelle Oculus ou des lunettes de réalité augmentée.

 

Bracelet neuronal TASBI suivi des mains précis à retour haptique VR/AR

Prototype |  Oculus Quest 2 à 349 € | Setup de mon Quest 2 | Les actualités VR | Promotions jeux VR

Les choses deviennent très intéressantes dans l’univers AR/VR. Nous avons beaucoup d’informations aujourd’hui sur les nouvelles façons dont nous pourrions interagir avec le monde virtuel.

Facebook travaille sur un bracelet neuronal TASBI pour contrôler vos lunettes AR ou votre casque de réalité virtuelle Oculus Quest. Nous avons entendu parler pour la première fois du travail de Facebook sur ce sujet lorsqu’il a présenté « Tasbi » à la conférence mondiale sur l’haptique 2019. Tasbi est l’acronyme de Tactile And Squeeze Bracelet Interface.

 

 

Le suivi des mains avec Oculus Quest reste limité

Les casques Oculus Quest de Facebook prennent déjà en charge le suivi des mains sans manette, réalisé via les caméras du casque.

Mais pour fonctionner, il faut une pièce bien éclairée. De plus, il y a un délai faible, mais perceptible de réaction (latence ou lag). Et enfin, cela ne fonctionne pas si vos mains se chevauchent ou si elles sortent du champ de vision des caméras frontales du casque.

Alors, de meilleures caméras, des capteurs de profondeur et des puces plus rapides pourraient améliorer les performances. Mais il y aura toujours des scénarios où le casque ne pourra pas voir le mouvement d’un ou de plusieurs doigts.

 

Nouvelle technologie : le suivi neuronal des doigts

Une autre approche du suivi des mains consiste à lire les signaux neuronaux qui passent par votre poignet. Un tel système peut détecter le mouvement des doigts avant même qu’il ne se produise.

Facebook a déposé un brevet pour cette technologie dès le début de 2019. La startup new-yorkaise CTRL-Labs avait travaillé sur la même idée que Facebook a acquis fin 2019. Ce qui est présenté maintenant en vidéo semble être une version avancée et concrète du bracelet neuronal de Facebook.

Le directeur des interfaces neuromotrices de Facebook, Thomas Reardon, a expliqué qu’une plus grande partie du cerveau est dédiée au contrôle de vos mains que toute autre partie du corps. Il affirme qu’une récente percée permet de décoder l’activité des neurones individuels pour un « contrôle presque infini des machines ». Cela signifie que les interactions entre les mains pourraient atteindre une précision au millimètre près et sans aucune latence.

Puisque l’appareil suit les signaux neuronaux, et non les doigts réels, vous pouvez aussi simplement penser à bouger vos doigts. M Reardon a montré un court clip d’une « personne née sans main » contrôlant une main virtuelle, et a décrit des cas d’utilisation exotiques tels que le contrôle d’une main virtuelle avec six doigts ou plus.

Bracelet neuronal TASBI : haptique basée sur le poignet

Lorsqu’il a évoqué les objectifs à long terme de Facebook, Sean Keller, responsable de l’interaction AR/VR et de la R et D sur les entrées, a décrit le fait de sortir « une paire de gants haptiques doux et légers ».

À plus court terme, Nicholas Colonnese, directeur scientifique de la recherche, a évoqué le potentiel du retour haptique fourni par un dispositif monté sur le poignet. Alors que l’intuition suggérerait qu’une sensation au poignet ne devrait pas convenir aux interactions virtuelles basées sur les doigts, Colonnese affirme que « le contraire » est vrai en raison d’un effet appelé substitution sensorielle. Apparemment, votre cerveau interprète les stimuli visuels et haptiques simultanés comme un seul événement.

Les utilisations d’interactions virtuelles dans la VR et l’AR avec les capacités haptiques de vibration et de pression de Tasbi sont très nombreuses. Il peut s’agir de choses simples comme des boutons à pousser, tourner et tirer, des textures à sentir et des objets virtuels à déplacer dans l’espace. Mais cela peut aussi permettre de simuler le fait de grimper à une échelle ou même d’utiliser un arc et des flèches en réalité virtuelle ou augmentée.

Tasbi Facebook bracelet neuronal oculus suivi des mains

Les vibrations et la sensation de pression que procure le Tasbi donnent l’impression que vous interagissez naturellement avec ces objets. Étonnamment, grâce à la substitution sensorielle, où votre corps combine les diverses informations multisensorielles, la réponse peut être oui.

Nicholas Colonnese a également présenté des cas d’utilisation plus classiques de l’haptique de haute fidélité montée sur le poignet lorsqu’elle est associée à des lunettes de réalité augmentée. Ainsi le Tasbi peut vibrer pour vous indiquer la direction à prendre, en utilisant le GPS connecté à vos lunettes AR. Ou encore, fournir une vibration différente pour différents types de communications entrantes.

Une autre utilisation assez avancée consiste à pouvoir simuler la saisie sur un clavier virtuel en reconnaissant la position de vos doigts sur des touches virtuelles. Une fonctionnalité qui éviterait d’utilise un clavier Bluetooth en réalité virtuelle, comme avec le clavier Logitech K830.

Tasbi Armbands Oculus clavier virtuel suivi des mains

Une technologie très similaire chez Apple avec l’AssistiveTouch pour WatchOS

Le bracelet neuronal TASBI n’est pas sans rappeler les nouvelles fonctionnalités d’accessibilité : AssistiveTouch sur l’Apple Watch.

AssistiveTouch permet aux utilisateurs ayant des différences de membres du haut du corps de profiter des avantages de l’Apple Watch sans jamais avoir à toucher l’écran ou les commandes.

En utilisant des capteurs de mouvement intégrés tels que le gyroscope et l’accéléromètre, ainsi que le capteur de fréquence cardiaque optique et l’apprentissage automatique sur l’appareil, l’Apple Watch peut détecter des différences subtiles dans les mouvements musculaires et l’activité des tendons.

En portant l’Apple Watch vous pouvez maintenant déclencher des actions en fermant le poing (clinch) ou en pinçant le pouce et l’indexe (pinch). Une autre fonctionnalité permet d’appeler et de contrôler un curseur à l’aide des données de l’accéléromètre en secouant votre poignet.

 

Données neuronales : des informations très personnelles

Cela signifie également que ces données peuvent être considérées comme profondément personnelles, ce qui soulève des problèmes de confidentialité. Les données neuronales collectées pour le suivi des mains sont vraiment très personnelles. Le problème est de savoir comment traiter des informations aussi personnelles et s’engager d’une manière qui soit prohumaine et au nom des utilisateurs.

 

 

Inscription Newsletter Stylistme.com

Indiquez nous votre e-mail pour ne plus rater les nouveaux articles.
Votre e-mail n’est communiqué à personne d’autre !

 

 

Suivez les news VR sur votre réseau préféré

 

Meilleurs accessoires Quest 2023

Voici ma sélection des meilleurs accessoires pour améliorer et entretenir votre casque de réalité virtuelle en 2023. Les liens affiliés ci-dessous vous permettent d’obtenir des réductions sur les principales boutiques d’accessoires pour Meta Quest 2. Les produits que je vous indique sont ceux que j’ai personnellement testés et utilisés avec mon Meta Quest 2.

  1. Meilleur rapport qualité/prix sangle Elite Zyber confort avec batterie rechargeable pour Quest 2 à moins de 40 € avec le code promo 10 % “STYLISTME”.
  2. Ma sangle préférée haut de gamme BOBOVR : sangle confort avec batterie rechargeable amovible (69 €) associée à son interface faciale avec ventilateur à 50 €.
  3. Grips confort avec batterie rechargeable modèle Knight de chez Zyber (autour de 30 € avec le code promo 20 % “STYLISTME”).
  4. Meilleur rapport qualité/prix câble Zyber Link de 5 mètres en USB 3 (bleu à l’intérieur) à moins de 20 € avec le code promo 20 % “STYLISTME”.
  5. Utiliser votre Quest 2 dans le noir avec la mini lampe infrarouge KKCOBVR i2 à 37,55 € sur Amazon.
  6. Finies les lunettes avec les lentilles correctrices de chez Zyber (filtre lumière bleue) pour Quest 2 à moins de 50 € avec le code promo 20 % “STYLISTME
  7. La gamme d’accessoires Quest 2 de chez Kiwi Design (sangles, grip, interface, socle). Code de réduction de 5 % avec le code “STYLISTME”.
  8. Nettoyant des contacts pour dégripper les contrôleurs du Quest 2 chez WD 40 Specialist contact (moins de 10  €)
  9. Pâte de polissage PolyWatch pour supprimer les petites rayures présentes sur les lentilles du Quest, on trouve le tube à moins de 6 € sur Amazon.
  10. Un tapis rond épais en 80 cm de diamètre, pour avoir un repaire tactile réel sous vos pieds et éviter de tout casser à la maison.

Tutoriels Meta Quest

Casques VR accessoires 2023

Nouveaux casque VR 2023 :

Nouveaux accessoires VR 2023 :

Les meilleurs jeux Quest 2023

Abonnez-vous (gratuit & sans pub)

Indiquez simplement votre e-mail pour recevoir les nouveaux articles dès leur publication

Suivez-moi sur votre réseau préféré

Derniers articles :

BOBOVR M3 PRO le premier accessoire à acheter pour votre Quest 3

BOBOVR M3 Pro la meilleure alternative à la sangle élite de Meta, confortable avec batterie rechargeable pour Meta Quest 3.   BOBOVR M3 Pro : sangle confort avec batterie rechargeable et amovible pour Meta Quest 3 Prix : 75 € (estimation) | Meta Quest 2 (349 €) |...

BOBOVR M2 Pro meilleure sangle pour Meta Quest 2 et Quest 3

BOBOVR M2 Pro la meilleure alternative à la sangle Elite, un modèle confortable de avec batterie rechargeable pour Oculus Quest 2

Dyson V15s Detect Submarine le meilleur balais aspirateur en 2023 ?

Dyson V15s Detect Submarine le balais aspirateur : un nettoyage impeccable avec de l’eau claire et une aspiration surpuissante des sols durs.

Comment retrouver ou changer le code PIN de votre Meta Quest

Avez-vous déjà oublié votre code PIN Meta Quest ou peut être souhaitez-vous en changer, voici un tuto pour tout savoir.

Roborock Zeo One lave-linge connecté innovant

Roborock Zeo One le nouveau lave-linge séchant connecté avec séchage basse température à économie d’énergie.

WRC 2023 arrive en novembre et annonce un portage VR sur Steam

EA Sports WRC 2023 apporte le Championnat du Monde des Rallyes de la FIA sur Steam. Une mise à jour annoncée pour jouer avec un casque PCVR.

Arashi Castles of Sin : superbe jeu VR d’infiltration Ninja

Arashi Castles of Sin l’impressionnant jeu d’infiltration en VR ambiance Ninja du studio Skydance Interactive.

XReal Air 2 l’écran géant de 305″ sur votre nez

XReal Air 2 et Air 2 Pro apportent des améliorations technologiques et ergonomiques notables aux excellentes XReal Air.

Bounty City un FPS VR gratuit 2V2V pour Meta Quest

Bounty City un jeu gratuit de combat tactique et d’action style FPS avec un mode 2V2V pour casques VR Meta Quest.

Mannequin VR le studio Fast Travel révèle son prochain jeu

Mannequin VR le premier jeu multijoueur de l’excellent studio Fast Travel Games pour les principaux casque VR

Sclerosis VR remake pour les fans du jeu d’horreur Amnesia The Dark Descent

Sclerosis VR remake non officiel qui devrait séduire les fans du grand classique jeu d’horreur Amnesia The Dark Descent.

Bootstrap Island un superbe jeu de survie pour PCVR

Bootstrap Island un superbe jeu de survie ambiance ile déserte pour casque PCVR développé par le studio Maru VR Productions.

Meta Quest V57 la version officielle bien décevante par rapport à la PTC

Meta Quest V57 la nouvelle mise à jour du logiciel interne avant la sortie du Quest 3, enfin des jambes pour les avatars en VR.

NIU KQi Air X enfin une trottinette électrique ultra légère

NIU KQi Air X enfin une trottinette électrique puissante, design et surtout très légère.

Brazen Blaze le premier jeu VR d’action de MyDearest

Brazen Blaze le premier jeu d’action en réalité virtuelle du studio koréen MyDearest, offre des combats intenses 3v3 en arène.

EdenXVerse jeu VR pour adulte Meta Quest pour hommes et femmes

EdenXVerse un des jeu VR pour adulte les plus facile à utiliser avec les casques de réalité virtuelle Meta Quest (porno VR).

0 commentaires

Soumettre un commentaire

Votre adresse e-mail ne sera pas publiée. Les champs obligatoires sont indiqués avec *