Suivi des jambes en VR sans tracker c’est possible !

par | 16 Mai 2023 | Actualités, AR VR PC, Casques, PC et accessoires, HTC, Meta Quest 2, Meta Quest 3, Meta Quest Pro, Pico

Suivi des jambes en VR sans tracker les solutions de chez Meta (QuestSim et AGRoL), Standable et Driver4VR.

 

Suivi des jambes en VR sans tracker c’est possible !

Meta Quest 2 (449 €) |  | Meta Quest 3 | 

Les systèmes de VR actuels ne suivent que la position de la tête et des mains. La position de vos coudes, de votre torse et de vos jambes peut être estimée à l’aide d’algorithmes appelée cinématique inverse (IK), mais cette méthode n’est parfois précise que pour les coudes et rarement correcte pour les jambes. Il y a tout simplement trop de solutions potentielles pour chaque ensemble donné de positions de la tête et des mains.

Compte tenu des limites de la IK, certaines applications de VR ne montrent aujourd’hui que vos mains, et beaucoup ne vous donnent que le haut du corps. Les casques PC utilisant le suivi SteamVR prennent en charge les trackers supplémentaires portés, tels que le Vive Tracker de HTC, mais l’achat d’un nombre suffisant de trackers pour le suivi du corps coûte des centaines d’euros et n’est donc pas pris en charge dans la plupart des jeux.

Lire l’article sur les autres options de suivi corps entier en réalité virtuelle.

 

Le suivi des jambes par estimation chez Meta avance à petits pas

En septembre 2022, les chercheurs de Meta AI ont présenté un réseau neuronal formé avec l’apprentissage par renforcement appelé QuestSim qui estime une pose plausible du corps entier avec seulement les données de suivi de Quest 2 et de ses contrôleurs. Mais la latence de QuestSim était de 160 ms, soit plus de 11 images à 72 Hz. Il ne conviendrait vraiment que pour voir les corps des avatars d’autres personnes, et non le vôtre lorsque vous regardez vers le bas.

AGRoL suivi des jambes VR Meta Quest

Dans un nouvel article intitulé Avatars Grow Legs (AGRoL), d’autres chercheurs de Meta AI et le stagiaire Yuming Du ont présenté une nouvelle approche qui, selon eux, “permet d’atteindre des performances de pointe” avec des exigences de calcul inférieures à celles des approches d’IA précédentes. AGRoL est un modèle de diffusion, comme les récents systèmes de génération d’images d’IA tels que Stable Diffusion et DALL-E 2 d’OpenAI.

Contrairement à d’autres modèles de diffusion et à la plupart des documents de recherche sur l’IA, les chercheurs affirment qu’AGRoL “peut fonctionner en temps réel” sur un NVIDIA V100, à une vitesse d’environ 41 images par seconde. Bien qu’il s’agisse d’un GPU de 15 000 dollars, les algorithmes d’apprentissage automatique commencent souvent par nécessiter ce type de matériel, mais finissent par fonctionner sur des smartphones avec quelques années de progrès en matière d’optimisation. C’est le cas des modèles de reconnaissance et de synthèse vocales utilisés dans Google Assistant et Siri, par exemple.

Pourtant, rien n’indique qu’une estimation de la pose du corps de la qualité d’AGRoL arrivera bientôt dans les produits de Meta Quest.

Meta a annoncé que ses avatars auront des jambes cette année, mais cela sera probablement alimenté par un algorithme beaucoup moins avancé techniquement, et ne sera que pour les avatars d’autres personnes, pas les vôtres.

 

Standable le suivi des jambes en VR sans tracker c’est déjà possible

Standable est un projet réalisé par John Coumerilh, un développeur indépendant qui nous propose un émulateur virtuel de tracker pour Steam VR. Imaginez-vous dans VR chat avec un suivi corps entier sans aucun matériel autre que votre casque VR et vos manettes.

Standable FBE est une méthode d’estimation des points du corps qui ne sont pas actuellement suivis par la plupart des équipements XR, c’est-à-dire les jambes, le bassin, les coudes et les genoux.

 

Le suivi avec une app sur votre smartphone

Driver4VR suivi corps entier VR

Une nouvelle application utilise la caméra de votre smartphone pour suivre votre corps et peut envoyer les données à l’application autonome VRChat Quest.

Driver4VR est une solution pour le suivi des jambes en VR, sans aucun équipement à porter. Il suffit d’avoir un iPhone/iPad avec iOS 12.0 ou supérieur ou un téléphone ou une tablette Android avec Android 5.1 ou supérieur.

L’application peut utiliser la caméra frontale ou la caméra arrière. En général, la caméra avant a un champ de vision plus large, et le fait de pouvoir voir l’état du suivi permet de trouver plus facilement la bonne position pour votre téléphone. Essayez de le placer le plus loin possible de vous, face vers le bas, idéalement dans un support pour téléphone.

Vous connectez l’application à VRChat sur Quest via OSC en entrant simplement l’adresse IP de votre casque. Celle-ci se trouve dans les paramètres Wi-Fi du casque, en sélectionnant le réseau auquel il est connecté.

La qualité de suivi de Driver4VR n’est pas proche de ce que l’on peut attendre de trackers réels, et il y a une petite latence. Il ne fonctionne pas bien non plus si vous n’êtes pas face au téléphone. Mais pour de nombreux utilisateurs de VRChat cela ajoute un véritable plus à l’expérience.

L’application elle-même est gratuite sur l’App Store ou Google Play, , mais elle ne donne accès qu’au suivi des hanches. Pour obtenir également le suivi des pieds, vous devrez payer 17 $ (iOS) / 16 $ (Android) via un paiement in-app. Le développeur prévoit d’ajouter d’autres points de suivi à l’avenir.

 

Les prochains Vive tracker autonomes

HTC Vive tracker autonome suivi des jambes VR

Le coût total de trackers HTC et des stations de base nécessaires s’élève à plus de 600 euros. En plus, il faut un PC.

HTC a annoncé la sortie d’un Vive Tracker à suivi automatique dans le courant de l’année, mais le prix n’a pas encore été révélé.

J’ai dédié un article à ce projet.

 

Suivez les news VR sur votre réseau préféré

 

Meilleurs accessoires Quest 2023

Voici ma sélection des meilleurs accessoires pour améliorer et entretenir votre casque de réalité virtuelle en 2023. Les liens affiliés ci-dessous vous permettent d’obtenir des réductions sur les principales boutiques d’accessoires pour Meta Quest 2. Les produits que je vous indique sont ceux que j’ai personnellement testés et utilisés avec mon Meta Quest 2.

  1. Meilleur rapport qualité/prix sangle Elite Zyber confort avec batterie rechargeable pour Quest 2 à moins de 40 € avec le code promo 10 % “STYLISTME”.
  2. Ma sangle préférée haut de gamme BOBOVR : sangle confort avec batterie rechargeable amovible (69 €) associée à son interface faciale avec ventilateur à 50 €.
  3. Grips confort avec batterie rechargeable modèle Knight de chez Zyber (autour de 30 € avec le code promo 20 % “STYLISTME”).
  4. Meilleur rapport qualité/prix câble Zyber Link de 5 mètres en USB 3 (bleu à l’intérieur) à moins de 20 € avec le code promo 20 % “STYLISTME”.
  5. Utiliser votre Quest 2 dans le noir avec la mini lampe infrarouge KKCOBVR i2 à 37,55 € sur Amazon.
  6. Finies les lunettes avec les lentilles correctrices de chez Zyber (filtre lumière bleue) pour Quest 2 à moins de 50 € avec le code promo 20 % “STYLISTME
  7. La gamme d’accessoires Quest 2 de chez Kiwi Design (sangles, grip, interface, socle). Code de réduction de 5 % avec le code “STYLISTME”.
  8. Nettoyant des contacts pour dégripper les contrôleurs du Quest 2 chez WD 40 Specialist contact (moins de 10  €)
  9. Pâte de polissage PolyWatch pour supprimer les petites rayures présentes sur les lentilles du Quest, on trouve le tube à moins de 6 € sur Amazon.
  10. Un tapis rond épais en 80 cm de diamètre, pour avoir un repaire tactile réel sous vos pieds et éviter de tout casser à la maison.

Tutoriels Meta Quest

Casques VR accessoires 2023

Nouveaux casque VR 2023 :

Nouveaux accessoires VR 2023 :

Les meilleurs jeux Quest 2023

Abonnez-vous (gratuit & sans pub)

Indiquez simplement votre e-mail pour recevoir les nouveaux articles dès leur publication

Suivez-moi sur votre réseau préféré

Derniers articles :

Jeux Apple Vision Pro les premiers jeux VR annoncés

Jeux Apple Vision Pro le casque aura bien une bibliothèque de jeux VR, le premier est l’adaptation de la célèbre plateforme sociale Rec Room.

ChatGPT dans les entreprises : opportunités et risques à venir

Découvrez les impacts de ChatGPT dans les entreprises : opportunité réelle de gain de productivité face aux nombreux risques.

Asgard’s Wrath 2 le meilleur jeu VR en natif sur Quest ?

Asgard’s Wrath 2 du studio Sanzaru est la belle surprise des annonces du Quest Game Showcase 2023, présentation détaillée de qui nous attend.

Builder Simulator VR Construisez la maison des fondations à la décoration

Builder Simulator VR pour dessiner, construire et décorer la maison neuve 3D de vos rêves avec votre casque de réalité virtuelle (PCVR).

Meta Quest 3 avis détaillé sur ses caractéristiques

Meta Quest 3 avis sur ses caractéristiques, ses nouveautés, son prix et la concurrence interne et externe : faut-il attendre pour l’acheter ?

Apple Vision Pro le nouveau casque lunettes de réalité augmentée

Apple Vision Pro le nouveau casque de réalité augmentée et mixte impressionne par ses possibilités pour travailler ou s’amuser.

Soldes VR Cover sur les accessoires VR du 2 au 4 juin 2023

Soldes VR Cover le spécialise des accessoires pour les principaux casques VR fait des réductions jusqu’à 70 % pendant 3 jours. 

Meta Quest Gaming 2023 tous les nouveaux jeux annoncés sur Quest

Meta Quest Gaming 2023 tous les nouveaux jeux annoncés pour les casques de réalité virtuelle Meta Quest 2 et Pro

SenseGlove Nova gants haptiques haut de gamme Quest, Neo Pico natifs et PCVR

SenseGlove Nova et Nova 2 gants haptiques haut de gamme disponibles pour les casques VR Meta Quest, Neo Pico 3 Link et casques PCVR.   SenseGlove Nova gants haptiques pour Quest, Pico et PCVR Quest 2 à 349 € | Accessoires & nouveaux casques VR | Chaine...

DPVR E4 serait-il le nouveau meilleur casque PCVR abordable ?

DPVR E4 le nouveau casque PCVR 2023 aux caractéristiques impressionnantes avec un prix très raisonnable pour accéder aux 7000 jeux Steam VR.

Test Meta Quest 3 la première prise en main confirme ses caractéristiques

Premier test et avis du Meta Quest 3  les principales caractéristiques et fonctionnalités confirmés par Mark Gurman de Bloomberg.

Arizona Sunshine 2 enfin la suite annoncée pour 2023 sur PSVR 2

Arizona Sunshine 2 confirmé pour 2023 sur PSVR 2 et certainement sur PCVR sur Steam, survie horreur et humour au rendez-vous.

Five Nights At Freddy’s 2 confirmé pour 2023 sur PSVR 2

Five Nights At Freddy’s 2 Help Wanted confirmé pour 2023 sur PSVR 2 et certainement sur les Meta Quest autonomes et casques PCVR sur Steam.

Pixel Ripped 1978 le troisième rétrogame de chez Arvore

Pixel Ripped 1978 le troisième rétrogame de chez Arvore réalisé en partenariat avec Atari sur Meta Quest, PCVR et PSVR 2.

0 commentaires

Soumettre un commentaire

Votre adresse e-mail ne sera pas publiée. Les champs obligatoires sont indiqués avec *