Suivi des jambes en VR sans tracker c’est possible !

par | 16 Mai 2023 | Actualités, AR VR PC, Casques, PC et accessoires, HTC, Meta Quest, Pico

Suivi des jambes en VR sans tracker les solutions de chez Meta (QuestSim et AGRoL), Standable et Driver4VR.

 

Suivi des jambes en VR sans tracker c’est possible !

Meta Quest 2 (449 €) |  | Meta Quest 3 | 

Les systèmes de VR actuels ne suivent que la position de la tête et des mains. La position de vos coudes, de votre torse et de vos jambes peut être estimée à l’aide d’algorithmes appelée cinématique inverse (IK), mais cette méthode n’est parfois précise que pour les coudes et rarement correcte pour les jambes. Il y a tout simplement trop de solutions potentielles pour chaque ensemble donné de positions de la tête et des mains.

Compte tenu des limites de la IK, certaines applications de VR ne montrent aujourd’hui que vos mains, et beaucoup ne vous donnent que le haut du corps. Les casques PC utilisant le suivi SteamVR prennent en charge les trackers supplémentaires portés, tels que le Vive Tracker de HTC, mais l’achat d’un nombre suffisant de trackers pour le suivi du corps coûte des centaines d’euros et n’est donc pas pris en charge dans la plupart des jeux.

Lire l’article sur les autres options de suivi corps entier en réalité virtuelle.

 

Le suivi des jambes par estimation chez Meta avance à petits pas

En septembre 2022, les chercheurs de Meta AI ont présenté un réseau neuronal formé avec l’apprentissage par renforcement appelé QuestSim qui estime une pose plausible du corps entier avec seulement les données de suivi de Quest 2 et de ses contrôleurs. Mais la latence de QuestSim était de 160 ms, soit plus de 11 images à 72 Hz. Il ne conviendrait vraiment que pour voir les corps des avatars d’autres personnes, et non le vôtre lorsque vous regardez vers le bas.

AGRoL suivi des jambes VR Meta Quest

Dans un nouvel article intitulé Avatars Grow Legs (AGRoL), d’autres chercheurs de Meta AI et le stagiaire Yuming Du ont présenté une nouvelle approche qui, selon eux, “permet d’atteindre des performances de pointe” avec des exigences de calcul inférieures à celles des approches d’IA précédentes. AGRoL est un modèle de diffusion, comme les récents systèmes de génération d’images d’IA tels que Stable Diffusion et DALL-E 2 d’OpenAI.

Contrairement à d’autres modèles de diffusion et à la plupart des documents de recherche sur l’IA, les chercheurs affirment qu’AGRoL “peut fonctionner en temps réel” sur un NVIDIA V100, à une vitesse d’environ 41 images par seconde. Bien qu’il s’agisse d’un GPU de 15 000 dollars, les algorithmes d’apprentissage automatique commencent souvent par nécessiter ce type de matériel, mais finissent par fonctionner sur des smartphones avec quelques années de progrès en matière d’optimisation. C’est le cas des modèles de reconnaissance et de synthèse vocales utilisés dans Google Assistant et Siri, par exemple.

Pourtant, rien n’indique qu’une estimation de la pose du corps de la qualité d’AGRoL arrivera bientôt dans les produits de Meta Quest.

Meta a annoncé que ses avatars auront des jambes cette année, mais cela sera probablement alimenté par un algorithme beaucoup moins avancé techniquement, et ne sera que pour les avatars d’autres personnes, pas les vôtres.

 

Standable le suivi des jambes en VR sans tracker c’est déjà possible

Standable est un projet réalisé par John Coumerilh, un développeur indépendant qui nous propose un émulateur virtuel de tracker pour Steam VR. Imaginez-vous dans VR chat avec un suivi corps entier sans aucun matériel autre que votre casque VR et vos manettes.

Standable FBE est une méthode d’estimation des points du corps qui ne sont pas actuellement suivis par la plupart des équipements XR, c’est-à-dire les jambes, le bassin, les coudes et les genoux.

 

Le suivi avec une app sur votre smartphone

Driver4VR suivi corps entier VR

Une nouvelle application utilise la caméra de votre smartphone pour suivre votre corps et peut envoyer les données à l’application autonome VRChat Quest.

Driver4VR est une solution pour le suivi des jambes en VR, sans aucun équipement à porter. Il suffit d’avoir un iPhone/iPad avec iOS 12.0 ou supérieur ou un téléphone ou une tablette Android avec Android 5.1 ou supérieur.

L’application peut utiliser la caméra frontale ou la caméra arrière. En général, la caméra avant a un champ de vision plus large, et le fait de pouvoir voir l’état du suivi permet de trouver plus facilement la bonne position pour votre téléphone. Essayez de le placer le plus loin possible de vous, face vers le bas, idéalement dans un support pour téléphone.

Vous connectez l’application à VRChat sur Quest via OSC en entrant simplement l’adresse IP de votre casque. Celle-ci se trouve dans les paramètres Wi-Fi du casque, en sélectionnant le réseau auquel il est connecté.

La qualité de suivi de Driver4VR n’est pas proche de ce que l’on peut attendre de trackers réels, et il y a une petite latence. Il ne fonctionne pas bien non plus si vous n’êtes pas face au téléphone. Mais pour de nombreux utilisateurs de VRChat cela ajoute un véritable plus à l’expérience.

L’application elle-même est gratuite sur l’App Store ou Google Play, , mais elle ne donne accès qu’au suivi des hanches. Pour obtenir également le suivi des pieds, vous devrez payer 17 $ (iOS) / 16 $ (Android) via un paiement in-app. Le développeur prévoit d’ajouter d’autres points de suivi à l’avenir.

 

Les prochains Vive tracker autonomes

HTC Vive tracker autonome suivi des jambes VR

Le coût total de trackers HTC et des stations de base nécessaires s’élève à plus de 600 euros. En plus, il faut un PC.

HTC a annoncé la sortie d’un Vive Tracker à suivi automatique dans le courant de l’année, mais le prix n’a pas encore été révélé.

J’ai dédié un article à ce projet.

 

Suivez les news VR sur votre réseau préféré

 

Meilleurs accessoires Quest 2023

Voici ma sélection des meilleurs accessoires pour améliorer et entretenir votre casque de réalité virtuelle en 2023. Les liens affiliés ci-dessous vous permettent d’obtenir des réductions sur les principales boutiques d’accessoires pour Meta Quest 2. Les produits que je vous indique sont ceux que j’ai personnellement testés et utilisés avec mon Meta Quest 2.

  1. Meilleur rapport qualité/prix sangle Elite Zyber confort avec batterie rechargeable pour Quest 2 à moins de 40 € avec le code promo 10 % “STYLISTME”.
  2. Ma sangle préférée haut de gamme BOBOVR : sangle confort avec batterie rechargeable amovible (69 €) associée à son interface faciale avec ventilateur à 50 €.
  3. Grips confort avec batterie rechargeable modèle Knight de chez Zyber (autour de 30 € avec le code promo 20 % “STYLISTME”).
  4. Meilleur rapport qualité/prix câble Zyber Link de 5 mètres en USB 3 (bleu à l’intérieur) à moins de 20 € avec le code promo 20 % “STYLISTME”.
  5. Utiliser votre Quest 2 dans le noir avec la mini lampe infrarouge KKCOBVR i2 à 37,55 € sur Amazon.
  6. Finies les lunettes avec les lentilles correctrices de chez Zyber (filtre lumière bleue) pour Quest 2 à moins de 50 € avec le code promo 20 % “STYLISTME
  7. La gamme d’accessoires Quest 2 de chez Kiwi Design (sangles, grip, interface, socle). Code de réduction de 5 % avec le code “STYLISTME”.
  8. Nettoyant des contacts pour dégripper les contrôleurs du Quest 2 chez WD 40 Specialist contact (moins de 10  €)
  9. Pâte de polissage PolyWatch pour supprimer les petites rayures présentes sur les lentilles du Quest, on trouve le tube à moins de 6 € sur Amazon.
  10. Un tapis rond épais en 80 cm de diamètre, pour avoir un repaire tactile réel sous vos pieds et éviter de tout casser à la maison.

Tutoriels Meta Quest

Casques VR accessoires 2023

Nouveaux casque VR 2023 :

Nouveaux accessoires VR 2023 :

Les meilleurs jeux Quest 2023

Abonnez-vous (gratuit & sans pub)

Indiquez simplement votre e-mail pour recevoir les nouveaux articles dès leur publication

Suivez-moi sur votre réseau préféré

Derniers articles :

Final Fury un Street Fighter like en VR sur Quest et PCVR

Final Fury, inspiré de Street Fighter, des combats VR intenses en 1v1, personnages variés, pour Meta Quest et PCVR.

Quest V60 la mise à jour avant noël pour booster le Meta Quest 3

Meta Quest V60 la mise à jour du logiciel interne ou OS spécialement prévue pour booster votre Meta Quest 3.

Varjo XR-4 : casque PCVR aux impressionnantes caractéristiques 

Le Varjo XR-4 est un casque VR haut de gamme avec résolution de niveau rétinien, grand champ de vision, et prix élevé.

Comment jouer aux jeux Steam VR avec un Quest 3, 2 ou Pro SANS FIL

Comment jouer aux jeux Steam VR avec votre Meta Quest 3, 2, Pro, Oculus ou Rift sans fil pour jeux PCVR ou PC.

Steam Link Quest jouer gratuitement sans fil à vos jeux PCVR sur Steam VR

Steam Link la solution la plus simple et gratuite pour jouer sans fil à vos jeux PCVR ou PC via Steam VR avec votre Meta Quest 2, 3 ou Pro.

Big Ballers VR les jeux de sport US en VR gratuits sur Quest

Big Ballers VR pour les fans des jeux de sports US en réalité virtuelle disponible gratuitement pour les Meta Quest.

TinyPlus MK2 ultra le gunstock tout terrainpour Meta Quest 3

TinyPlus MK2 Ultra le gunstock universel pour Meta Quest 3 de chez Horizon 3D à vous les combats VR en immersion totale (et précision).

Fluid Reality une nouvelle technologie de gants haptiques VR

Fluid Reality propose une nouvelle technologie pour abordable pour des gants à retour haptiques utilisables avec les casques de réalité virtuelle 

Meta Quest 3 Lite l’arme fatale pour le marché de la VR

Meta Quest 3 Lite tout savoir sur le casque de réalité virtuelle premier prix qui pourrait révolutionner le marché de la VR en 2024.

Créer des vidéos 3D VR à regarder avec un casque de réalité virtuelle

Créez des Vidéos 3D Spatiales avec un iPhone 15 Pro ou une app dédiée à regarder avec n’importe quel casque VR.

Black Friday 2023

Black Friday 2023 la meilleure semaine pour faire ses achats en ligne avant Noel   Black Friday 2023 sélections des meilleures offres tech Amazon Prime Day | Amazon Prime | Amazon Prime Étudiant Le Black Friday, introduit en France en 2010 par Jeff Bezos,...

Soldes VR 2023 spécial Black Friday : casques, jeux et accessoires

Soldes VR 2023 spécial Black Friday et réductions de novembre 2023 sur les casques VR, jeux et une sélection des meilleurs accessoires.

Terra Alia un RPG en VR pour apprendre les langues

Terra Alia le premier serious game en réalité virtuelle ambiance RPG fantastique pour apprendre 10 langues pour Meta Quest.

RockHardVR 20 jeux pornos WebXR jouables en VR

RockHardVR 20 jeux pornos WebXR jouables en réalité virtuelle sur Meta Quest, Pico ou casques PCVR sans installation ni PC.

Quest For Business le programme VR pour les entreprises

Quest For Business les solutions pour les entreprises qui souhaitent gérer une flotte de casques de réalité virtuelle Meta Quest.

Câble Link avec Quest 3 non détecté par votre PC : tuto et solution

Câble Link avec Quest 3 non détecté par votre PC :  différents paramètres logiciels et conseils matériels pour utiliser votre Quest en PCVR.

0 commentaires

Soumettre un commentaire

Votre adresse e-mail ne sera pas publiée. Les champs obligatoires sont indiqués avec *