Les apports de l’IA à la réalité virtuelle (casques et jeux)

par | 7 Juil 2023 | Actualités, AR VR PC, Bons plans, IA, Jeux & Appps VR, Jeux gratuits Quest, Jeux Meta Quest

IAVR l’ Intelligence artificielle associée à la réalité virtuelle un couple gagnant pour une immersion plus forte et plus sociale, la création ou la productivité.

 

L’IA et la réalité virtuelle le duo de choc pour une expérience plus immersive

Articles sur l’IA | Réalité virtuelle et Metaverse | Objets connectés

Vous le savez je suis passionné de réalité virtuelle à titre personnel et je vous partage ici toutes mes découvertes. Mais je travaille aussi depuis 10 ans en collaboration avec la société américaine OrNsoft sur l’utilisation de l’Intelligence Artificielle dans le business.

Aujourd’hui, je vous propose de mélanger IA et VR. Un duo de technologies particulièrement intéressant au travers quelques exemples d’applications ou de projets innovants.

 

L’IA au service de la localisation de votre corps réel en réalité virtuel

Les casques de réalité virtuelle ou augmentée actuels ne suivent que la position de la tête (le casque) et des mains (les manettes ou contrôleurs). La position des coudes et du torse peuvent être estimée à l’aide d’une classe d’algorithmes appelée cinématique inverse (IK). Mais cette méthode n’est parfois précise que pour les coudes et peut difficilement être utilisée pour ajouter des jambes. Il y a tout simplement trop de combinaisons pour chaque ensemble donné de positions de la tête et des mains. Compte tenu de ces limites, les jeux et applications en VR nous représentent soit avec de simple main, soit en homme tronc.

Il existe des solutions matérielles pour ajouter des capteurs ou filmer votre corps avec un smartphone pour localiser et représenter les jambes, mais cela nécessite l’ajout de matériel. Un smartphone qui vous filme ne fonctionne correctement que lorsque vous lui faites face. Les casques PC utilisant le suivi SteamVR permettent un suivi du corps de meilleure qualité grâce à des trackers supplémentaires portés sur soi, comme le Vive Tracker de HTC ou les Mocopi de Sony. Mais l’investissement financier et les contraintes d’installation rendent cette option peut accessible au plus grand nombre.

Alors la solution est peut être du côté logiciel et de l’intelligence artificielle. Ainsi, l’année dernière, trois chercheurs de chez Meta (Facebook) ont présenté QuestSim, un modèle d’apprentissage utilisant l’IA pour estimer une pose plausible du corps entier à partir des seules données de suivi de casque Meta Quest 2 et de ses 2 contrôleurs. Aucun tracker supplémentaire ou capteur externe n’est nécessaire. Le mouvement de l’avatar qui en résulte correspond assez fidèlement au mouvement réel de l’utilisateur. Cependant, QuestSim a échoué dans un cas précis : lorsque l’utilisateur interagit avec le monde réel, par exemple lorsqu’il s’assoit sur une chaise ou un canapé.

Dans un nouvel article intitulé QuestEnvSim, les trois mêmes chercheurs et deux autres personnes présentent un ensemble de modèles mis à jour, utilisant toujours la même approche d’apprentissage par renforcement (IA), qui prend en compte les meubles et autres objets de l’environnement. Cette évolution est particulièrement prometteuse pour permettre une représentation fidèle de notre corps réel en réalité virtuelle avec un avatar complet de la tête aux pieds.

 

Masterpiece X un créateur d’images 3D en VR utilisant l’IA

Masterpiece X l’outil gratuit pour créer des avatars ou éléments 3D en VR pour casques Meta Quest.

Masterpiece Studio, les développeurs à l’origine de la suite créative PC VR, a publié une nouvelle version de son logiciel conçue nativement pour Quest 2, ce qui, espèrent ses créateurs, séduira les personnes à la recherche d’un moyen simple de créer des modèles, des avatars et d’autres éléments 3D.

Un outil gratuit de création 3D pour Meta Quest

Masterpiece X avis

Baptisé Masterpiece X, l’outil de création gratuit est désormais disponible sur la plateforme Quest. Il offre la possibilité de remixer des modèles existants et de se les approprier grâce à un “ flux de travail plus ludique et plus fluide ” : le remixage 3D, qui est le processus de création d’un nouveau contenu en modifiant un ancien contenu ”, explique le fondateur du studio, Jonathan Gagne, dans un billet de blog Meta.

Les développeurs affirment que Masterpiece X espère cibler le marché des créateurs amateurs en proposant une application facile à utiliser qui abaisse les barrières historiques à l’entrée.

  • Repartir de zéro plutôt que de remixer,
  • un contrôle élaboré plutôt qu’une simplicité, ou
  • une version VR des outils de modélisation 3D existants.

Masterpiece X test

Polina Berseneva, conceptrice du studio Masterpiece explique : ” Traditionnellement, la création 3D est un sujet extrêmement complexe et technique. C’est pourquoi tant d’outils traditionnels sont si difficiles à utiliser pour les débutants, car il y a tant à apprendre. ”

Voici comment le studio décrit Masterpiece X :

  • Remixer n’importe quelle partie de votre modèle — du maillage à la texturation, au rigging et à l’animation
    trouvez des modèles gratuits dans la bibliothèque de la communauté (ou importez ou générez les vôtres — bientôt !)
  • Exporter votre modèle vers votre jeu, votre monde virtuel ou votre projet créatif, et
    le partager avec notre communauté pour inspirer et aider les autres !

Le studio précise que Masterpiece X ne s’adresse pas aux modélisateurs 3D expérimentés, aux animateurs ou aux créateurs à la recherche d’un outil pour créer des actifs à partir de zéro plutôt que de les remixer, car l’application met l’accent sur la facilité d’utilisation plutôt que sur la complexité.

Application gratuite pour Meta Quest

Jeux gratuits Quest

Masterpiece X est disponible gratuitement sur le store officiel Meta Quest.

 

L’avenir des technologies fusionnées de l’IA et de la réalité virtuelle

Alors que les technologies de l’IA et de la réalité virtuelle continuent de se développer et de devenir de plus en plus avancées, les possibilités de simulations d’entraînement deviennent de plus en plus illimitées. L’IA continuera d’être utilisée pour créer des agents virtuels auto-apprenants (chatbots) qui peuvent interagir avec les utilisateurs de manière plus naturelle et fournir des commentaires et des conseils au besoin. La réalité virtuelle continuera d’être utilisée pour créer des simulations immersives qui peuvent être utilisées pour représenter des scénarios du monde réel et aider les gens à pratiquer leurs compétences dans un environnement sûr.

La combinaison de l’IA et de la réalité virtuelle permettra aux simulations de devenir plus personnalisées. Ces mêmes agents virtuels qui peuvent analyser les données des utilisateurs et créer des simulations sur mesure pourront disséquer les besoins spécifiques d’un utilisateur et fournir une solution sur mesure adaptée à ses besoins. Ce type d’auto-apprentissage peut faire gagner du temps et de l’argent en automatisant de nombreux processus et en réduisant le besoin de personnel de soutien.

La combinaison de l’IA et de la technologie de réalité virtuelle a le potentiel de révolutionner la façon dont nous formons et éduquons les gens dans les compétences douces et autres domaines. Alors que les deux technologies continuent d’évoluer, nous pouvons nous attendre à voir de plus en plus de simulations qui pourront être utilisées pour former les gens dans une variété de sujets. L’IA et la réalité virtuelle ont déjà changé la façon dont nous interagissons avec la technologie et maintenant, elles changent la façon dont nous apprenons.

 

 

Suivez les news VR sur votre réseau préféré

 

TOP Accessoires Quest 3 2024

  1. Sangle KKCOBVR Q3 Pro avec batterie intégrée à 59,99 €, 10 000 mAh, mousse arrière et frontale, utilisation mode halo possible sans interface faciale, molette de réglage.
  2. Sangle BOBOVR M3 Pro à 65,99 €, l’ancienne référence pour Quest 3, dont le prix augmente pour ajouter une batterie B100 de 10 000 mAh à 50,99 €.
  3. Etui de transport Annapro design, résistant et étanche à 33,95 €
  4. Interface faciale AMVR à 35 $ avec deux mousses amovibles (cuir PU et soie de coton), ventilation intégrée et réglable en profondeur sur 3 positions.
  5. Câble Link Zyber de 5 mètres à 15,95 € pour transformer votre Quest 3 en casque PCVR
  6. Grips AMVR à 34 $ en direct noir pour utiliser vos contrôleurs Touch Plus sans risque et de manière plus confortable.
  7. Extensions manettes 25 € pour une immersion totale (Beat Saber, Gorilla Tag,FitXR, Synth Riders, Ragnarock, Blade and Sorcery…).
  8. Batterie externe 10 000 mAh tour de cou Zyber 67,95 € (utilisable avec tous les casques VR autonomes, smartphones tablettes), très agréable à porter, un must.Ou les excellentes batterie externe Charmast.
  9. Chargeur et piles pour les contrôleurs Panasonic Eneloop à 59 € (chargeur et 4 piles AA), parfait pour charger des piles AA et AAA.

 

Top accessoires Quest 2 2024

Voici ma sélection des meilleurs accessoires pour améliorer et entretenir votre casque de réalité virtuelle en 2023. Les liens affiliés ci-dessous vous permettent d’obtenir des réductions sur les principales boutiques d’accessoires pour Meta Quest 2. Les produits que je vous indique sont ceux que j’ai personnellement testés et utilisés avec mon Meta Quest 2.

  1. Meilleur rapport qualité/prix sangle Elite Zyber confort avec batterie rechargeable pour Quest 2 à moins de 40 € avec le code promo 10 % “STYLISTME”.
  2. Ma sangle préférée haut de gamme BOBOVR : sangle confort avec batterie rechargeable amovible (69 €) associée à son interface faciale avec ventilateur à 50 €.
  3. Grips confort avec batterie rechargeable modèle Knight de chez Zyber (autour de 30 € avec le code promo 20 % “STYLISTME”).
  4. Meilleur rapport qualité/prix câble Zyber Link de 5 mètres en USB 3 (bleu à l’intérieur) à moins de 20 € avec le code promo 20 % “STYLISTME”.
  5. Utiliser votre Quest 2 dans le noir avec la mini lampe infrarouge KKCOBVR i2 à 37,55 € sur Amazon.
  6. Finies les lunettes avec les lentilles correctrices de chez Zyber (filtre lumière bleue) pour Quest 2 à moins de 50 € avec le code promo 20 % “STYLISTME
  7. La gamme d’accessoires Quest 2 de chez Kiwi Design (sangles, grip, interface, socle). Code de réduction de 5 % avec le code “STYLISTME”.
  8. Nettoyant des contacts pour dégripper les contrôleurs du Quest 2 chez WD 40 Specialist contact (moins de 10  €)
  9. Pâte de polissage PolyWatch pour supprimer les petites rayures présentes sur les lentilles du Quest, on trouve le tube à moins de 6 € sur Amazon.
  10. Un tapis rond épais en 80 cm de diamètre, pour avoir un repaire tactile réel sous vos pieds et éviter de tout casser à la maison.

Tuto Quest

Meilleur casque VR 2024

Abonnez-vous (gratuit & sans pub)

Indiquez simplement votre e-mail pour recevoir les nouveaux articles dès leur publication

Suivez-moi sur votre réseau préféré

0 commentaires

Soumettre un commentaire

Votre adresse e-mail ne sera pas publiée. Les champs obligatoires sont indiqués avec *