Les apports de l’IA à la réalité virtuelle (casques et jeux)

par | 7 Juil 2023 | Actualités, AR VR XR, Bons plans, IA & Robotique, Jeux & App VR, Jeux Meta Quest, Jeux VR gratuits

IAVR l’ Intelligence artificielle associée à la réalité virtuelle un couple gagnant pour une immersion plus forte et plus sociale, la création ou la productivité.

 

L’IA et la réalité virtuelle le duo de choc pour une expérience plus immersive

Articles sur l’IA | Réalité virtuelle et Metaverse | Objets connectés

Vous le savez je suis passionné de réalité virtuelle à titre personnel et je vous partage ici toutes mes découvertes. Mais je travaille aussi depuis 10 ans en collaboration avec la société américaine OrNsoft sur l’utilisation de l’Intelligence Artificielle dans le business.

Aujourd’hui, je vous propose de mélanger IA et VR. Un duo de technologies particulièrement intéressant au travers quelques exemples d’applications ou de projets innovants.

 

L’IA au service de la localisation de votre corps réel en réalité virtuel

Les casques de réalité virtuelle ou augmentée actuels ne suivent que la position de la tête (le casque) et des mains (les manettes ou contrôleurs). La position des coudes et du torse peuvent être estimée à l’aide d’une classe d’algorithmes appelée cinématique inverse (IK). Mais cette méthode n’est parfois précise que pour les coudes et peut difficilement être utilisée pour ajouter des jambes. Il y a tout simplement trop de combinaisons pour chaque ensemble donné de positions de la tête et des mains. Compte tenu de ces limites, les jeux et applications en VR nous représentent soit avec de simple main, soit en homme tronc.

Il existe des solutions matérielles pour ajouter des capteurs ou filmer votre corps avec un smartphone pour localiser et représenter les jambes, mais cela nécessite l’ajout de matériel. Un smartphone qui vous filme ne fonctionne correctement que lorsque vous lui faites face. Les casques PC utilisant le suivi SteamVR permettent un suivi du corps de meilleure qualité grâce à des trackers supplémentaires portés sur soi, comme le Vive Tracker de HTC ou les Mocopi de Sony. Mais l’investissement financier et les contraintes d’installation rendent cette option peut accessible au plus grand nombre.

Alors la solution est peut être du côté logiciel et de l’intelligence artificielle. Ainsi, l’année dernière, trois chercheurs de chez Meta (Facebook) ont présenté QuestSim, un modèle d’apprentissage utilisant l’IA pour estimer une pose plausible du corps entier à partir des seules données de suivi de casque Meta Quest 2 et de ses 2 contrôleurs. Aucun tracker supplémentaire ou capteur externe n’est nécessaire. Le mouvement de l’avatar qui en résulte correspond assez fidèlement au mouvement réel de l’utilisateur. Cependant, QuestSim a échoué dans un cas précis : lorsque l’utilisateur interagit avec le monde réel, par exemple lorsqu’il s’assoit sur une chaise ou un canapé.

Dans un nouvel article intitulé QuestEnvSim, les trois mêmes chercheurs et deux autres personnes présentent un ensemble de modèles mis à jour, utilisant toujours la même approche d’apprentissage par renforcement (IA), qui prend en compte les meubles et autres objets de l’environnement. Cette évolution est particulièrement prometteuse pour permettre une représentation fidèle de notre corps réel en réalité virtuelle avec un avatar complet de la tête aux pieds.

 

Masterpiece X un créateur d’images 3D en VR utilisant l’IA

Masterpiece X l’outil gratuit pour créer des avatars ou éléments 3D en VR pour casques Meta Quest.

Masterpiece Studio, les développeurs à l’origine de la suite créative PC VR, a publié une nouvelle version de son logiciel conçue nativement pour Quest 2, ce qui, espèrent ses créateurs, séduira les personnes à la recherche d’un moyen simple de créer des modèles, des avatars et d’autres éléments 3D.

Un outil gratuit de création 3D pour Meta Quest

Masterpiece X avis

Baptisé Masterpiece X, l’outil de création gratuit est désormais disponible sur la plateforme Quest. Il offre la possibilité de remixer des modèles existants et de se les approprier grâce à un “ flux de travail plus ludique et plus fluide ” : le remixage 3D, qui est le processus de création d’un nouveau contenu en modifiant un ancien contenu ”, explique le fondateur du studio, Jonathan Gagne, dans un billet de blog Meta.

Les développeurs affirment que Masterpiece X espère cibler le marché des créateurs amateurs en proposant une application facile à utiliser qui abaisse les barrières historiques à l’entrée.

  • Repartir de zéro plutôt que de remixer,
  • un contrôle élaboré plutôt qu’une simplicité, ou
  • une version VR des outils de modélisation 3D existants.

Masterpiece X test

Polina Berseneva, conceptrice du studio Masterpiece explique :  » Traditionnellement, la création 3D est un sujet extrêmement complexe et technique. C’est pourquoi tant d’outils traditionnels sont si difficiles à utiliser pour les débutants, car il y a tant à apprendre. ”

Voici comment le studio décrit Masterpiece X :

  • Remixer n’importe quelle partie de votre modèle — du maillage à la texturation, au rigging et à l’animation
    trouvez des modèles gratuits dans la bibliothèque de la communauté (ou importez ou générez les vôtres — bientôt !)
  • Exporter votre modèle vers votre jeu, votre monde virtuel ou votre projet créatif, et
    le partager avec notre communauté pour inspirer et aider les autres !

Le studio précise que Masterpiece X ne s’adresse pas aux modélisateurs 3D expérimentés, aux animateurs ou aux créateurs à la recherche d’un outil pour créer des actifs à partir de zéro plutôt que de les remixer, car l’application met l’accent sur la facilité d’utilisation plutôt que sur la complexité.

Application gratuite pour Meta Quest

Jeux gratuits Quest

Masterpiece X est disponible gratuitement sur le store officiel Meta Quest.

 

L’avenir des technologies fusionnées de l’IA et de la réalité virtuelle

Alors que les technologies de l’IA et de la réalité virtuelle continuent de se développer et de devenir de plus en plus avancées, les possibilités de simulations d’entraînement deviennent de plus en plus illimitées. L’IA continuera d’être utilisée pour créer des agents virtuels auto-apprenants (chatbots) qui peuvent interagir avec les utilisateurs de manière plus naturelle et fournir des commentaires et des conseils au besoin. La réalité virtuelle continuera d’être utilisée pour créer des simulations immersives qui peuvent être utilisées pour représenter des scénarios du monde réel et aider les gens à pratiquer leurs compétences dans un environnement sûr.

La combinaison de l’IA et de la réalité virtuelle permettra aux simulations de devenir plus personnalisées. Ces mêmes agents virtuels qui peuvent analyser les données des utilisateurs et créer des simulations sur mesure pourront disséquer les besoins spécifiques d’un utilisateur et fournir une solution sur mesure adaptée à ses besoins. Ce type d’auto-apprentissage peut faire gagner du temps et de l’argent en automatisant de nombreux processus et en réduisant le besoin de personnel de soutien.

La combinaison de l’IA et de la technologie de réalité virtuelle a le potentiel de révolutionner la façon dont nous formons et éduquons les gens dans les compétences douces et autres domaines. Alors que les deux technologies continuent d’évoluer, nous pouvons nous attendre à voir de plus en plus de simulations qui pourront être utilisées pour former les gens dans une variété de sujets. L’IA et la réalité virtuelle ont déjà changé la façon dont nous interagissons avec la technologie et maintenant, elles changent la façon dont nous apprenons.

 

 

VRPORN 2026

Ojai Gunnar Optiks : masque récupération yeux après écrans

Ojai Vision Recovery System de GUNNAR combine chaleur, compression d’air et audio Bluetooth pour un rituel de récupération de 10 minutes après les écrans.

Channeling Her Inner Star Asteria Jade : simulation 3D interactive VR

Channeling Her Inner Star Asteria Jade propose une expérience interactive WebXR où vous prenez le contrôle des positions avec Asteria Jade.

Slay the Tire : roguelike deckbuilder sur deux roues

Slay the Tire est un roguelike deckbuilder où la route devient le donjon. Quatre outlaws, combats en cartes à pleine vitesse. Sorti le 12 novembre 2026 sur Steam, VR optionnelle.

Gas N Cars : sandbox chaotique de station-service en VR

Gas N Cars est un sandbox de station-service où vous servez ou détruisez. Sorti le 11 novembre 2026 sur Steam, support VR et version Quest.

Black Hole Simulator : simulation cosmique contemplative VR

Black Hole Simulator est une simulation VR et PC d’un trou noir en temps réel, avec lentille gravitationnelle et disques d’accrétion. Sorti le 10 novembre 2026 sur Steam.

Piratage Meta Ray-Ban : ce qu’il faut savoir en 2026

Piratage Meta Ray-Ban : recherche 2026, impacts réels, correctifs Meta et conseils concrets pour protéger vos lunettes connectées.

Hole Wall : puzzle physique en réalité mixte

Hole Wall est un puzzle physique en réalité mixte qui transforme votre pièce en défi grâce à des portails sur les murs et le sol. Novembre 2026 sur Meta Quest.

Disney+ Meta Quest : films 3D et environnements immersifs

Disney+ Meta Quest propose films 3D et environnements immersifs (Tatooine, Avengers Tower) sur Quest 3 et 3S depuis le 10 novembre 2026.

Crystal Commanders Reloaded : RTS VR MR Meta Quest

Crystal Commanders Reloaded refond le RTS VR/MR de DB Creations avec factions asymétriques, mode défense par vagues et lobbies sur Meta Quest.

Bad Grip Club : escalade physique coopérative sur Meta Quest

Bad Grip Club est un jeu d’escalade physique en réalité virtuelle. Grimpez à mains nues, aidez vos amis et atteignez le sommet sur Meta Quest.

AMVR GA2 : club de golf réel test et verdict en VR

AMVR GA2 peut-être le meilleur accessoire club de golf à retour de force conçu pour jouer aux simulateurs de golf sur Meta Quest 3 et 3S

Gentle Monster Intelligent Eyewear : lunettes fashion avec Gemini et Snapdragon AR1

Lunettes Android XR Gentle Monster : précommandes 12 novembre, lancement décembre 2026. Gemini, caméra 12 MP, Snapdragon AR1.

Earth Defense Force 6 Mod VR : jouer en réalité virtuelle

Earth Defense Force 6 Mod VR transforme le shooter d’insectes géants en expérience PCVR complète avec suivi 6DoF et co-op 8 joueurs.

Rokid Glasses 2 nouvelles lunettes HUD monochrome ?

Rokid Glasses 2 des Lunettes affichage monochrome, caméra 12 MP 4K, batterie 263 mAh boostées à l’IA. Prix, dispo et avis.

OVRPlayer : jouer aux exclusifs Meta Quest en PC VR natif

OVRPlayer est une app Windows en Open Beta qui exécute les jeux Quest nativement sur PC et les affiche via SteamVR. Pas de streaming. Profils pour Batman Arkham Shadow, Asgard’s Wrath 2 et plus.

The Returns Desk A Cozy Library : rangement cozy VR

The Returns Desk A Cozy Library est un jeu de rangement cozy en VR sorti le 2 novembre 2026 sur Steam. 864 livres à replacer à la main, sans timer ni pression.

Freeland : MMORPG VR gratuit multi-planètes

Freeland est un MMORPG VR gratuit en accès anticipé. Explorez des planètes, montez en niveau, combattez et construisez votre monde sur Meta Quest et Steam.

Snowball VR Capture the Star batailles de boules de neige

Snowball VR: Capture the Star est une aventure VR solo avec combat physique à boules de neige développée par Strange Euphoria XR.

Cardmada : jeu de cartes tactique bateau pirate en VR

Cardmada est un jeu de cartes tactique pirate gratuit de Animal Repair Shop. Commandez un navire, recrutez un équipage et combattez en interactions mains et regard.

Rokid Color lunettes affichage couleur et bague de commandes !

Rokid Color les nouvelles lunettes affichage couleur Micro-LED 55 g, associées à la bague Rokid Ring. Prix, dispo et avis.

ACCESSOIRES VR

CASQUES VR XR

JEUX VR DU MOIS

LUNETTES AR XR

OBJETS CONNECTES

ROBOTS HUMANOIDES & IA

ESPACE ADULTE CONNECTE

Retrouvez-nous sur vos réseaux sociaux

0 commentaires

Soumettre un commentaire

Votre adresse e-mail ne sera pas publiée. Les champs obligatoires sont indiqués avec *