Pincer les cordes d’une guitare dans une photo ou voir des Pokémon sautiller dans un parc en dérangeant les plantes : voici les possibilités spectaculaires qu’offrent les travaux d’un doctorant du MIT sur la réalité augmentée.

On dirait la photo banale d’un bonhomme en fil de fer. Mais, du bout de la souris, on peut lui tirer le bras, le tordre ou le secouer, comme dans une sorte de jeu vidéo ultra réaliste. Cette technique quasi magique s’appelle « vidéo dynamique interactive » (IDV). Elle est l’œuvre d’Abe Davis, doctorant au CSAIL, le laboratoire d’informatique et d’intelligence artificielle du Massachussets Institute of Technology (MIT).

Pour tout matériel, il suffit d’une caméra normale (voire d’un smartphone) posée sur un pied ou une surface stable. Celle-ci filme alors entre cinq secondes et une minute d’un objet fixe soumis à de légères vibrations, comme un buisson sous un courant d’air. Même une vidéo récupérée sur Internet peut suffire.

De la même manière qu’on en apprend sur les objets en les touchant, le logiciel en analyse les vibrations et déduit comment ils réagiraient si on les manipulait. Ce résultat nécessitait traditionnellement une onéreuse et parfois impossible modélisation 3D.

En milieu professionnel, l’IDV permettrait aux ingénieurs de tester virtuellement la résistance d’un vieux bâtiment à une tempête ou à un séisme, simplement en le filmant. Mais les applications les plus riches se trouvent du côté du divertissement.

Dans le cinéma, il est notoirement difficile de faire interagir un personnage en images de synthèse avec un environnement physique. Il faut souvent recréer des modèles virtuels de tout ce que le personnage de synthèse touche. L’IDV permettrait de sauter cette étape, réduisant drastiquement les coûts des effets spéciaux.

Enfin, pour les geeks dissipés que nous sommes, la technique améliorerait radicalement l’expérience de la réalité augmentée. Dans une version de Pokémon Go dotée de l’IDV, on pourrait voir Pikachu se faufiler entre des buissons de la vraie vie, ou même, qui sait, sauter au trampoline. Mais regardez plutôt la vidéo ci-dessus : elle parle d’elle-même.

Découvrez les bonus

+ rapide, + pratique, + exclusif

Zéro publicité, fonctions avancées de lecture, articles résumés par l'I.A, contenus exclusifs et plus encore.

Découvrez les nombreux avantages de Numerama+.

S'abonner à Numerama+

Vous avez lu 0 articles sur Numerama ce mois-ci

Il y a une bonne raison de ne pas s'abonner à

Tout le monde n'a pas les moyens de payer pour l'information.
C'est pourquoi nous maintenons notre journalisme ouvert à tous.

Mais si vous le pouvez,
voici trois bonnes raisons de soutenir notre travail :

  • 1 Numerama+ contribue à offrir une expérience gratuite à tous les lecteurs de Numerama.
  • 2 Vous profiterez d'une lecture sans publicité, de nombreuses fonctions avancées de lecture et des contenus exclusifs.
  • 3 Aider Numerama dans sa mission : comprendre le présent pour anticiper l'avenir.

Si vous croyez en un web gratuit et à une information de qualité accessible au plus grand nombre, rejoignez Numerama+.

S'abonner à Numerama+

Marre des réseaux sociaux ? Rejoignez-nous sur WhatsApp !