Les lunettes de Magic Leap entrent-elles enfin dans le monde réel ?

Comme beaucoup de personnes j’avais été très enthousiasmé par toutes les vidéos et les présentations de Magic Leap qui laissaient réellement augurer d’une évolution majeure dans la réalité augmentée.

Et puis les démonstrations réelles ont beaucoup trop tardé malgré des annonces de levées de fond valorisant la société à plus de deux milliards de dollars m’amenant à me demander si il y avait réellement un produit derrière les annonces.

Le concurrent annoncé des Hololens laissait donc Microsoft seul sur ce marché naissant avec un produit fini et commercialisé avec des démonstrations en temps réel ; même si les vidéos sont beaucoup plus alléchantes que l’expérience utilisateur (j’ai eu l’occasion de tester les Hololens et je n’ai pas été bluffé outre mesure mais il ne faut pas oublier que ce n’est que la première version et que les premiers produits de Microsoft sont très loin d’être aboutis).

Après la mise à disposition d’un kit de développement s’appuyant du Unity, on a eu droit à quelques streams sur Twitch (j’en ai d’ailleurs regardé un) mais au final difficile de savoir comment cela allait rendre pour les utilisateurs de lunettes ; au moins le hardware était visible lors de ces streams.

Enfin peu avant l’été il a été annoncé que les premiers kits seraient disponibles pendant l’été 2018 et le 8 Août la commercialisation a débuté aux Etats-Unis seulement pour un prix de 2295 dollars sachant qu’un technicien se déplace pour les installer et les configurer ; deux tailles sont disponibles mais il semble que l’on ne puisse pas utiliser de lunettes !

Il est clair que les Magic Leap manquent d’applications et ils étaient importants qu’ils puissent mettre rapidement à disposition des kits pour les développeurs.

Des journalistes américains ont eu la possibilité de tester les lunettes Magic Leap et leur avis est mitigé notamment à cause d’un angle de vision trop faible.

Plus d’informations : https://www.numerama.com/tech/405794-magic-leap-one-la-presse-us-deplore-le-champ-de-vision-trop-limite-et-le-manque-dimmersion.html

Et (en anglais) : https://www.cnbc.com/2018/08/08/magic-leap-one-creators-edition-first-look.html

CES 2017, la réalité virtuelle omniprésente

realite-virtuelle-ces-2017
La réalité virtuelle a été découverte par le grand public en 2016 ; au CES à Las Vegas, la prochaine étape se dessine déjà et si de nouveau casques sont annoncés (notamment des casques accompagnés par Microsoft), ce sont surtout les accessoires pour enrichir l’expérience de la réalité virtuelle qui commencent à émerger.
Si vous n’avez pas eu l’occasion de vivre une expérience en réalité augmentée alors je vous conseille fortement de vous y mettre rapidement, c’est la prochaine révolution vidéo-ludique … Le mieux est d’essayer de vrais casques, si possible avec des manettes tel que le Playstation VR ou bien le HTC Vive.
Ci-dessous une vidéo qui montre des accessoires qui vont bientôt pouvoir être ajoutés aux casques de réalité virtuelle.

VRScout résume très bien l’impression générale des visiteurs

Pour faire la promotion de son casque Gear VR (et des téléphones qui vont avec), Samsung n’hésite pas à installer de véritable attractions pour vous immerger un maximum dans un autre monde.

Il ne fait aucun doute que l’on est qu’au début de la réalité virtuelle et quand la première génération de matériel est aussi aboutie cela augure un bel avenir lorsque les usages se mettront en place et que les logiciels et jeux sauront tirer parti des capacités des casques ; d’autant plus que les premières versions sans fil commencent à pointer le bout de leur nez …
Beaucoup de liens sur la VR au CES 2017 : Upload VR

MSI VR One, un sac à dos ordinateur pour la VR

msi-vr-one-2
Il est vrai que si on utilise un casque de réalité virtuelle, les câbles peuvent se révéler assez problématiques c’est pourquoi les constructeurs de casques réfléchissent déjà à des solutions sans fils ou à des adaptateurs (un adaptateur pour HTC Vive a récemment été annoncé à 220 dollars).
Le MSI VR One propose carrément d’embarquer l’ordinateur et la connectique nécessaire au fonctionnement du casque HTC Vive avec notamment un port d’alimentation 12 V ; les logiciels de VR peuvent être lancés très facilement et une application sur smartphone permet même de modifier les réglages de l’ordinateur ce qui peut se révéler pratique si on ne souhaite pas le relier à un écran externe.
Il ne faut pas oublier que c’est un ordinateur puissant capable de faire tourner les jeux de la réalité virtuelle et que vous pouvez donc l’utiliser seul si vous avez un moniteur, un clavier et une souris de disponible.
L’autonomie annoncée est de 90 minutes à plein régime, ce qui vous laissera grandement le temps de jouer … Si vous avez absolument besoin d’utiliser un HTC Vive sans les fils alors cette solution peut vous convenir ; il me semble que des nouvelles salles d’arcade équipées de casques de réalité virtuelle utilisent déjà des systèmes similaires.
msi-vr-one-3
Plus d’information : MSI VR One
 

Thyssen Group va doter ses techniciens de lunettes Hololens

HoloLens_ThyssenGroup
Serait-ce le début du premier déploiement de grande envergure des lunettes Hololens dans le cadre d’une application professionnelle ? On est bien tenté de le penser si on en croit l’annonce conjointe de Microsoft et de Thyssen Group au One World Trade Center et qui explique que 24 000 techniciens vont utiliser des lunettes de réalité augmenté Hololens pour intervenir dans les ascenceurs.
En fait les techniciens d’intervention vont utiliser l’application Skype disponible avec les Hololens pour obtenir des informations à distance sur l’entretien à réaliser et les éventuelles réparations en cas de panne ; il semblerait que grâce à ces lunettes, les interventions appels aux centre de services soient 4 fois plus rapides … Je suis un peu perplexe sur les chiffres mais je pense qu’une intervention deux fois plus rapides peu à elle seule justifier l’utilisation des Hololens … Mais il faut peut-être aussi plus de techniciens de l’autre coté du fil Skype …
En plus au niveau de la sécurité cela permet de vérifier que le technicien n’est pas en danger et remplir des obligations légales vis à vis des travailleurs isolés.
Ce déploiement fait partie d’un projet plus ambitieux qui vise à raccorder l’ensemble des ascenceurs et capteurs de Thyssen Group au cloud Azure IoT afin de répondre au plus vite aux problèmes qui peuvent survenir.
Ci-dessous une vidéo (en anglais) expliquant l’application :

Découverte du casque HTC Vive grâce à la société Farsight

htc_vive
Travaillant dans le Startup Hôtel de la French Tech Rennes St-Malo (pour l’entreprise Mobizel), j’ai la chance d’être entouré d’entreprises innovantes dont la société Farsight.

 
La société Farsight
Cette jeune entreprise est spécialisée dans la création de contenus 3D mais surtout dans la réalité virtuelle et la réalité augmentée. Cela fait déjà quelques temps que je les vois utiliser des casques Oculus Rift ou HTC Vive et j’ai enfin réussi à trouver un moment pour les interviewer et essayer le casque HTC Vive.

Merci donc à Melchior d’Argentré (associé et Directeur Technique) et à Douglas Ouazzani (Associé et Directeur Artisique) d’avoir permis au Technomaniac que je suis de satisfaire sa curiosité de geek et d’avoir bien voulu répondre à quelques questions.

 

Première partie : l’interview des dirigeants de Farsight
Quels sont d’après-vous les usages professionnels de la réalité virtuelle ?

 

Dans de nombreux secteurs, techniques notamment, pour former des utilisateurs et les placer dans un environnement spécifique et facilitant l’apprentissage et le retour d’expérience. En utilisant la réalité augmenté, les entreprises ont ainsi la possibilité de faire acquérir des compétences sans immobiliser ou acquérir du matériel coûteux ; parmi les autres avantages, il y a aussi le gain de place par rapport à certaines machines volumineuses ainsi que la facilité de “scénariser” la formation.

 

Dans les domaines de la vente, de l’immobilier ou de la construction, l’utilisateur va être immergé dans un environnement à l’échelle 1 pour qu’il puisse mieux se rendre compte de ce qu’il est susceptible d’acquérir. Dans le secteur automobile, la réalité virtuelle a aussi un grand rôle à jouer ; en fait dans beaucoup de domaines, la réalité virtuelle peut être un formidable outil d’aide à la vente.

 

Entre l’Oculus Rift et le HTC Vive, quel casque vous semble le meilleur ?

 

Sans hésitation le HTC Vive car il permet de se déplacer dans son environnement grâce aux deux capteurs de position et aussi parce que les deux manettes fournies facilitent l’appropriation de la technologie et la visualisation des mains. De plus les nombreux utilisateurs ayant essayé le HTC Vive chez Farsight ont tous eu un retour 100 % positif ; l’utilisation prolongée du casque HTC Vive n’a pas entraîné de problème d’oreille interne chez les testeurs, la prise en main se révélant naturelle et intuitive sans nécessité de consigne particulière.

 

La configuration minimale indiquée par les constructeurs de casques de réalité virtuelle est-elle réellement suffisante ?

 

Avec la configuration minimale tout ce qui est proposé sur les stores VR est accessible, les temps de chargement sont plus ou moins longs mais il n’y a pas de lag ce qui contribue à la qualité de l’expérience.

 

L’installation du matériel est-elle facile ?

 

Oui, les installations ont été prévues pour le grand public, les câbles sont suffisamment longs pour utiliser les casques à une distance raisonnable de l’ordinateur.

 

Qu’utilisez-vous comme outil de développement pour créer des applications à destination des casques de réalité augmentée ?

 

Le développement se fait avec Unity (www.unity3d.com) avec des scripts en CSharp ; il y a une intégration directe à partir de l’Asset Store ; le développement et les tests sont alors réalisés comme avec un application Unity classique.

 

Existe-t-il des outils de simulation ?

 

Non il est très difficile de simuler l’utilisation d’un casque de réalité virtuelle aussi il faut recourir directement aux tests avec le matériel car il y a plus de complexité et il n’existe pas un consensus sur les interactions (comme on peut l’avoir avec les clics droit et gauche de la souris par exemple) ; les phases de tests sont donc obligatoirement plus longues et importantes car le nombre de possibilité à prendre en compte est plus élevé.

 

Pensez-vous que le multi-utilisateur local soit possible ?

 

Dans la même zone de capteurs du HTC Vive, cela paraît difficile car les utilisateurs risquent forcément de s’entrechoquer, la sécurité étant alors difficile à assurer mais par contre, rien n’empêche d’avoir deux zones de capteurs côte à côte dans une même pièce.

 

Pour vous l’année 2016 est-elle enfin réellement l’année de la VR ?

 

Oui sans hésitation avec la sortie de l’Oculus Rift, du HTC Vive et du Gear VR (qui était offert avec le Samsung S7), la VR décolle enfin. De plus un signe fort est que dans chaque festival de films, on trouve des animations liés à la VR, preuve de l’appropriation de cette nouvelle technologie dans de nombreux secteurs aussi bien dans le monde professionnel que grand public.

 

Avez-vous eu l’occasion de tester le Playstation VR ?

 

Non pas encore.

 

Que pensez-vous de la réalité augmentée avec notamment les Hololens de Microsoft ou au MagicLeap (dont on ne sait pas grand chose malgré les milliards de capital-risque levé) ?

 

La réalité augmentée est un pari audacieux qui nécessite une phase d’apprentissage et de découverte de l’environnement qui peut se révéler difficile ; les usages en entreprises sont encore à découvrir ; concernant le Magic Leap, on ne sait encore rien du matériel, les premières vidéos mises en ligne sont des montages, il faut faire attention à ce que cela ne suive pas le chemin des Google Glass pour lesquelles il y avait de fortes attentes mais non concrétisées ; Magic Leap est aussi porté par Google … Le projet Tango (https://get.google.com/tango/) semble plus prometteur en utilisant la réalité mixte ; les applications mobiles Ingress et Pokemon Go sont elles aussi très prometteuses et peuvent changer la façon dont on utilise nos smartphones.

 

Quelles améliorations seraient, selon vous, intéressantes pour le casque HTC Vive ?

 

D’abord une version sans fil ; en effet même si le fil qui relie le casque à l’ordinateur est long, il arrive malheureusement que l’on se prenne les pieds dedans … Il faudrait aussi que la zone gérée par les capteurs de position soit plus grande (que les capteurs puissent être plus éloignés) ; la possibilité de faire du “roaming” de capteurs serait aussi très enrichissante et permettrait de gérer de très grandes zones ; enfin des gants tactiles permettant de saisir précisément les détails, les positions et l’orientation des doigts serait un plus indéniable.

 

Quels sont à votre avis les meilleurs logiciels pour le HTC Vive ?

 

 

Seconde partie : test du casque de réalité virtuelle HTC Vive

 

Il est maintenant temps de passer à la découverte du HTC Vive notamment au travers des logiciels Tilt Brush et The Lab (gratuits tous les deux).

 

Test du HTC Vive

 

Prise en main du casque HTC Vive

 

J’enfile donc avec impatience le casque de réalité virtuelle HTC Vive, je suis d’abord impressionné par les manettes du HTC Vive elles sont plus imposantes que ce que je ne pensais mais elles restent néanmoins légères et agréables (j’ai l’habitude des contrôleurs PS Move qui sont plus petits …).
Je me rends alors compte que le HTC Vive indique la zone dans laquelle je peux me déplacer et si des éléments ou des personnes se trouvent dans ma zone d’utilisation du Vive, c’est plutôt rassurant et c’est suffisamment léger pour ne pas nous perturber. Le casque en lui même s’ajuste facilement, il est léger, ne pèse par sur la tête et nous isole réellement de l’extérieur en ne laissant filtrer aucune lumière.

 

Tilt Brush

New Sketch_06

La démonstration commence avec le logiciel de dessin en 3D Tilt Brush ; j’avais visionné les vidéos de promotion de l’application il y a peu de temps et cela m’avait vraiment donné envie … Avec ce logiciel ludique, les manettes Vive servent d’outils de création, une manette contient les outils (palette de couleurs, type de pinceaux, supports, effets spéciaux …) que l’on fait défiler avec la partie tactile de la manette gauche ; je n’ai pas trouvé cela très intuitif, j’ai tout d’abord commencé par tourner ma main pour faire apparaître un des quatre cotés disponibles qui correspond aux outils et paramètres ; l’utilisation de la main droite est elle beaucoup plus intuitive, il suffit d’appuyer sur la gâchette tout en déplaçant la manette dans l’espace pour commencer à créer avec la configuration choisie … Il n’y a pas à dire cela fait son effet surtout que l’on peut tourner autour de sa création et faire des modifications dans l’espace, c’est réellement bluffant et à la hauteur de ce que l’on voit dans les vidéos ; bien sûr il faut un certain temps d’apprentissage pour réussir à créer un élément consistant en 3D mais on se prend réellement pour le Leonard de Vinci de la réalité virtuelle ; il est d’ailleurs possible de faire des captures d’écran de ses créations.

Ci-dessous ma première réalisation sous Tilt Brush :
New Sketch_04

Peut-être que dans un futur proche, il suffira d’appuyer sur un gâchette d’une manette pour imprimer en 3D les objets modélisés avec ce genre d’outil (à condition qu’il n’y ait pas de trou et que le modèle soit viable bien sûr …) ; en ce qui me concerne j’ai essayé un peu tous les outils possibles en mixant les couleurs et j’ai adoré l’effet des étoiles et l’immersion dans sa création. C’est très ludique et j’espère qu’une application équivalente sera disponible pour le Playstation VR à sa sortie !!

 

The Lab
The_Lab_VR

 

Cette application disponible elle aussi gratuitement sur le store Steam VR est destinée à montrer des usages de la réalité virtuelle avec le HTC Vive ; dans cette application la première chose à maîtriser est la téléportation ; en effet il faut se déplacer dans un espace virtuel bien plus grand que celui autorisé par les capteurs associés au casque. Pour cela il suffit de faire ce que les initiés (dont je fais maintenant partie) appellent le “Point and Click” : avec la manette on indique une direction, une trajectoire de “téléportation virtuelle” s’affiche alors et il suffit de cliquer pour se rendre au point final de la trajectoire indiquée … Lorsque cela est maitrisé, on peut alors se déplacer virtuellement vers les différents ateliers du Lab ; je connaissais cette application pour son atelier-jeu de tir à l’arc et c’est donc par cela que nous avons commencé ; la prise en main est intuitive et l’effet de rendu dans les manettes de tension de l’arc est très bien réalisé, cela m’a donné envie de ressortir mon arc du placard !!! J’ai eu un peu de mal au début à ajuster le tir et toucher la première cible pour commencer le jeu mais ce n’était qu’une question de ma propre adaptation et ensuite je me suis pris au jeu : je regardais à droite et à gauche, je me penchais le long des remparts pour atteindre les ennemis qui longeait les murs pour se soustraire à mon regard ; je tirais sur tout ce qui bougeait pour défendre avec honneur la porte de mon château ! Bref j’aurais pu y jouer pendant des heures mais je ne voulais pas abuser du précieux temps de mes hôtes.

 

Ensuite toujours dans le lab, j’ai parcouru d’autres activités, comme celle de jouer avec le chien … Certaines parties de l’application nécessite de prendre une sphère et de la passer sur sa tête comme un casque pour entrer dans le monde virtuel de l’activité ; si je peux comprendre la symbolique recherchée, ce n’est pas très intuitif au premier abord …

 

Ainsi s’est achevée ma découverte du casque HTC Vive, j’ai vraiment été conquis et convaincu ; c’est réellement très immersif et porteur de très belles promesses !!! Comme me l’a fait remarquer un collègue, les menus sont parfois pixellisés ce qui est dommage mais pour une première version je trouve cela très abouti. Melchior d’Argentré m’a ensuite montré d’autres possibilités du Lab notamment les interactions avec l’environnement (drone, chien, caisses …) ainsi que Job simulator ; concernant cette dernière application, j’ai trouvé l’idée de base intéressante mais vu de l’extérieur cela ne paraissait pas aussi formateur qu’espéré …

 

Je remercie les dirigeants de Farsight pour leurs réponses sincères et le temps qu’ils m’ont accordé pour que je puisse utiliser le casque HTC Vive.

Plus d’informations : www.farsight.bzh
 

Google met à disposition une application de dessin en réalité virtuelle

tiltbrush
En cette année 2016, année de lancement pour le grand public de la réalité augmentée, Google a mis à disposition des possesseurs de casque HTC Vive une application de dessin en 3D assez impressionnante (si on en croit les vidéos du site) ; cette application s’appelle Tilt Brush.
Il faut certainement s’exercer assez longtemps pour être en mesure de reproduire des dessins de qualité équivalentes à celles que l’on voit dans les vidéos mais je pense que c’est une application qui a du sens, qui est à la fois ludique et utile et qui peut être une des “killer” applications dont la réalité virtuelle a besoin pour se développer et séduire le grand public.
J’aime beaucoup l’idée d’avoir une palette virtuelle dans une main et le pinceau dans l’autre, comme les véritables peintres devant leur tableau ; les outils disponibles sont virtuels mais avec le casque cela semble très réel …
J’espère que ce type d’application sera disponible pour les autres casques et notamment pour le Playstation VR que j’attends avec impatience …
Ci-dessous la vidéo de démonstration :

Plus d’informations :www.tiltbrush.com

Microsoft Hololens, pour bien débuter

HoloLens-Réalite-Augmentée
Les lunettes holographiques Hololens commencent à être livrées aux Etats-Unis et au Canada. Pour celles et ceux qui n’ont pas eu la chance (et/ou les moyens) de commander un kit Hololens à 3000 dollars, vous pouvez tout de même vous initier à la programmation holographique à partir de plusieurs sources sur Internet.
Vangos Pterneas a écrit un très bon article simple et complet pour débuter la création d’application avec les outils logiciels nécessaires. Vous y apprendrez notamment la configuration minimale pour développer ainsi que les réglages à effectuer (manifestement il faut au moins une version de Windows 10 Pro pour gérer l’Hyper-V).
Les deux principaux logiciels indispensables sont :

  • Visual Studio 2015 Update 2 (je pense que la version Community gratuite est suffisante)
  • Unity3D (la version gratuite peut de réaliser les éléments nécessaires)

En suivant ces instructions (et celles de Microsoft) vous pourrez créer des éléments holographiques visualisables sur l’émulateur des lunettes Hololens.
Pour placer des éléments 3D virtuels sur votre environnement (ce qui fait le gros point fort de la réalité augmentée proposée par les lunettes Hololens), je pense qu’il vous faudra acquérir le kit de développement, c’est en effet beaucoup plus difficile à simuler.
Plus d’informations :

Avec Hololens, la réalité augmentée entre dans une nouvelle dimension

HoloLens-Réalite-Augmentée
L’année 2016 va irrémédiablement nous faire entrer dans une nouvelle dimension, celle de la réalité augmentée que Google aura essayé de conquérir avec les Google Glass … Mais avec l’arrivée des Hololens, les utilisateurs vont avoir l’occasion de découvrir de nouvelles capacités et de nouvelles interactions ; je suis convaincu que ce genre d’appareil est susceptible de changer notre quotidien et la façon dont nous communiquons dans les 5 prochaines années …
Et ce futur s’accélère avec l’ouverture aujourd’hui 29 Février 2016 des précommandes des versions développeur 1.0 qui seront disponibles à partir du 30 Mars 2016 notamment pour l’événement BUILD de Microsoft qui est destiné aux développeurs (c’est l’équivalent de la Google IO de Google ou de la WWDC d’Apple).
Il ne fait aucun doute que les Hololens seront au centre de la BUILD 2016 et que de nombreux développeurs pourront essayer les nouvelles lunettes holographiques voire s’initier à la création d’applications … L’une des grandes nouveautés des Hololens réside dans la perception de l’environnement existant et qui peut servir pour les créations (Minecraft sur la table basse du salon, jeu dans lesquels les ennemis créent des trous virtuels dans les murs …). Il est fortement recommandé d’avoir des connaissances 3D pour programmer les lunettes (Unity 3D supporte les lunettes qui fonctionnent sous Windows 10).
Un émulateur sera disponible pour tester les applications sans avoir besoin d’utiliser les Hololens (forcément très pratique dans une équipe de plusieurs personnes) ; voir : https://dev.windows.com/fr-FR/holographic/academy  ; d’autres vidéos seront prochainement mises en ligne pour faciliter et expliquer le développement …
Les idées d’applications, notamment professionnelles, ne manquent pas et les vidéos mises en ligne par Microsoft ne font que nous mettre l’eau à la bouche en attendant de pouvoir participer à l’expérience … D’ailleurs les premiers retours d’expériences sont plutôt bons, le seul point noir (et qui contraste avec les vidéos) vient de l’angle de vision des lunettes qui semble trop petit pour permettre une immersion idéale.
Vivement la fin du mois de Mars que l’on en sache plus sur ce produit qui changera notre quotidien …
Vous pouvez retrouver les caractéristiques techniques des lunettes Hololens à l’adresse :http://windowsgeneration.fr/actus/microsoft-devoile-les-specifications-de-la-version-commercialisee-dhololens/
Ci-dessous une vidéo de présentation des lunettes de réalité augmentée Hololens :

Microsoft MobileFusion, un scanner 3D dans votre mobile

mobile-fusion_550.png-550x0
Les laboratoires de Microsoft sont très actifs dans le domaine de la 3D et pas seulement pour le casque de réalité augmentée Hololens qu’il me tarde d’essayer et de programmer ; en effet, Microsoft Research vient de brièvement communiquer concernant une application mobile (pour iOS notamment) qui permet de scanner des objets en 3D et cela sans aucun matériel supplémentaire …
L’objet ou la personne à scanner doit être placé dans le cube virtuel affiché sur l’écran du téléphone mobile et filmé à 360° pour que le modèle soit créée de la manière la plus fiable ; le rendu est quasiment en temps réel sur 3 portions d’écrans permettant de se rendre compte comment l’environnement et l’objet sont interprétés.
D’après Microsoft Research, il est possible d’imprimer ensuite le scan 3D mais il n’est pas indiqué quels sont les formats supportés ni si il est possible de supprimer les parties superflues qui ont été scannées (dans la vidéo on voit que le sol ou le suport est souvent intégré au modèle) ; il faudrait ainsi pouvoir retoucher le résultat avant de lancer une (longue) impression 3D.
En tout cas pour des objets simples cela peut être amusants ou bien pour se créer son avatar en 3D …
Ci-dessous la vidéo de présentation :

Plus d’informations : Microsoft Research