Les lunettes de Magic Leap entrent-elles enfin dans le monde réel ?

Comme beaucoup de personnes j’avais été très enthousiasmé par toutes les vidéos et les présentations de Magic Leap qui laissaient réellement augurer d’une évolution majeure dans la réalité augmentée.

Et puis les démonstrations réelles ont beaucoup trop tardé malgré des annonces de levées de fond valorisant la société à plus de deux milliards de dollars m’amenant à me demander si il y avait réellement un produit derrière les annonces.

Le concurrent annoncé des Hololens laissait donc Microsoft seul sur ce marché naissant avec un produit fini et commercialisé avec des démonstrations en temps réel ; même si les vidéos sont beaucoup plus alléchantes que l’expérience utilisateur (j’ai eu l’occasion de tester les Hololens et je n’ai pas été bluffé outre mesure mais il ne faut pas oublier que ce n’est que la première version et que les premiers produits de Microsoft sont très loin d’être aboutis).

Après la mise à disposition d’un kit de développement s’appuyant du Unity, on a eu droit à quelques streams sur Twitch (j’en ai d’ailleurs regardé un) mais au final difficile de savoir comment cela allait rendre pour les utilisateurs de lunettes ; au moins le hardware était visible lors de ces streams.

Enfin peu avant l’été il a été annoncé que les premiers kits seraient disponibles pendant l’été 2018 et le 8 Août la commercialisation a débuté aux Etats-Unis seulement pour un prix de 2295 dollars sachant qu’un technicien se déplace pour les installer et les configurer ; deux tailles sont disponibles mais il semble que l’on ne puisse pas utiliser de lunettes !

Il est clair que les Magic Leap manquent d’applications et ils étaient importants qu’ils puissent mettre rapidement à disposition des kits pour les développeurs.

Des journalistes américains ont eu la possibilité de tester les lunettes Magic Leap et leur avis est mitigé notamment à cause d’un angle de vision trop faible.

Plus d’informations : https://www.numerama.com/tech/405794-magic-leap-one-la-presse-us-deplore-le-champ-de-vision-trop-limite-et-le-manque-dimmersion.html

Et (en anglais) : https://www.cnbc.com/2018/08/08/magic-leap-one-creators-edition-first-look.html

Microsoft étend sa gamme Surface

https://youtu.be/jurc3SxztGw
Microsoft vient de tenir une conférence pour exposer ses nouveaux produits de la gamme Surface et parler des évolutions de Windows 10, de la réalité virtuelle et de la réalité mixte.
La gamme s’étend avec un ordinateur de bureau tout en un nommé Surface Studio qui peut s’incliner presque totalement (contre certains ordinateurs Lenovo) et avec lequel on peut utiliser un accessoire innovant (Surface Dial) principalement destiné aux artistes ou aux créatifs qui permet d’accéder à des palettes de couleurs ou des raccourcis très rapidement …
Le prix est à la hauteur des caractéristiques : la version initiale est à 2999 $ …
Plus d’informationssur l’ensemble des annonces lors de cette conférence  : https://blogs.windows.com/windowsexperience/2016/10/26/ten-things-we-announced-today-at-microsofts-windows-10-event/

Les lunettes Hololens sont disponibles dans 6 nouveaux pays dont la France

hololens
Il est temps de s’habituer à lever le doigt en l’air pour sélectionner virtuellement des éléments ajoutés dans la réalité virtuelle par les lunettes Microsoft Hololens.
En effet si vous souhaitez absolument acheter les Hololens, c’est maintenant possible pour un minimum de 3000 dollars.
Personnellement j’attends de pouvoir les tester …
Plus d’informations : https://blogs.windows.com/devices/?p=258014?ocid=newsletter_ema_omc_hol_october_nonowners_MarketExpansion#0dSeEecgmiO0RkEl.97

Thyssen Group va doter ses techniciens de lunettes Hololens

HoloLens_ThyssenGroup
Serait-ce le début du premier déploiement de grande envergure des lunettes Hololens dans le cadre d’une application professionnelle ? On est bien tenté de le penser si on en croit l’annonce conjointe de Microsoft et de Thyssen Group au One World Trade Center et qui explique que 24 000 techniciens vont utiliser des lunettes de réalité augmenté Hololens pour intervenir dans les ascenceurs.
En fait les techniciens d’intervention vont utiliser l’application Skype disponible avec les Hololens pour obtenir des informations à distance sur l’entretien à réaliser et les éventuelles réparations en cas de panne ; il semblerait que grâce à ces lunettes, les interventions appels aux centre de services soient 4 fois plus rapides … Je suis un peu perplexe sur les chiffres mais je pense qu’une intervention deux fois plus rapides peu à elle seule justifier l’utilisation des Hololens … Mais il faut peut-être aussi plus de techniciens de l’autre coté du fil Skype …
En plus au niveau de la sécurité cela permet de vérifier que le technicien n’est pas en danger et remplir des obligations légales vis à vis des travailleurs isolés.
Ce déploiement fait partie d’un projet plus ambitieux qui vise à raccorder l’ensemble des ascenceurs et capteurs de Thyssen Group au cloud Azure IoT afin de répondre au plus vite aux problèmes qui peuvent survenir.
Ci-dessous une vidéo (en anglais) expliquant l’application :

Une application de réalité augmentée pour Moët Hennessy réalisée par la société Synergiz

Pendant l’été 2016  la société Synergiz a commencé à exploiter le fort potentiel des deux paires de lunettes de réalité augmentée Hololens qu’elle a acquise récemment.
L’application qui a été réalisée par la société malouine pour le compte de Moët Hennessy renferme de nombreuses innovations et nous fait entrevoir le futur des démonstrations de produits en show-room ou peut-être dans quelques années dans des magasins physiques.
Les lunettes Hololens sont capables de détecter l’environnement existant et de s’y adapter c’est pourquoi quelque soit la position de l’utilisateur, il pourra faire apparaître les produits à découvrir sur une stèle physique, c’est de la réalité augmentée (ou réalité mixte) ; le choix des modèles s’opère à partir d’un menu virtuel que l’on sélectionne avec ses doigts.
C’est une belle première application qui ouvre la voie à de nombreuses autres …
Il est maintenant possible de commander les lunettes sur le site www.hololens.com pour la modique somme de 3000 $ …
Ci-dessous une vidéo du dispositif :

Plus d’informations : http://www.synergiz.com/hololens/MH2/

Actiongram, du contenu à disposition des Hololens

De la même façon que l’on trouve des images ou des vidéos pour illustrer ses créations, Microsoft a souhaité mettre à disposition des développeurs d’application pour les lunettes holographiques Hololens, des modèles 3D prédéfinis.
Ainsi à partir d’un menu activable avec ses doigts, on accède rapidement à l’ensemble des modèles disponibles et on peut les ajouter dans son application ou son environnement.
Pour symboliser le bond dans le futur que nous font faire les Hololens, Microsoft a même modélisé George Takei (des films Star Trek) et l’a fait interagir avec des applications pour les lunettes Hololens … Bienvenue dans le futur (mais que je n’ai toujours pas essayé).
Ci-dessous une vidéo de présentation d’Actiongram :

Plus d’informations : www.hololens.com

Découverte du casque HTC Vive grâce à la société Farsight

htc_vive
Travaillant dans le Startup Hôtel de la French Tech Rennes St-Malo (pour l’entreprise Mobizel), j’ai la chance d’être entouré d’entreprises innovantes dont la société Farsight.

 
La société Farsight
Cette jeune entreprise est spécialisée dans la création de contenus 3D mais surtout dans la réalité virtuelle et la réalité augmentée. Cela fait déjà quelques temps que je les vois utiliser des casques Oculus Rift ou HTC Vive et j’ai enfin réussi à trouver un moment pour les interviewer et essayer le casque HTC Vive.

Merci donc à Melchior d’Argentré (associé et Directeur Technique) et à Douglas Ouazzani (Associé et Directeur Artisique) d’avoir permis au Technomaniac que je suis de satisfaire sa curiosité de geek et d’avoir bien voulu répondre à quelques questions.

 

Première partie : l’interview des dirigeants de Farsight
Quels sont d’après-vous les usages professionnels de la réalité virtuelle ?

 

Dans de nombreux secteurs, techniques notamment, pour former des utilisateurs et les placer dans un environnement spécifique et facilitant l’apprentissage et le retour d’expérience. En utilisant la réalité augmenté, les entreprises ont ainsi la possibilité de faire acquérir des compétences sans immobiliser ou acquérir du matériel coûteux ; parmi les autres avantages, il y a aussi le gain de place par rapport à certaines machines volumineuses ainsi que la facilité de “scénariser” la formation.

 

Dans les domaines de la vente, de l’immobilier ou de la construction, l’utilisateur va être immergé dans un environnement à l’échelle 1 pour qu’il puisse mieux se rendre compte de ce qu’il est susceptible d’acquérir. Dans le secteur automobile, la réalité virtuelle a aussi un grand rôle à jouer ; en fait dans beaucoup de domaines, la réalité virtuelle peut être un formidable outil d’aide à la vente.

 

Entre l’Oculus Rift et le HTC Vive, quel casque vous semble le meilleur ?

 

Sans hésitation le HTC Vive car il permet de se déplacer dans son environnement grâce aux deux capteurs de position et aussi parce que les deux manettes fournies facilitent l’appropriation de la technologie et la visualisation des mains. De plus les nombreux utilisateurs ayant essayé le HTC Vive chez Farsight ont tous eu un retour 100 % positif ; l’utilisation prolongée du casque HTC Vive n’a pas entraîné de problème d’oreille interne chez les testeurs, la prise en main se révélant naturelle et intuitive sans nécessité de consigne particulière.

 

La configuration minimale indiquée par les constructeurs de casques de réalité virtuelle est-elle réellement suffisante ?

 

Avec la configuration minimale tout ce qui est proposé sur les stores VR est accessible, les temps de chargement sont plus ou moins longs mais il n’y a pas de lag ce qui contribue à la qualité de l’expérience.

 

L’installation du matériel est-elle facile ?

 

Oui, les installations ont été prévues pour le grand public, les câbles sont suffisamment longs pour utiliser les casques à une distance raisonnable de l’ordinateur.

 

Qu’utilisez-vous comme outil de développement pour créer des applications à destination des casques de réalité augmentée ?

 

Le développement se fait avec Unity (www.unity3d.com) avec des scripts en CSharp ; il y a une intégration directe à partir de l’Asset Store ; le développement et les tests sont alors réalisés comme avec un application Unity classique.

 

Existe-t-il des outils de simulation ?

 

Non il est très difficile de simuler l’utilisation d’un casque de réalité virtuelle aussi il faut recourir directement aux tests avec le matériel car il y a plus de complexité et il n’existe pas un consensus sur les interactions (comme on peut l’avoir avec les clics droit et gauche de la souris par exemple) ; les phases de tests sont donc obligatoirement plus longues et importantes car le nombre de possibilité à prendre en compte est plus élevé.

 

Pensez-vous que le multi-utilisateur local soit possible ?

 

Dans la même zone de capteurs du HTC Vive, cela paraît difficile car les utilisateurs risquent forcément de s’entrechoquer, la sécurité étant alors difficile à assurer mais par contre, rien n’empêche d’avoir deux zones de capteurs côte à côte dans une même pièce.

 

Pour vous l’année 2016 est-elle enfin réellement l’année de la VR ?

 

Oui sans hésitation avec la sortie de l’Oculus Rift, du HTC Vive et du Gear VR (qui était offert avec le Samsung S7), la VR décolle enfin. De plus un signe fort est que dans chaque festival de films, on trouve des animations liés à la VR, preuve de l’appropriation de cette nouvelle technologie dans de nombreux secteurs aussi bien dans le monde professionnel que grand public.

 

Avez-vous eu l’occasion de tester le Playstation VR ?

 

Non pas encore.

 

Que pensez-vous de la réalité augmentée avec notamment les Hololens de Microsoft ou au MagicLeap (dont on ne sait pas grand chose malgré les milliards de capital-risque levé) ?

 

La réalité augmentée est un pari audacieux qui nécessite une phase d’apprentissage et de découverte de l’environnement qui peut se révéler difficile ; les usages en entreprises sont encore à découvrir ; concernant le Magic Leap, on ne sait encore rien du matériel, les premières vidéos mises en ligne sont des montages, il faut faire attention à ce que cela ne suive pas le chemin des Google Glass pour lesquelles il y avait de fortes attentes mais non concrétisées ; Magic Leap est aussi porté par Google … Le projet Tango (https://get.google.com/tango/) semble plus prometteur en utilisant la réalité mixte ; les applications mobiles Ingress et Pokemon Go sont elles aussi très prometteuses et peuvent changer la façon dont on utilise nos smartphones.

 

Quelles améliorations seraient, selon vous, intéressantes pour le casque HTC Vive ?

 

D’abord une version sans fil ; en effet même si le fil qui relie le casque à l’ordinateur est long, il arrive malheureusement que l’on se prenne les pieds dedans … Il faudrait aussi que la zone gérée par les capteurs de position soit plus grande (que les capteurs puissent être plus éloignés) ; la possibilité de faire du “roaming” de capteurs serait aussi très enrichissante et permettrait de gérer de très grandes zones ; enfin des gants tactiles permettant de saisir précisément les détails, les positions et l’orientation des doigts serait un plus indéniable.

 

Quels sont à votre avis les meilleurs logiciels pour le HTC Vive ?

 

 

Seconde partie : test du casque de réalité virtuelle HTC Vive

 

Il est maintenant temps de passer à la découverte du HTC Vive notamment au travers des logiciels Tilt Brush et The Lab (gratuits tous les deux).

 

Test du HTC Vive

 

Prise en main du casque HTC Vive

 

J’enfile donc avec impatience le casque de réalité virtuelle HTC Vive, je suis d’abord impressionné par les manettes du HTC Vive elles sont plus imposantes que ce que je ne pensais mais elles restent néanmoins légères et agréables (j’ai l’habitude des contrôleurs PS Move qui sont plus petits …).
Je me rends alors compte que le HTC Vive indique la zone dans laquelle je peux me déplacer et si des éléments ou des personnes se trouvent dans ma zone d’utilisation du Vive, c’est plutôt rassurant et c’est suffisamment léger pour ne pas nous perturber. Le casque en lui même s’ajuste facilement, il est léger, ne pèse par sur la tête et nous isole réellement de l’extérieur en ne laissant filtrer aucune lumière.

 

Tilt Brush

New Sketch_06

La démonstration commence avec le logiciel de dessin en 3D Tilt Brush ; j’avais visionné les vidéos de promotion de l’application il y a peu de temps et cela m’avait vraiment donné envie … Avec ce logiciel ludique, les manettes Vive servent d’outils de création, une manette contient les outils (palette de couleurs, type de pinceaux, supports, effets spéciaux …) que l’on fait défiler avec la partie tactile de la manette gauche ; je n’ai pas trouvé cela très intuitif, j’ai tout d’abord commencé par tourner ma main pour faire apparaître un des quatre cotés disponibles qui correspond aux outils et paramètres ; l’utilisation de la main droite est elle beaucoup plus intuitive, il suffit d’appuyer sur la gâchette tout en déplaçant la manette dans l’espace pour commencer à créer avec la configuration choisie … Il n’y a pas à dire cela fait son effet surtout que l’on peut tourner autour de sa création et faire des modifications dans l’espace, c’est réellement bluffant et à la hauteur de ce que l’on voit dans les vidéos ; bien sûr il faut un certain temps d’apprentissage pour réussir à créer un élément consistant en 3D mais on se prend réellement pour le Leonard de Vinci de la réalité virtuelle ; il est d’ailleurs possible de faire des captures d’écran de ses créations.

Ci-dessous ma première réalisation sous Tilt Brush :
New Sketch_04

Peut-être que dans un futur proche, il suffira d’appuyer sur un gâchette d’une manette pour imprimer en 3D les objets modélisés avec ce genre d’outil (à condition qu’il n’y ait pas de trou et que le modèle soit viable bien sûr …) ; en ce qui me concerne j’ai essayé un peu tous les outils possibles en mixant les couleurs et j’ai adoré l’effet des étoiles et l’immersion dans sa création. C’est très ludique et j’espère qu’une application équivalente sera disponible pour le Playstation VR à sa sortie !!

 

The Lab
The_Lab_VR

 

Cette application disponible elle aussi gratuitement sur le store Steam VR est destinée à montrer des usages de la réalité virtuelle avec le HTC Vive ; dans cette application la première chose à maîtriser est la téléportation ; en effet il faut se déplacer dans un espace virtuel bien plus grand que celui autorisé par les capteurs associés au casque. Pour cela il suffit de faire ce que les initiés (dont je fais maintenant partie) appellent le “Point and Click” : avec la manette on indique une direction, une trajectoire de “téléportation virtuelle” s’affiche alors et il suffit de cliquer pour se rendre au point final de la trajectoire indiquée … Lorsque cela est maitrisé, on peut alors se déplacer virtuellement vers les différents ateliers du Lab ; je connaissais cette application pour son atelier-jeu de tir à l’arc et c’est donc par cela que nous avons commencé ; la prise en main est intuitive et l’effet de rendu dans les manettes de tension de l’arc est très bien réalisé, cela m’a donné envie de ressortir mon arc du placard !!! J’ai eu un peu de mal au début à ajuster le tir et toucher la première cible pour commencer le jeu mais ce n’était qu’une question de ma propre adaptation et ensuite je me suis pris au jeu : je regardais à droite et à gauche, je me penchais le long des remparts pour atteindre les ennemis qui longeait les murs pour se soustraire à mon regard ; je tirais sur tout ce qui bougeait pour défendre avec honneur la porte de mon château ! Bref j’aurais pu y jouer pendant des heures mais je ne voulais pas abuser du précieux temps de mes hôtes.

 

Ensuite toujours dans le lab, j’ai parcouru d’autres activités, comme celle de jouer avec le chien … Certaines parties de l’application nécessite de prendre une sphère et de la passer sur sa tête comme un casque pour entrer dans le monde virtuel de l’activité ; si je peux comprendre la symbolique recherchée, ce n’est pas très intuitif au premier abord …

 

Ainsi s’est achevée ma découverte du casque HTC Vive, j’ai vraiment été conquis et convaincu ; c’est réellement très immersif et porteur de très belles promesses !!! Comme me l’a fait remarquer un collègue, les menus sont parfois pixellisés ce qui est dommage mais pour une première version je trouve cela très abouti. Melchior d’Argentré m’a ensuite montré d’autres possibilités du Lab notamment les interactions avec l’environnement (drone, chien, caisses …) ainsi que Job simulator ; concernant cette dernière application, j’ai trouvé l’idée de base intéressante mais vu de l’extérieur cela ne paraissait pas aussi formateur qu’espéré …

 

Je remercie les dirigeants de Farsight pour leurs réponses sincères et le temps qu’ils m’ont accordé pour que je puisse utiliser le casque HTC Vive.

Plus d’informations : www.farsight.bzh
 

Google I/O 2016, qu'en attendre ?

google-io-2016
L’événement Google I/O est principalement dédié aux développeurs et leur permet de découvrir les nouveaux systèmes d’exploitation, les nouveaux matériels, les nouveaux services ou API que Google va bientôt mettre à disposition ; il se tient du 18 au 20 Mai 2016 à Mountain View en Californie.
S’il ne fait aucun doute que l’on en saura beaucoup plus sur la prochaine version d’Android, nommée pour le moment Android N, personnellement je souhaiterais voir Google :

  • lever le voile sur un concurrent de l’Amazon Echo en espérant que ce concurrent sera disponible, lui, en Europe ; Google possède déjà toutes les API d’interprétation vocale dans différentes langues, il faut juste un bon hardware avec un design soigné.
  • commercialiser un vrai concurrent des casques de réalité virtuelle tels que l’Occulus Rift ou bien le HTC Vive, pas simplement un concurrent du Gear VR et si seulement on pouvait en savoir plus sur le Magic Leap qui peut être la seule alternative aux Microsoft Hololens.

En demandant cela j’ai un peu l’impression de faire ma liste au Père Noël …
Et si Google s’attaquait à la fragmentation Android pour grandement simplifier le travail des développeurs ? Il y a encore trop de téléphones en Android 4 et 5 … Alors que la dernière version d’iOS (iOS 9) est présente dans 84 % des iPhones et iPads …
Bon c’est beaucoup demander mais ce sont de vrais challenges à surmonter pour Google.
Plus d’informations ce soir ici et sur https://events.google.com/io2016/

Microsoft Hololens, pour bien débuter

HoloLens-Réalite-Augmentée
Les lunettes holographiques Hololens commencent à être livrées aux Etats-Unis et au Canada. Pour celles et ceux qui n’ont pas eu la chance (et/ou les moyens) de commander un kit Hololens à 3000 dollars, vous pouvez tout de même vous initier à la programmation holographique à partir de plusieurs sources sur Internet.
Vangos Pterneas a écrit un très bon article simple et complet pour débuter la création d’application avec les outils logiciels nécessaires. Vous y apprendrez notamment la configuration minimale pour développer ainsi que les réglages à effectuer (manifestement il faut au moins une version de Windows 10 Pro pour gérer l’Hyper-V).
Les deux principaux logiciels indispensables sont :

  • Visual Studio 2015 Update 2 (je pense que la version Community gratuite est suffisante)
  • Unity3D (la version gratuite peut de réaliser les éléments nécessaires)

En suivant ces instructions (et celles de Microsoft) vous pourrez créer des éléments holographiques visualisables sur l’émulateur des lunettes Hololens.
Pour placer des éléments 3D virtuels sur votre environnement (ce qui fait le gros point fort de la réalité augmentée proposée par les lunettes Hololens), je pense qu’il vous faudra acquérir le kit de développement, c’est en effet beaucoup plus difficile à simuler.
Plus d’informations :

Démonstration des Microsoft Hololens lors d'une conférence TED

microsoft-hololens
Le monde ne se voit pas en 2D mais en 3D, il ne se résume pas à des écrans et des pixels ; c’est le message qu’Alex Kipman, un des inventeurs des lunettes holographiques Hololens, veut nous faire passer.
Je suis plutôt d’accord avec cet énoncé sauf que le monde se ressent avec tous ses sens et pas seulement la vision ; si l’apport de la 3D est une formidable avancée, il reste à y ajouter au moins le toucher voire l’odorat pour mixer encore plus profondément le réel et le virtuel.
Lors de cette conférence TED, Alex Kipman a montré au public les capacités de ce nouvel objet de réalité augmentée qui analyse l’environnement proche ; la démonstration des Hololens était en live avec une retransmission en temps réel par une caméra spécifique des vidéos générées par les Hololens ; l’effet “Waouh” est bien entendu présent et malgré cela il faut se dire que ce n’est que la première version de ces lunettes innovantes (on peut aussi considérer que c’est une évolution des capteurs Kinect …).
Lors d’une précédente démonstration, des manettes spécifiques avaient été ajoutées pour l’utilisateur mais elles n’ont pas été utilisées pendant le show TED ; ces manettes étaient surtout utiles pour les jeux (pour se fabriquer un bouclier par exemple) et ce n’était pas ce qui intéressait le plus les participants de la conférence TED.
Dans la vidéo du show, il y est fait la démonstration d’une nouvelle innovation utilisant les lunettes Microsoft Hololens : la Holoportation ; ce terme représente en fait la réalisation d’une conversation (de type skype) holographique. La démonstration de l’Holoportation est réalisée avec un ingénieur de la NASA qui indique utiliser les lunettes Hololens dans son travail et qu’elles sont même utilisées pour construire la prochaine navette de la NASA …
J’ai trouvé pertinente les questions de l’animatrice à la fin de la présentation car, outre la question de l’intérêt scientifique, elle n’hésite pas à poser la question qui dérange concernant l’une des plus grandes innovations de Microsoft : l’angle de vue des Microsoft Hololens ! En effet c’est le principal reproche qui ressort des premières démonstrations des Hololens, ce que l’on voit en retransmission télévision ne correspond pas à ce que l’on voit au travers des lunettes. Alex Kipman élude la réponse en considérant que ce n’est pas un problème d’angle de vue mais de profondeur de pixels ; enfin il me semble car je n’ai pas bien compris son explication a été plutôt technique et orientée optique, un sujet que je maîtrise mal …
On en saura bientôt plus puisque l’événement BUILD de Microsoft se tient du 30 Mars eu 1er Avril 2016 et que les Hololens seront au programme et que les premiers exemplaires seront livrés quasiment en même temps aux développeurs …
Ci-dessous la vidéo de la conférence TED :

Plus d’informations : TED Talk
Vous pouvez obtenir plus d’informations sur l’Holoportation sur le page : http://research.microsoft.com/en-us/projects/holoportation/
Si vous souhaitez développer pour les lunettes Hololens : https://dev.windows.com/en-us/holographic/development_overview