Avec Mesh, Microsoft donne un aperçu des capacités de la réalité augmentée en collaboration

Guillaume Belfiore

Lead Software Chronicler

03 mars 2021 à 09h33

Microsoft repousse sa vision de la réalité mixe et introduit Mesh, une plateforme de communication futuriste reposant sur son casque HoloLens.

Avec HoloLens, Microsoft souhaite mélanger réalité virtuelle et réalité augmentée. Jusqu'à présent, le casque était utilisé en entreprise, notamment pour manipuler des rendus en 3D sur des phases de conception. À l'avenir, Microsoft entrevoit HoloLens comme un outil de communication destiné à tout le monde.

HoloLens : bientôt des hologrammes en 3D

Avec Mesh - qui n'a rien a voir avec le défunt Live Mesh - Microsoft annonce un tournant pour sa vision de son HoloLens. Désormais, le casque pourra être utilisé via une plateforme collaborative permettant de partager des expériences virtuelles.

The Verge, qui a pu tester ce dispositif, rapporte les propos d'Alex Kipman, l'inventeur du Kinect et de Hololens. Ce dernier explique :

« C'est le rêve pour la réalité mixte, c'est l'idée depuis le début. Vous pouvez vraiment avoir l'impression d'être au même endroit que quelqu'un à partager du contenu, ou vous pouvez vous téléporter depuis des appareils de réalité mixte et être présent avec des gens, même si vous n'êtes pas physiquement ensemble ».

Plus précisément, dans un premier temps, la plateforme Mesh permettra de générer des avatars virtuels en 3D issus de AltspaceVR, le réseau social racheté par Microsoft en 2017. Par la suite, Microsoft permettra de se projeter directement sous la forme d'un hologramme et par « holoportation ».

Microsoft prépare les communications virtuelles du futur

Au moment de dévoiler son casque de réalité mixte, Microsoft en avait présenté plusieurs usages. L'éditeur de Redmond imaginait notamment des appels video Skype riches et interactifs. La plateforme Mesh est un premier pas en ce sens.

« Vous pouvez complètement imaginer Microsoft Teams avec Mesh », affirme Alex Kipman en expliquant que des collègues au quatre coins du monde peuvent ainsi se retrouver en réalité mixte au sein d'un même espace physique.

La société semble ainsi partager la vision de Mark Zuckerberg. Le P.-D.G. de Facebook estime en effet que la réalité virtuelle répond non seulement à la crise sanitaire mais pourrait aussi permettre de réduire l'impact climatique des trajets quotidiens sur son lieu de travail, voire de proposer de nouvelles opportunités dans le tourisme.

La plateforme Mesh sera disponible sur plusieurs types d'appareils et ne sera pas restreinte à HoloLens. L'éditeur compte la rendre disponible pour d'autres casques VR mais aussi sur smartphones, tablettes ou PC (en 2D). Une version preview pour HoloLens 2 vient tout juste d'être publiée.

Source : The Verge

Guillaume Belfiore

Lead Software Chronicler

Je suis rédacteur en chef adjoint de Clubic, et plus précisément, je suis responsable du développement éditorial sur la partie Logiciels et Services Web.

Lire d'autres articles

Je suis rédacteur en chef adjoint de Clubic, et plus précisément, je suis responsable du développement éditorial sur la partie Logiciels et Services Web.

Lire d'autres articles

Commentaires (11)

dvaid

Sympa comme film SF , avec des logiciels super ergonomique . Et la mère qui prend sa fille dans ses bras : en réalité mettre un casque de réalité virtuelle sur la tête ça rapproche pas beaucoup les gens. Je dirais même que ça les isolent.

smover

« La société semble ainsi partager la vision de Mark Zuckerberg. » Non c’est tout l’inverse : c’est Mark Zuckerberg qui rejoint la vision de Microsoft pour qui la réalité mixte va changer le monde et remplacera tous nos écrans à terme. La réalité virtuelle est tellement limitative à coté… Microsoft a mis une claque à tout le monde dès janvier 2015 en annonçant son premier HoloLens, bien avant que le Zuck ne parle de réalité augmentée /Mixte comme il le fait aujourd’hui. Sa commercialisation en aout 2016 a concrétisé cette vision et Hololens 2 a enfoncé le clou fin 2019. Ce casque est extraordinaire, c’est un plaisir de bosser avec !! La vision d’un monde en réalité virtuelle façon Ready Player One est complètement obsolète, d’où les milliards injectés par les GAFAM et les géants de la tech chinois sur la réalité Mixte. Ce qui est intéressant c’est qu’il ne faudrait au final qu’un HoloLens 2 et une « webcam holographique » (comme Kinect for Azure ?) pour que cela commence à fonctionner ! Donc cela peut arriver rapidement, au moins en entreprise dans un premier temps. HoloLens / HoloLens 2 mériteraient un article avec un gros test sur Clubic tant cette techno est folle et que peu l’ont encore expérimenté.

keyplus

c’est pas encore grand publique et puis faudra appareil moins intrusif sinon bonjour les vertebres

ddrmysti

smover: Microsoft a mis une claque à tout le monde dès janvier 2015 en annonçant son premier HoloLens Et ça a été une telle claque que 5 ans plus tard, quand tu en parle aux quelques personnes qui se souviennent encore du truc, qu’ils te répondent « ah bon, ça a pas été abandonné finalement ce projet ? » C’est cher, c’est encombrant, c’est pas pratique, et sorti d’une vidéo bourré d’SFX ne reflétant pas dutout la réalité, c’est quasiment inutile (sorti de quelques situations bien particulières, ou des fanboys qui veulent que ce soit génial, et refusent d’admettre qu’avec la réalité mixte on fait la même chose pour beaucoup moins cher. Au final ce truc, un peu comme les googleglass et plusieurs produits que MS a présenté en même temps, c’est surtout des démo techniques, qui dans ce cas à cherché à sortir un peu MS de son image poussiéreuse de l’informatique des années 90, en montrant que MS était capable d’innover. Mais personnellement, ce qui fait la différence entre l’innovation et une simple démo technique, c’est que l’innovation se repend pour devenir une norme, là on a juste un gadget qui des années après reste un produit de niche qui ne correspond à personne, et ne répond à aucun besoin, si ce n’est quelques délires de fan d’hightech.

smover

Bien sûr, je n’ai pas dit l’inverse. A 3300€ le casque de toute façon HoloLens 2 n’a jamais eu l’ambition d’arriver dans le salon de Mme. Michu. Mais tout ça va dans le bon sens.

smover

ddrmysti: quand tu en parle aux quelques personnes qui se souviennent encore du truc, qu’ils te répondent « ah bon, ça n’a pas été abandonné finalement ce projet ? » Franchement tu as vraiment tort. Tous les grands groupes industriels l’utilisent HoloLens 2, et le casque commence à être utilisé en production (contrairement à HoloLens premier du nom qui servait à faire des prototypes / preuves de concepts). Airbus, Boeing, Daimler, Bosch, TOTAL, Les Chantiers de l’Atlantique, NAVAL Group… toutes les grosses boites s’y sont mises aux USA et en Europe (l’Asie je n’ai pas de visu mais je sais qu’il y a pas mal de projets au moins en Chine) et investissent en anticipant une forte augmentation des cas d’usages sur les 2 ans à venir. HoloLens 2 s’est vendu en un mois autant que son prédécesseur en 3 ans, sans même parler du projet de l’armée américaine qui fait développer une variante spécifique. On ne compte plus le nombre de startup qui sont passé de la VR à HoloLens 2, et celles qui se sont créées sur le terrain de la réalité Mixte. Rien qu’en France tu en as un paquet et elles assurent Avant la pandémie l’un des indicateurs intéressant étant de voir les HoloLens se multiplier sur les stands des salons professionnels au détriment des « expériences VR », mais bien sûr depuis un an tout cela est au point mort. Il n’empêche que la techno va continuer à exploser au fur et à mesure de l’évolution du matériel (prix, poids du casque et qualité d’affichage sont les principaux freins actuellement). A 3300€ le casque ils ne vont pas en vendre des millions, mais leurs objectifs de ventes ont largement été dépassé au point que les clients ont souvent dû attendre des mois pour recevoir l’intégralité de leurs commandes d’HoloLens 2. J’ai pu avoir mes premiers exemplaires rapidement mais pour la suite il a fallu être trèèèès patient ^^ ddrmysti: là on a juste un gadget qui des années après reste un produit de niche qui ne correspond à personne, et ne répond à aucun besoin, si ce n’est quelques délires de fan d’hightech. Là ou Google Glass peinait à avoir des cas d’usages et était complètement dans ce cas que tu décris, HoloLens 2 est utilisé tous les jours pour de la formation, du guidage et du contrôle dans tout un tas de cas : de la conception de l’intérieur d’un hélicoptère à du suivi de chantier en passant par le guidage d’un maintenancier ou la formation d’ouvriers dans des usines. Désolé, et c’est dit sans agressivité aucune, mais tu ne connais pas vraiment le sujet pour tenir de tels propos. Et pour être encore plus précis : je l’utilise chaque semaine avec mes équipes, et nous sommes très nombreux dans le monde dans ce cas-là, au moins des dizaines de milliers. Je ne sais pas si Microsoft a dépassé la centaine de millier de ventes (sans inclure l’armée américaine qui en a pris 100 000 juste pour leur modèle spécifique) mais ça a probablement été le cas en 2020 puisqu’au premier trimestre ils en ont probablement écoulé 50-60 000. Avec HoloLens 3 et 4 dans les cartons, mais aussi des clones asiatiques plus abordables pour bientôt, Facebook et Apple qui vont aussi lancer leur solution de réalité mixte, ces technos ont un avenir qui s’annonce passionnant. Que Microsoft ou pas garde sa place de leader actuel peu importe, mais c’est clairement leur HoloLens qui a ouvert la voie. Et je défie qui que ce soit qui teste un jeu comme Robot Raid sur un HoloLens 2 de ne pas être bluffé par l’expérience unique que la réalité mixte propose. Pour avoir fait tester la solution a beaucoup de monde, je n’ai que des enthousiastes qui ne comprennent pas que le casque soit si peu connu. Il est d’ailleurs dommage que chaque université ne soit pas équipée tant le potentiel est énorme en terme d’apprentissage. Je suis persuadé que le même casque logoté Apple aurait fait la une de tous les sites et journaux comme étant « une révolution ». Mais Microsoft a moins de fans HoloLens 2 est une tuerie !! Je ne sais pas si des membres de la rédac nous lisent, mais si oui : est-ce que vous avez testé ?

MisterDams

Le casque de réalité virtuelle ne rapproche ni n’éloigne les gens, c’est l’usage qui en est fait qui va définir la nature de nos interactions. Pouvoir matérialiser un échange régulièrement en VR peut apporter beaucoup plus de lien entre deux interlocuteurs qu’un lien IRL limité à une rencontre par an.

smover

Surtout qu’HoloLens n’est pas un casque de réalité virtuelle, ça n’a rien à voir. On n’est pas coupé du monde qui nous entoure et c’est ça qui fait toute sa force.

ddrmysti

C’est bien ce que je dis, c’est cantonné à un usage très restreint et spécifique. Si demain on sort un système d’exploitation qui ne peut être utiliser que par les bouchers, bah ça sera peut être génial pour gérer la viande, mais sorti de là… Tout comme le smartphone, on en reparlera quand une marque aura vraiment fait un produit accessible à tous et qui aura un intérêt sorti de quelques domaines. En attendant, bah désolé, mais on est loin du truc génial que t’essais de nous vendre…

smover

ddrmysti: C’est bien ce que je dis, c’est cantonné à un usage très restreint et spécifique. Si demain on sort un système d’exploitation qui ne peut être utiliser que par les bouchers, bah ça sera peut être génial pour gérer la viande, mais sorti de là… Je vais reformuler l’usage parce que n’ai pas dû être clair sur la portée de la Réalité Mixte : « permettre à tous (techniciens, opérateurs, ouvriers, companions, écoliers, étudiants, lycéens, chercheurs, médecins, ingénieurs, etc.) d’enregistrer, partager et acquérir du savoir plus efficacement grâce à la réalité auugmentée, et ce en mode mains libres. » Si le casque ne coûtait pas 3300€ il y aurait des usages dans tous les foyers, toutes les entreprises et toutes les classes. Le potentiel est gigantesque et même s’il y a des points à améliorer il est enfin exploitable avec HoloLens 2. Les cas d’usages sont bien là, la techno a fait ses preuves et est déjà ajourd’hui largement plus utile que la réalité virtuelle par exemple. Tu as eu des opérations de chirurgies assistées grâce à HoloLens qui permettent les rendre collaboratives plus efficacement et de simplifier la vie des chirurgiens. Les cas d’usages ne manquent pas dans les usines, j’en ai déjà parlé. Tu peux imaginer demain que tous les musées seront équipés (il y a déjà des projets en production et c’est bluffant !!), pour les visites aussi le potentiel est énorme. La techno a le potentiel de révolutionner l’éducation, le télétravail et plus globalement la collaboration à distance : l’annonce de Microsoft Mesh est un pas en ce sens. Etc. Non vraiment la Réalité Mixte n’a rien à voir avec le bide des Google Glass justement parce que les cas d’usages sont aussi nombreux que potentiellement capable de changer la société bien plus que le smartphone ne l’a fait - et je pèse mes mots. ddrmysti: Tout comme le smartphone, on en reparlera quand une marque aura vraiment fait un produit accessible à tous et qui aura un intérêt sorti de quelques domaines. En attendant, bah désolé, mais on est loin du truc génial que t’essais de nous vendre… Je n’ai rien à vendre …mais le truc est vraiment génial !! Encore une fois : je ne connais personne qui a essayé un truc comme Robot Raid et qui n’est pas sorti bluffé par l’expérience. Les courts d’anatomie sur très impressionnants aussi, et dans le monde pro il y a des applis à tomber par terre …mais elles sont à usage interne des sociétés qui les ont développées. Le frein principal c’est le coût, d’acquisition du matériel et de création de contenu. Donc effectivement si demain Hololens x coute le prix d’un smartphone il se vendra par dizaines de millions avant de remplacer le smartphone (et tous nos écrans) à terme. Mais d’ici là la techno s’implante de plus en plus et dans le monde pro elle commence vraiment à percer, et ce dans pleins de domaines différents, c’est ça qui est intéressant justement. Je pense que pour la prochaine génération Microsoft proposera deux variantes : une accessible et plus ergonomique et légère, probablement équivalente techniquement à HoloLens 2, et une plus chère mais aussi plus avancée pour continuer à développer le potentiel de la RM. Ils peuvent aussi simplement casser les prix sur HL2 et vendre 3000$/€ HoloLens 3, ça pourrait payer comme stratégie. Et pour la création du contenu c’est en général du Unity comme beaucoup de jeux vidéos, avec une expertise Realité Mixte en sus donc il faut le temps que les développeurs se forment. Mais de plus en plus d’universités se sont équipées et proposent des cursus qui permettent de s’initier donc cela n’est qu’une question de temps. Sur ce je vais tester ce Mesh pour voir ce que ça donne sur un de mes Hololens 2 puisque j’ai vu hier que l’appli est dispo sur le windows store.

c_planet

C’est surtout un chouette aperçu d’un boulot de m. qui prolonge les réunions après le coucher des enfants. ps : je ne comprends pas comment sont filmés les personnages (avec casques donc) qui sont connectés. ils apparaissent tout entier dans la scène, c’est pas crédible. si t’as le casque, c’est que ce n’est pas un avatar et donc il faut tout un système d’enregistrement extérieur. De plus on en voit une marcher et avancer vers le centre de la pièce. euh, « finis ton jambon et pousse la table j’ai une réunion qui démarre » … bref, Les deux gars qui font de la caligraphie … comment est-ce que le premier peut continuer à voir le travail de son collègue quand ce-dernier détourne le casque de sa feuille ? sans parler de la supposition de l’existence du pinceau à poil connecté … bref, rien que de la pub.

smover

Il est clair qu’il faudra un système d’acquisition, une sorte de webcam de réalité mixte capable de capter ce qui est nécessaire pour ensuite restituer des hologrammes dans les écrans des casques des autres participants. Peut-être que Kinect for Azure suffit, ou au contraire qu’il faudra une nouvelle génération.

Voir tous les messages sur le forum

Avec Mesh, Microsoft donne un aperçu des capacités de la réalité augmentée en collaboration

HoloLens : bientôt des hologrammes en 3D

Microsoft prépare les communications virtuelles du futur

A découvrir en vidéo

Commentaires (11)

Top app & logiciels

Sur le même sujet