Microsoft Remote Assist – Améliorer la collaboration avec HoloLens

En intégrant des hologrammes au monde réel, HoloLens s’avère utile pour la maintenance de machines, le contrôle qualité, l’affichage collaboratif ou bien encore la présentation de nouveaux produits. Microsoft envisageait dès le lancement le partage de la vue avec d’autres équipements numériques. C’est chose faite : la firme a annoncé au cours du Build 2018 la sortie de Remote Assist.

Appel vidéo Remote Assist via Teams 365 – crédit images : Microsoft HoloLens

Appel vidéo Remote Assist via Teams 365 – crédit images : Microsoft HoloLens

Démultiplication des interactions


L’application Remote Assist permet le partage en temps réel de la vision de l’utilisateur avec d’autres personnes via mobile, pc ou tablette. L’appel vidéo peut être enrichi avec des annotations graphiques pour faire un focus sur un élément en particulier, et ceci dans les deux sens. Le dispositif s’avère extrêmement réactif avec un temps de latence inférieur à 250 millisecondes.

Aide à distance : instructions temps réel via pc tablette – crédit images : Microsoft HoloLens

Aide à distance : instructions temps réel via pc tablette – crédit images : Microsoft HoloLens

Remote Assist offre également la possibilité d’enregistrer la séquence vidéo en réalité mixte grâce à la fonction Mixed Reality Capture, une option intéressante pour la traçabilité et le partage des connaissances.

 

Une solution pertinente

Ce nouveau système collaboratif offre un avantage indéniable aux équipes terrain. Elles pourront désormais grâce à Remote Assist contacter un interlocuteur qualifié, expert ou décideur, et lui donner une vision précise du problème rencontré grâce à la retransmission des images en Mixed Reality Streaming. Le dispositif « tête haute » propre à HoloLens leur permettra de se déplacer et de conserver les mains libres durant toute la durée de la conversation. Elles pourront donc suivre et appliquer les instructions et montrer le résultat obtenu immédiatement. Notons que la fonction Remote Assist est activable parallèlement à toute autre application sur HoloLens. L’utilisateur/trice peut lancer un appel à n’importe quel moment via le menu d’un simple bloom (geste de la main permettant d’afficher le menu) tout en maintenant son application métier active.

Dispositif « tête haute » HoloLens qui laisse l’opérateur libre de ses mouvements – crédit images : Microsoft HoloLens

Dispositif « tête haute » HoloLens qui laisse l’opérateur libre de ses mouvements – crédit images : Microsoft HoloLens

Des usages multidisciplinaires

Remote Assist a été conçue dès l’origine comme une aide à distance pour les équipes situées en première ligne qui ont souvent besoin d’obtenir une réponse rapide et précise. Cette fonctionnalité pourra également s’avérer utile pour des dispositifs de formation sur site. Elle va également permettre de répondre à des attentes fortes en termes de gouvernance pour échanger et prendre des décisions plus rapidement, sans distorsion ou réinterprétation.

L’arrivée de Remote Assist ouvre sans conteste de nouvelles perspectives pour le travail collaboratif (centralisation des expertises, réduction des déplacements, formation sur site), et il y a fort à parier (même si cela n’est pas encore effectif) que son intégration aux applications métiers augmentera considérablement les super-pouvoirs de notre device préféré.

Sortie le 22 mai, l’application Remote peut être librement téléchargée sur le store Microsoft pour le moment. Notre Team Synergiz se tient à votre disposition si vous souhaitez échanger : contact@synergiz.com.
 
Découvrez aussi notre nouvelle expérience collaborative multi-utilisateurs réalisée pour le groupe Klépierre : Présentation Collaborative
 

Sublimer les rendez-vous avant-projet grâce à la réalité mixte

Sollicitée par le groupe Klépierre (leader paneuropéen des centres commerciaux) pour imaginer une manière innovante de présenter à VivaTech le projet d’extension du centre commercial Créteil Soleil, Synergiz a développé une application interactive originale reposant sur la réalité mixte HoloLens. Le challenge fût double. Concevoir d’une part un outil de présentation novateur offrant une vue complète et détaillée de l’architecture dans son environnement. Et développer en parallèle un système collaboratif « maître-élève » pour permettre à un intervenant d’animer une présentation avec plusieurs participants en simultané.

Présentation collaborative - Klépierre - VivaTech

Aperçu de la vision de l’animateur durant la cession de présentation – Klépierre – VivaTech2018

Renforcer la capacité de se projeter

Tous les participants disposent d’un HoloLens. L’animateur est équipé d’une paire « maître » qui lui permet de prendre la main sur le déroulé de la visite. La synchronisation des HoloLens donne la possibilité à tous les acteurs d’interagir simultanément avec le projet. La maquette s’affiche sous forme d’hologramme. Elle est enrichie de repères, d’annotations, de vidéos et de vues 360° pour valoriser les plus belles perspectives. Les participants peuvent dialoguer et interagir durant toute la visite. La visualisation 3D améliore la capacité à se projeter, facilite les échanges et les prises de décisions inhérentes au projet. Le projet devient immédiatement plus accessible.

Présentation collaborative - Klépierre - VivaTech

Vue partagée du centre commercial Créteil Soleil – Klépierre

Sublimer les démonstrations

Présenter avec HoloLens, c’est également surprendre son auditoire tout en stimulant sa curiosité. L’immersion en réalité mixte s’avère être une bonne façon d’accroître l’intérêt porté à un projet tout en captivant l’audience à travers une technologie innovante. Quel autre device aujourd’hui est capable d’égaler un tel niveau de rendu, d’interaction et de collaboration ?

Présentation collaborative - Klépierre - VivaTech

Visiteurs venus essayer la présentation en réalité mixte – Klépierre – VivaTech2018

Avec l’arrivée de Remote Assist, l’expérience pourra désormais être partagée avec des personnes à distance. De quoi d’autre pourrions-nous avoir encore besoin ?

Inventer les nouveaux formats de présentation

L’ingéniosité du dispositif réside également dans le support de présentation en lui-même. Les HoloLens fonctionnent en effet de manière autonome et sont les seuls éléments requis pour effectuer une démonstration. Aucun écran, aucun pc ou connexion Internet ne sont nécessaires. L’expérience embarquée peut être déployée dans n’importe quel lieu, sur n’importe quel type de support. Il suffit juste de prévoir le bon nombre de HoloLens. Le dispositif est léger et vite opérationnel, un atout indéniable lorsque l’on doit enchaîner les présentations et les déplacements.

La réalité mixte affirme son utilité pour de plus en plus d’expériences professionnelles. Employée dans l’industrie, le retail ou des projets événementiels, les HoloLens se profilent comme un outil de présentation interactif et collaboratif de plus en plus à forte valeur ajoutée.

Build 2018 : Le plein de nouveautés chez Microsoft

Microsoft Build vient tout juste de refermer ses portes. Cet évènement principalement dédié aux développeurs est aussi l’occasion pour la firme de Redmond d’introduire auprès de sa communauté ses toutes nouvelles innovations. Réalité mixte, IA, Eye Control et Kinect (le retour !), voici, en substance, ce que la Team Synergiz a retenu de cette édition.

La réalité mixte progresse avec HoloLens

Inscrites dans la logique « make better decisions faster », Microsoft a dévoilé deux nouvelles solutions de réalité mixte HoloLens orientées collaboration et maintenance 4.0.

Dispositif de réalité mixte HoloLens de Microsoft

Dispositif de réalité mixte HoloLens de Microsoft

Démarrons par l’application Remote Assist. Elle permettra le partage en temps réel de la vue holographique captée par les HoloLens vers d’autres supports (ordinateurs, mobiles, tablettes…). Les collaborateurs situés à distance pourront aussi apprécier les éléments visualisés par l’utilisateur. Il leur sera également possible d’échanger par la voix ou en images au travers de Skype. La vue de l’utilisateur pourra également être enrichie d’annotations stylisées et être enregistrée pour être transmise vers d’autres médias.  

Quant à L’application Microsoft Layout, elle va se révéler extrêmement utile dans la conception et la modélisation d’objets ou d’espaces. Cette solution permet d’intégrer rapidement des modèles 3D et de les visualiser en environnement réel à travers une simple tablette ou un smartphone.  

La sortie de Remote Assist et Microsoft Layout est officiellement programmée pour le 22 maiFlorent Pelissier, HoloLens & Mixed Reality – Product Marketing Manager chez Microsoft, et Adrien Cayrac, HoloLens Sales Specialist EMEA at Microsoft co-animeront un webinar le jour même sur ce sujet. Voici le lien pour vous inscrire si vous souhitez y participer : bit.ly/2rJzkYU

L’intelligence artificielle (IA) : Amplifier les capacités humaines

« AI for accessibility » est le nouveau combat engagé par Microsoft pour améliorer le quotidien des personnes en situation de handicap. La firme intensifie ses recherches sur l’intelligence artificielle et lance un appel aux développeurs du monde entier afin de les encourager à exploiter les ressources de l’IA. On est paré chez Synergiz 🙂

Assistant personnel intelligent "Cortana" sous Windows 10 - Microsoft

Assistant personnel intelligent « Cortana » sous Windows 10 – Microsoft

Des applications comme Microsoft TranslatorCustom Vision ou Helpicto  permettent d’ores et déjà aux malentendants, aux malvoyants ainsi qu’aux autistes de voir, lire, apprendre et interagir avec plus d’intuitivité.

 

Microsoft aspire à démocratiser l’intelligence artificielle et la décliner sur un maximum de supports. En dotant HoloLens d’un Object Recognition (système de reconnaissance d’objets), Microsoft pousse l’IA vers ses propres technologies dans le but de gagner en performance mais aussi d’optimiser l’efficacité de nombreux cas d’usages personnels.

Microsoft Eye-Tracking en mode open source

Le Eye-Tracking (oculométrie en français) regroupe différentes techniques afin d’enregistrer les mouvements de l’œil. Des capteurs se concentrent sur notre pupille et identifient ainsi notre point d’attention sur l’écran.

Reconnaissance oculaire par ordinateur

Reconnaissance oculaire par ordinateur

Introduit l’année dernière, le nouveau système de EyeTracking (Eye Control) de Microsoft permet à ses utilisateurs de contrôler Windows uniquement avec les yeux. Une solution miracle pour les personnes déficientes ne pouvant utiliser ni le clavier ni la souris de l’ordinateur.

Au cours de Build 2018, Microsoft a annoncé le partage de cette technologie en open source. Ainsi, les développeurs du monde entier pourront initier une nouvelle génération d’applications portées sur l’optimisation des usages en utilisant le Eye Tracking.

Project Kinect for Azure : Le retour de Kinect

Fan de Kinect depuis la première heure, on attendait la nouvelle avec impatience ! Microsoft annonce avoir mis au point une nouvelle caméra Kinect équipée d’un système d’intelligence artificielle permettant de gagner en précision et en performance. Cette caméra, destinée entre autres au secteur industriel (maintenance, contrôle qualité ou conception), peut être utilisée à travers le système de cloud Azure de Microsoft. Elle offrira donc plus d’intuitivité et de rapidité à ses usagers. Cerise sur le gâteau : la nouvelle Kinect sera également intégrée à la nouvelle génération d’HoloLens, afin d’obtenir une spatialisation du réel plus fluide et plus précise.

Nouvelle caméra Kinect de Microsoft (Microsoft photo)

Nouvelle caméra Kinect de Microsoft (Microsoft photo)

Microsoft poursuit donc ses objectifs technologiques initiaux en plaçant l’humain au centre de ses innovations. Il s’agit d’améliorer les usages, gagner en efficience et permettre aux plus désavantagés de bénéficier d’une communication et d’un apprentissage plus facile, une vision largement approuvée, développée et appliquée au sein de la Team Synergiz !