Réalité Augmentée

WebXR : un projet de standardisation de la réalité mixte sur le web

Soumis par fredericmazue le
Image

En 2016, la fondation Mozilla a proposé WebVR, une spécification d'API pour permettre à tous les développeurs de créer des applications de réalité virtuelle tournant dans tous les navigateurs implémentant cette API. Aujourd'hui Mozilla va plus loin avec WebXR.

L'intention de WebXR est ambitieuse : standardiser la réalité mixe - c'est à dire la réalité virtuelle et la réalité augmentée - afin que l'ensemble des appareils, casque et frameworks puissent fonctionner ensemble.

WebXR est une nouvelle spécification compatible à la fois avec les appareils AR (Augmented reality) et VR (Virtual REality). L'API WebXR doit pouvoir permettre au développeur de manier tous les concepts, comme par exemple l'ancrage des oblets, indépendamment de leur mise en oeuvre spécifique dans des framworks comme ARCore, ARKit, Hololens ou d'autres. WebXR veut être un moyen pour les développeur web de proposer du contenu immersif accessible à tous.

La spécification, à l'état d'ébauche, pour le moment, est sur GitHub. Mozilla souhaite que les développeurs de logiciels et les constructeurs de matériel y participent, pour la faire évoluer.

ThingWorx Studio : des interactions en Réalité Augmentée immersives pour l'industrie

Soumis par fredericmazue le
Image

PTC annonce que son produit technologique de réalité augmentée ThingWorx Studio va être doté du logiciel Vuforia 7, introduisant de nouvelles techniques pour joindre du contenu numérique à des objets et surfaces du quotidien, ainsi qu'une prise en charge des logiciels ARKit d'Apple et ARCore de Google.

ThingWorx Studio est un environnement de création rapide de réalité augmentée qui permet aux acteurs de l'industrie de concevoir et de partager rapidement des expériences évolutives, sans écriture de code.

Model Targets, disponible dans la prochaine version de Vuforia 7, et pris en charge par ThingWorx Studio, permettra la reconnaissance et le suivi d'objets selon des formes de modèles 3D déjà existants, et ne nécessitera pas de marqueur. Cette reconnaissance d'objet haute fidélité permet d'aligner des contenus 3D avec une plus grande exactitude pour des cas d'utilisation où les instructions étape par étape et les données du produit sont superposées au produit physique.

La prise en charge de Vuforia 7 permettra à ThingWorx Studio d'utiliser Vuforia Ground Plane, une nouvelle fonctionnalité de disposition de contenu sur la surface du sol ou d'une table. Grâce au support d'ARKit et d'ARCore, via une technologie appelée Vuforia Fusion, ThingWorx Studio permettra la création d'expériences en réalité augmentée solides et fiables, sur un éventail plus large d'environnements industriels. Ground Plane restera une solution pour des cas d'usages industriels ne nécessitant pas de produit physique, telle une revue de conception virtuelle ou un outil de virtualisation pour la vente et le marketing.

Les expériences conçues dans ThingWorx Studio sont accessibles via ThingWorx View, une application de visualisation à l'échelle de l'entreprise, offrant des expériences utilisateur 3D enrichies pour smartphones, tablettes et autres appareils mobiles. Disponible dès maintenant, les créateurs de contenus peuvent profiter des processeurs de caméra et des capteurs de mouvement des appareils fonctionnant sous iOS11, pour créer plus rapidement et facilement des interactions spatiales et hautement immersives en réalité augmentée. ThingWorx View est disponible en téléchargement gratuit pour les appareils Windows, iOS et Android.

Jim Heppelmann, President & CEO, PTC, explique : « PTC s'engage à soutenir le dévelopement des applications de réalité augmentée les plus usitées du marché, notamment par la prise en charge de systèmes tels qu'ARKit et ARCore. Avec un écosystème constitué de centaine de milliers de développeurs en réalité augmentée, PTC se positionne comme catalyseur du développement de contenu nécessaire à l'exploitation d'ARKit et ARCore, en particulier pour le marché industriel. »

En plus des nouvelles fonctionnalités Model Targets et Ground Plane, dont l'intégration est à venir, ThingWorx Studio et ThingWorx View proposeront très bientôt des fonctionnalités de présence à distance, offrant une plus grande efficacité dans divers cas d'utilisation industriels critiques.

Plus d'informations :

ThingWorx Studio Free Trial Program
ThingWorx Studio

Facebook brevette des lunettes à réalité augmentée

Soumis par fredericmazue le
Image

La réalité augmentée est un axe de travail prioritaire pour Mark Zuckerberg. Celui-ci avait montré une paire de lunettes à réalité augmentée lors de la conférence développeurs F8 du printemps 2017, mais sans donner aucune précisions technique. Business Insider a repéré un brevet concenrant à priori ces lunettes.

Le brevet les décrit comme "un écran à guide d'ondes ainsi qu'un scanner deux dimensions capable d'améliorer la perception de l'environnement à l'aide d'images générées par ordinateur." De la réalité augmentée autrement dit. Les images sont produites par des rayons lumineux envoyés vers les verres qui contiennent une surface réfléchissante. Les images sont reflétées en direction de l'oeil du porteur de lunettes qui les perçoit comme s'ajoutant à sa perception visuelle normale.

Qu'est-ce que Facebook a l'intention de faire avec ces lunettes ? Mystère pour l'instant. Facebook n'a fait aucun commentaire concernant ce brevet.

Les mécaniciens de Dassault Aviation travaillent avec la réalité mixte produite par HoloLens de Microsoft

Soumis par fredericmazue le

A l’occasion du salon international de l’aéronautique et de l’espace (SIAE), qui ouvre ses portes aujourd’hui pour une semaine, Microsoft et Dassault Aviation dévoilent les applications de réalité mixte développées pour accompagner les équipes du constructeur aéronautique dans leur quotidien. Grâce à HoloLens, l’ordinateur holographique autonome développé par Microsoft, les mécaniciens pourront gagner en efficacité dans le cadre des opérations de maintenance et de suivi des avions Rafale et Falcon. Fort de ce succès, Dassault Aviation imagine d’ores et déjà les prochaines applications qui viendront enrichir et contribuer à réinventer les processus métiers.

Déployé auprès des mécaniciens de Dassault Aviation, HoloLens permet aux équipes de s’appuyer sur une vision de l’avion enrichie par les informations nécessaires à l’exécution des opérations de maintenance. Grâce à la réalité mixte, l’environnement réel du mécanicien est ainsi enrichi d’éléments numériques accessibles avec HoloLens et contribuant naturellement à accroître la performance, la maintenance et la disponibilité des avions Rafale et Falcon.

 « Nous avons été séduits par les performances et les opportunités que HoloLens pouvait représenter au quotidien. Que ce soit en termes de conception, de fabrication ou de maintenance, HoloLens ouvre de nouvelles perspectives et va contribuer à accélérer la transformation de nos process de travail » explique Jean Sass, Chief Digital Officer de Dassault Aviation. « Toutes les applications envisagées s’inscrivent dans notre volonté de rechercher de l’efficience dans les activités aux moyens de technologies numériques ; ils privilégient deux éléments clé que sont le facteur humain et la continuité numérique ».

« Nous sommes particulièrement fiers d’accompagner Dassault Aviation dans la réinvention de ses processus métiers. » souligne Jean-Louis Baffier, Directeur de la Division Grandes Entreprises et Alliance de Microsoft France. « Microsoft a pour volonté d’apporter aux entreprises une nouvelle façon de voir et d’interagir avec le monde. En tant que partenaire de la transformation numérique des entreprises, nous avons été parmi ceux qui ont accompagné Dassault Aviation, l’un des leaders du marché aéronautique français, dans l’appréhension de cette innovation pour libérer le potentiel de leurs techniciens au profit de leur croissance. » 

 

WWDC : une orgie d’annonces et de nouveautés

Soumis par francoistonic le

Depuis 6 mois, nous n’avions pas grand chose de neuf côté Apple, hormis un mea culpa sur la gamme pro (il était temps) et quelques nouveautés logicielles et matérielles mais rien de bien excitant. Tout le monde attendait l’ouverture de la conférence développeur mondiale du 5 juin. Nous n’avons pas été déçus. Et les presque 2h30 de session sont passées à toute vitesse : il faut dire que nous avons un déferlement d’annonces, en 6 grandes parties. Tim Cook avait promis une grande WWDC. Promesse tenue.

Apple arrive sur le marché de la réalité augmentée !

Depuis de nombreux mois, Apple parle de son intérêt pour la réalité augmentée et surtout la réalité mixte. Apple rentre désormais sur ce marché même si aucun matériel dédié n’a été annoncé. Il faudra sans doute attendre la rentrée et le prochain iPhone, voire, 2018 pour un casque autonome s’il existe.

Apple travaille à plusieurs niveaux. Sur la partie desktop et les moteurs dédiés. Ainsi, le framework Metal 2 a été taillé pour supporter la réalité augmentée / virtuelle. Plusieurs démos ont été faites. Steam VR sera compatible Mac et même Occulus semble plutôt bien fonctionner. Apple va proposer un kit développeur dédié avec un boitier GPU externe. Enfin, la VR va commencer à réellement arriver sur la plateforme Mac, mais il faudra encore quelques mois. Mais Apple travaille avec les principaux fournisseurs techniques du marché.

La grosse annonce tourne autour du ARKit. Il s’agit de proposer toute une couche technique pour la réalité augmentée sur un terminal iOS typiquement iPhone et iPad. Grâce aux matériels et capteurs embarqués, il sera possible de naviguer dans son l’espace (qui sera reconnu et mappé visiblement) pour ajouter la réalité augmentée. Un système de tracking est inclus dans cet ensemble. Les démos réalisés étaient intéressantes sur les possibilités. Typiquement, le système reconnait une surface plane et il pourra rajouter des objets. Maintenant, il faut voir les possibilités réelles de la technologie et comment se comporte le terminal et l’autonomie. Peu d’usages ont été montrés durant la plénière mais on en saura plus rapidement. Pour profiter de ce kit, il faudra Xcode 9 et iOS 11. ARKit supporte Meta, SceneKit et surtout les moteurs Unity et Unreal.

ARKit n’est sans doute que la première pierre de la stratégie Apple dans le domaine. Mais cela prouve que la Pomme va investir et miser sur ce marché. A voir maintenant la réaction des développeurs, des concurrents et surtout des premiers matériels dédiés qui arriveront sans doute à partir de septembre / octobre prochain. 

De nouvelles machines !

Incroyable : Apple a présenté de nouvelles machines. Il était temps. Les gammes portables (MacBook, MacBook Pro) subissent une mise à jour légère sur le matériel avec l’arrivée de processeurs Intel Kaby Lake. A noter que l’USB C est par défaut sur tous les MacBook Pro. Ils gagnent aussi un SSD plus performants. Le MacBook Air a un processeur un peu plus rapide. 

La gamme iMac subit aussi une mise à jour : processeur Kaby Lake de 7e génération, jusqu’au 32 Go de ram (ou 64 pour le 27’’), support du H.265/HEVC (format vidéo), Thunderbolt 3 arrive partout ainsi que de nouvelles GPU. Avec cet ajout de puissance, les solutions de réalités augmentées / virtuelles pourront enfin fonctionner sur Mac et se développer dessus. 

Chose peu fréquente, Apple a dévoilé une machine qui sera disponible seulement fin 2017 : l’iMac Pro. Comme promis il y a quelques semaines, cette version boostée promet d’être très puissante : processeur Xeon jusqu’à 18 coeurs (8 par défaut), 32 Go de ram par défaut (jusqu’à 128 Go), Ethernet 10 Gb, Thunderbolt 3, une Radeon Vega de 16 Go VRAM, SSD 1 To par défaut, écran 5K. Sur le papier, c’est joli bébé, avec un prix de départ de 4999 $. Oui c’est cher mais pour un telle machine cela peut se mériter. Par contre, on ne pourra pas changer facilement le CPU, la GPU ni la RAM. Il faudra démonter l’écran et la carte mère. 

Apple a précisé que les CPU et GPU sont soudés à la carte, mais le support des boitiers eGPU sera là pour palier partiellement à ce problème. Le design de l’iMac ne permet pas d’être modulaire. Mais Apple a promis un Mac Pro entièrement repensé pour 2018…

L’iPad subit aussi une mise à jour avec de nouveaux iPad Pro. Le futur iOS propose de nouvelles fonctions dédiés : dock pour les apps (sur le modèle du dock de macOS), gestionnaire de fichiers (app Files). Oui enfin ! Les fonctions de scans des notes ont été longuement montrés : on scanne, le système indexe le document, on peut l’annoter, etc. D’ailleurs, Apple va généraliser le principe de l’annotation dans les notes et dans diverses applications dont Safari. 

HomePod : un assistant qui mise sur la musique

La rumeur l’avait dit. Apple l’a présenté. L’assistant d’Apple existe et sera disponible fin 2018. Apple l’a très orienté musique, diffusion audio mais finalement, HomePod est aussi un assistant comme Google Home ou Amazon Echo. Il supporte pleinement Siri. Il est doté de 7 hauts parleurs, d’un caisson de basse et le tout est animé par un processeur maison A8. Il sera possible de coupler 2 HomePod. Le prix annoncé est de 349 $.

Côté logiciel : les prochains systèmes 

Sur la partie macOS, Apple dévoile High Sierra. Désormais, Apple sort une nouvelle version (réellement nouvelle) 1 an sur 2, l’autre année est une optimisation plus profonde du système. On aura droit à un nouveau Safari introduisant un nouveau moteur JavaScript. Surtout, les équipes vont optimiser Mail et les apps maisons. Il supportera les eGPU grâce à l’API graphique Metal 2 qui fera sa grande apparition. La grosse nouveauté est l’arrivée officielle sur les Mac du nouveau système de fichiers d’Apple : APFS. APFS est déjà fonctionnel et par défaut sur iOS. Pour le moment le passage à APFS sera optionnel mais à terme, il sera le seul système de fichiers. D’ailleurs le système conserve la compatibilité avec HFS+ (lecture / écrire). Il est taillé pour les nouveaux supports de stockage et notamment les SSD. 

Bien entendu, iOS 11 et watchOS 4 ont été montrés. App Store aura une toute nouvelle interface, Siri gagne des voix plus naturelles et s’ouvre à de nouvelles apps, Apple Pay de personne à personne, synchronisation des messages entre iOS - macOS améliorée (ouf !), nouveaux codecs Vidéo, etc. 

Disponibilité des systèmes en automne, sans date plus précise pour le moment.Les bêtas sont disponibles pour les développeurs. Les bêtas publiques le seront dans les prochaines semaines. 

François Tonic

Microsoft passerait directement à Hololens 3

Soumis par fredericmazue le

Ceci selon le blogueur Paul Thurrott qui est toujours très bien renseigné en ce qui concerne Microsoft.

Hololens, le casque de réalité augmentée de Microsoft, est commercialisé depuis deux ans. Cette commercialisation semble un succès, même si le prix du casque à 3000 dollars a de quoi en dissuader plus d'un. Pour surfer sur la vague du succès, Microsoft aurait une stratégie particulière en tête.

Ceci selon Paul Thurrott qui s'appuie sur des sources internes à Redmond. Selon lui, Microsoft ne préparerait pas une V2 de Hololens, mais ferait directement le saut vers la V3.

Avec ce saut Microsoft souhaiterait garder une longueur d'avance sur la concurrence. Ne pas sortir une V2, c'est ne pas perdre du temps à sortir un produit peu innovant. Tandis que travailler directement à la V3, c'est réserver des ressources, pour trouver des améliorations technologiques notables afin de rester le leader dans ce domaine. C'est aussi travailler à une réduction des coûts, pour arriver à un prix avoisinant 1000 dollars pour un casque Hololens.

Toujours selon les sources de Paul Thurrott, ce Hololens V3 n'arrivera pas sur le marché avant 2019.

Hololens : Microsoft publie le framework HoloJS

Soumis par fredericmazue le

Hololens est un casque à réalité augmentée conçu par Microsoft. Ce casque ajoute en temps réel des hologrammes dans le champ de vision de son porteur. Il ne reste plus qu'à développer des applications qui décoiffent :-)

S'il existe un déjà SDK pour développer pour Hololens, Microsoft vient en outre de publier un framework open source : HoloJS.

HoloJS est un framework pour créer des applications UWP à base de JavaScript et WebGL.

HoloJS est une librairie C++ qui embarque Chakra le moteur JavaScript de Microsoft que l'on retrouve au sein de tous les navigateurs de l'éditeur. Il embarque aussi ANGLE. ANGLE est un outil qui traduit les appels d'API OpenGL ES en appels aux API DirectX 11, pour des performances maximales.

HoloJS supporte le rendu holographique lorsque les applications tournent dans le casque Hololens.

HoloJS est disponible sur GitHub.

Minsky, le 1er jeu mobile doté d'une intelligence artificielle deep learning

Soumis par fredericmazue le
Image

Disponible gratuitement sur iOS et Android, le nouveau jeu Minsky rend ludique l'utilisation de l'intelligence artificielle en proposant une chasse aux trésors en réalité augmentée.

Avec Minsky, la chasse aux trésors nouvelle génération arrive sur mobile. Par le biais d'énigmes organisées par catégories, l'utilisateur prend en photo des objets avec son téléphone. L'intelligence artificielle analyse instantanément l'environnement et déduit si le joueur a résolu l'énigme en photographiant le bon objet.

« Après des mois de travail, l'intelligence artificielle embarquée dans l'application Minsky atteint un haut niveau de pertinence. Grâce au deep learning, elle peut désormais reconnaître des dizaines de milliers d'objets de la vie courante aussi bien que des lieux  (boulangerie, gare, ...) et même des éléments encore plus spécifiques comme la race d'un chien », précise Jean-Baptiste Hervet, CEO et fondateur de Minsky.

L'intelligence artificielle de Minsky s'enrichissant perpétuellement, de nouvelles catégories seront régulièrement ajoutées en fonction des affinités de jeu des utilisateurs. Jean-Baptiste Hervet ajoute d'ailleurs que des partenariats sont d'ores et déjà en cours de discussion.

Bientôt des lunettes à réalité augmentée Apple ?

Soumis par fredericmazue le

Oui selon Bloomberg qui s'appuie sur des sources semble-t-il très bien informées, peut-être internes, et souhaitant garder l'anonymat.

Réalité virtuelle et réalité augmentée sont très tendances en ce moment. Sachant qu'Apple cherche un moyen de compenser les ventes à la baisse de ses iPhones, et que Tim Cook manifeste volontiers son intérêt pour la réalité augmentée - notamment pour Pokemon Go - des lunettes à réalité augmentée Apple ne semblent pas utopiques. Même si de son côté Google a abandonné ses Google Glass. En juillet dernier Tim Cook disait très clairement, lors d'une conférence :"Nous pensons qu’il y a de belles choses pour les consommateurs dans la réalité augmentée en plus de grandes opportunités commerciales."

Le projet, s'il aboutit, ne verra pas le jour avant 2018. Mais l'affaire semble très sérieuse, car toujours selon les sources de Bloomberg, la firme à la pomme aurait contacté des fournisseurs et acheté de petits lots de composants, des écrans d'affichage 'près-de-l'oeil' notamment, à des fins d'expérimentation.

Ces lunettes de réalité augmentée seraient connectées à l'iPhone et afficheraient sur leurs verres des informations en provenance de celui-ci.

Apple ne commente pas l'information pour le moment.

Le casque de réalité augmentée HoloLens est commercialisé en France

Soumis par fredericmazue le

Présenté par Microsoft en janvier 2015 et commercialisé aux Etats-Unis et au Canada depuis le 31 mars dernier, le casque de réalité augmentée HoloLens est désormais disponible en précommande en France, en Allemagne, en Australie, en Irlande, en Nouvelle-Zélande et au Royaume-Uni, exclusivement depuis le Microsoft Store. Deux références sont disponibles à l’achat : Microsoft HoloLens Development Edition à 3299€ et Microsoft HoloLens Commercial Suite à 5489€. 

« Depuis le lancement de Microsoft HoloLens, de nombreux développeurs passionnés, ainsi que des entreprises de premier plan ont développé des expériences numériques révolutionnaires » explique Alex Kipman, Directeur de l’ingénierie d’HoloLens, Microsoft Windows and Devices Group. « Nous sommes d’ailleurs particulièrement impressionnés par la variété des scénarios d’usage qu’ils ont pu concevoir. Ensemble, nous n’avons fait qu’effleurer le champ des possibles de la réalité mixte et nous sommes impatients de voir cette dynamique s’étendre aux nouveaux marchés annoncés aujourd’hui. »

Les livraisons d'Hololens sont prévues fin novembre.