À l'intérieur du sumérien, le grand pari d'Amazon sur la réalité augmentée et virtuelle

Amazon fait une entrée remarquée dans l'espace de réalité augmentée et virtuelle avec Sumerian, une plate-forme de développement tout-en-un capable de créer des applications RA et VR pour smartphones et casques et, bientôt, des applications AR / VR qui fonctionnent parfaitement dans votre navigateur.

Dans le cadre de ces expériences, les Sumériens peuvent créer des mondes virtuels immersifs peuplés par des "hôtes", des personnages 3D animés par la même technologie d'intelligence artificielle que celle qui anime Alexa.

Le sumérien est indépendant de la plate-forme. Plutôt que de développer son propre appareil ou casque de marque, Amazon a opté pour l'intégration aux offres existantes. Sumérien repose sur des normes Web ouvertes et prend en charge les solutions ARKit d’Apple et Google ARCore, ce qui signifie que les créateurs d’applications peuvent créer une application sumérienne fonctionnant sous Android, iOS, Oculus Rift, HTC Vive et au-delà.

En tant que nouvel ajout à Amazon Web Services, la tarification de Sumerian repose sur le modèle basé sur l'utilisation du service de ce service au lieu d'un abonnement et se connecte à d'autres services AWS.

Amazon a publié un aperçu sumérien en novembre, au moment de sa première annonce, mais avant son lancement prévu en mai, PCMag a eu un aperçu exclusif de l’application sumérienne et de quelques applications destinées aux clients.

Kyle Roche, directeur général d'Amazon Sumerian, m'a présenté une démonstration de la plateforme de création d'applications 3D. J'ai eu la visite de l'éditeur d'applications de glisser-déposer et de la bibliothèque d'objets 3D de Sumerian, de sa Visual State Machine pour la création de scripts de scènes automatisées complexes, et je suis entré dans le processus de création d'hôtes intelligemment artificiels, avec lesquels vous pouvez avoir une conversation complète dans ces expériences virtuelles..

J'ai également parlé à Marco Argenti, vice-président qui supervise non seulement les divisions AR / VR, mais également les divisions AWS Mobile, Serverless Computing et IoT. Amazon a des projets ambitieux pour le sumérien et une vision encore plus grande du rôle accru que jouent la réalité virtuelle et la réalité virtuelle dans l’avenir de notre futur connecté.

• Pourquoi Amazon parie sur AR / VR

  Se lancer dans une industrie ou un domaine entièrement nouveaux n’a jamais arrêté Amazon auparavant. Il suffit de regarder Whole Foods, Amazon Video ou ses efforts dans les secteurs de la santé et de la pharmacie.

  Roche a plaisanté en disant que le nom de Sumérien venait du livre de science-fiction Snow Crash (qu'Amazon est en train d'adapter en tant que série). et l'idée de "hôtes" est venue de Westworld de HBO . Mais selon Argenti, la décision d’Amazon de pénétrer dans l’espace AR / VR se résumait en réalité à trois facteurs clés: l’émergence de la réalité augmentée sur smartphone; opportunités de RV inexploitées sur le marché interentreprises (B2B); et aider les clients AWS à résoudre leurs problèmes avec des tâches qu'ils essayaient déjà de faire.

  "Ces signaux étaient suffisamment forts pour que nous puissions réellement commencer à concevoir le système sumérien. Selon la méthode classique d'Amazon, nous avons commencé à travailler en arrière à partir de cas d'utilisation de clients, puis à financer une équipe de développement pour construire le produit", a expliqué Argenti.

  Les applications B2B incluent des scénarios tels que l’affichage numérique interactif (pensez à l’énorme hologramme parlant de Blade Runner: 2049 ), la formation virtuelle et de nombreux cas d’utilisation industrielle de l’Internet des objets, tels que l’utilisation de capteurs pour créer des jumeaux numériques et des simulations complexes. Argenti a également souligné l’importance pour les AR basés sur les smartphones d’atteindre un point d'inflexion via ARKit et ARCore.

  "La caméra devient un outil très puissant pour interagir avec la réalité et explorer le monde qui vous entoure", a-t-il déclaré. "Les processeurs graphiques rapides peuvent superposer des informations en temps réel et les capteurs peuvent aider à construire une réalité 3D. L'idée est que vous avez un capteur de haute qualité, haute définition, sensible au contexte, entre les mains de centaines de personnes."



Comment Amazon construit sumérien

Amazon a commencé à réfléchir à ce à quoi ressembleraient la réalité virtuelle et la réalité virtuelle pour les clients AWS à la fin de 2016, et un aperçu a fait ses débuts chez AWS re: Invent environ un an plus tard. Entre temps, quelques événements se sont produits.

Premièrement, Amazon a acheté une start-up suédoise en faillite appelée Goo Technologies; son environnement de création 3D, Goo Create, est devenu la base de l'environnement de développement intégré (IDE) de Sumérien.

La modélisation 3D visuelle de Goo Create était également un service cloud basé sur le Web, mais Amazon est allée encore plus loin en transférant le back-end vers AWS. Construire sur l'infrastructure cloud évolutive que vous possédez déjà présente de nombreux avantages, mais l'un d'entre eux réduit considérablement la latence. Selon Roche, l'un des principaux arguments de vente du sumérien est que, malgré la puissance de son éditeur, il n'y a rien à télécharger ou à installer. Au cours de la démonstration, le sumérien s'est chargé à partir d'une URL de navigateur en quelques secondes. Même le traitement en temps réel du langage naturel (NLP) et le rendu d'animations élaborées ne l'ont pas beaucoup ralenti.

Comme pour les plates-formes de développement à faible code, le sumérien peut être utilisé à un niveau de base avec une expérience quasi-inexistante. Cependant, les codeurs et les scientifiques de données peuvent aller beaucoup plus loin avec les API programmables et l'interface de ligne de commande de Sumerian pour personnaliser les scènes et écrire la logique d'application complexe.

"Nous voulons une expérience où vous cliquez et où vous êtes immédiatement dans la scène", a déclaré Argenti. "Ensuite, vous avez des outils graphiques 3D où vous pouvez faire glisser des objets. Le sumérien est un outil visuel qui peut associer ce qui se produit lorsque des actions ou des événements ont lieu, potentiellement sans écrire de ligne de code."



Création d'applications sumériennes 3D

La philosophie de conception plus large suivie par Amazon avec le sumérien consiste à consolider autant que possible l'expérience de création. Roche a expliqué que l’idée était de masquer une grande partie des tâches de développement répétitives. Le processus de base de la création d’une application sumérienne est donc le même, quelles que soient les plateformes AR et VR sur lesquelles vous la publiez.

Tout commence par le choix d'un modèle ou par le saut direct dans la création d'une nouvelle scène. Certains modèles par défaut de Sumérien incluent des scènes telles que des espaces de bureau, des salles de formation et des entrepôts, un cargo et un feu de camp en plein air. L'éditeur principal prend en charge WebGL et WebVR, et est présenté de la même manière que la plupart des outils de code faible que nous avons testés.

Sur la gauche se trouve un panneau d'entités. Une entité est essentiellement une table dans une base de données qui vous aide à gérer les données extraites dans votre application. En dessous se trouve la fenêtre d'actifs, dans laquelle vous pouvez rechercher les objets que vous souhaitez insérer dans une scène ou ouvrir la bibliothèque d'actifs complète de tous les modèles 3D de Sumérien. Selon Roche, le sumérien utilise un certain nombre de bibliothèques d'objets open-source et s'intègre à l'API Sketchfab. Amazon est également intéressé par l'intégration avec des plateformes telles que TurboSquid et la bibliothèque d'objets Poly AR / VR de Google, a-t-il déclaré. Vous pouvez également importer vos propres ressources en sumérien et les déposer dans une scène.

"Le panneau d'actifs peut servir de zone de largage pour un pipeline d'ajustement", a expliqué Roche. "Vous pouvez faire glisser les formats de fichiers 3D les plus courants; nous les convertissons, les optimisons et les stockons pour vous. Une des choses que nous faisons sur le back-end est que si vous utilisez le même élément dans plusieurs scènes, vous allez créer un lien de référence."

Au centre de l'écran se trouve le canevas principal, dans lequel vous pouvez faire glisser des éléments et des modèles 3D dans une scène. Dans le coin du canevas se trouve un bouton permettant de lancer un aperçu WebVR de votre scène.

En dessous se trouve l'éditeur de chronologie, qui fonctionne de la même manière que les outils de montage vidéo. Lorsque vous insérez des animations et des sons dans des images et que vous utilisez la Visual State Machine pour créer des actions, des comportements d'hôte et des progressions d'événement, tout cela s'affichera dans la timeline, où vous pourrez ajuster le passage d'un état à un autre.

La colonne de droite est le panneau de l'inspecteur, qui affiche les détails de tous les composants que vous regardez et comment vous pouvez les personnaliser. Pour un modèle comportant une centaine de variations différentes, vous pouvez ajuster des éléments tels que les attributs et les textures sans toucher à la scène.



La stratégie d'Amazon: s'intégrer à tous

Sumérien joue non seulement dans l’espace de développement 3D avec des plates-formes telles que Unity, Unreal Engine et Vuforia, mais également dans l’écosystème plus vaste de la RA / VR, avec ARKit, ARCore et Windows Mixed Reality. Selon Roche, le sumérien applique la philosophie "Construire une fois, exécuter n'importe où" aux applications de RA / VR et en particulier aux développeurs d'entreprise.

"Les développeurs Pro 3D ou les animateurs professionnels travaillent dans un studio. Mais la plupart sont des développeurs Web ou mobiles qui apprennent quelque chose comme Unity sur le tas", a déclaré Roche. «L’unité, c’est génial, mais pour être vraiment bon, il est bien plus difficile de miser sur les compétences qu’ils ont - comme s’ils maîtrisent JavaScript - et de les intégrer ainsi à la 3D. Nous avons donc décidé de nous concentrer sur cela. une partie du marché"

Sumerian prend en charge plusieurs normes ouvertes fondamentales: WebGL, WebAR, WebVR et le futur framework WebXR qui apportera les applications AR / VR à tous les appareils et navigateurs de toutes les plateformes. Le World Wide Web Consortium (W3C) votera en faveur de la ratification de WebXR dans les prochains mois. À ce stade, les applications sumériennes pourront s'exécuter directement dans les navigateurs.

Entre WebGL, WebVR et WebXR, Sumerian est totalement indépendant de la plate-forme et les wrappers natifs publiés par Sumerian s'intègrent directement à ARKit et ARCore pour les applications AR basées sur un smartphone. Selon Roche, Sumérien peut créer des applications pour toutes les plates-formes prenant en charge WebVR, ce qui signifie non seulement Oculus Rift et HTC Vive, mais également Samsung Gear VR, Google Daydream View, etc. Sumérien travaille également en étroite collaboration avec l'équipe Google Chrome sur WebXR pour les applications basées sur un navigateur.

L'autre acteur majeur dans la salle est Microsoft. Bien qu'Amazon n'aille pas jusqu'à dire que Sumérien s'intégrerait à l'écosystème Windows de réalité mixte, Roche a précisé que la dernière version RS4 de Microsoft HoloLens inclut la prise en charge de WebAR, ce qui signifie que Sumérien peut exécuter des scènes HoloLens. Amazon regarde également d'autres casques de sociétés telles que Magic Leap et Meta, mais son approche donne au sumérien l'avantage de la flexibilité.

"Nous avons fait un choix. Nous aurions pu créer notre propre système de propriété et pousser les développeurs vers cela", a déclaré Argenti. «Ce que nous avons décidé à la place, c’est d’être aussi large que possible pour soutenir ce que nous pensons être un marché gigantesque. Une fois que tout se déplacera vers WebXR, tout l’écosystème d’appareils viendra avec. Nous poursuivons les fondements sous-jacents.»

• Les hôtes de l'IA de Sumérien changent la donne

  Les hôtes sont l'un des arguments de vente les plus uniques du sumérien. Un hôte est un personnage animé en 3D que vous pouvez placer dans une scène AR ou VR. Les utilisateurs peuvent poser des questions aux hôtes et les développeurs peuvent créer un script pour un ensemble complexe d'actions, de comportements, de gestes et de mouvements qu'un hôte peut effectuer lors de ses conversations et de ses scènes. Amazon a inspiré des hôtes de toutes sortes d'endroits, y compris des jeux en ligne tels que Second Life et The Sims, a déclaré Roche.

  Sumérien a actuellement deux hôtes par défaut - Cristine et Preston - mais lancera toute une série d’hôtes au cours de cette année. Amazon a construit beaucoup de nuances dans ces personnages IA. Roche m'a montré une démo de Cristine où il a entraîné l'hôte dans la scène et a ouvert le panneau des inspecteurs pour personnaliser ses émotions, ses expressions faciales et ses gestes. Amazon générera automatiquement des gestes lorsque l'hôte parle en fonction du traitement de la conversation en langage naturel. Donc, si Cristine dit «Salut», cela pourrait déclencher un geste de la main.

  Avec quelque chose appelé un système de point d'intérêt, vous pouvez cocher une case dans l'éditeur pour que les yeux de l'hôte fassent toujours attention à la caméra. Ainsi, si vous portez un HTC Vive Pro à pied dans un espace à 360 degrés, l'hôte peut vous suivre. S'il s'agit d'une application AR connectée à l'appareil photo de votre smartphone, Roche a expliqué que le système d'apprentissage approfondi Rekognition d'Amazon peut exécuter une analyse faciale de votre position actuelle et de celle de votre visage dans le cadre pour donner l'impression que l'hôte regarde en arrière sur votre écran. directement à vous. Cela vous donne l'illusion d'un contact visuel.

  Les clients peuvent également créer leurs propres hôtes personnalisés à l'aide du kit de développement logiciel Maya d'Amazon, mais Amazon fournit le squelette de base à partir duquel vous pouvez ajuster l'apparence, le dialecte et les inflexions, la langue, etc. d'un hôte. À long terme, Amazon réfléchit à des moyens de faciliter la création d’hôtes. Argenti a évoqué l’idée d’un générateur d’hôte pour les avatars à la première personne, ou l’utilisation de la reconnaissance faciale pour faire correspondre les personnages rendus à des personnes réelles.

  "En conjonction avec Rekognition, si nous générons de manière procédurale autant de caractères que possible, nous pouvons essayer de vous mettre en correspondance avec l'avatar le plus proche. Nous prenons votre photo et exécutons la reconnaissance faciale inversée et la faisons correspondre à un caractère aléatoire pour vous donner un hôte qui ressemble à une version de vous ".

  Argenti a expliqué comment l'intégration d'autres services AWS, comme le service de traitement en langage naturel Amazon Comprehend, pourrait rendre les hôtes encore plus réalistes. Comprendre analyse le texte pour extraire des métadonnées sur des éléments tels que l'analyse de l'humeur et des sentiments. Ainsi, un hôte peut avoir une expression faciale ou une manière différente, ou parler en fonction de l'humeur de la personne avec laquelle il interagit.

  "S'ils sont en colère, peut-être que leur hôte les calmera", a déclaré Argenti. "Il y a une évolution non seulement dans la manière dont nous transmettons les informations, mais également dans la manière dont nous les présentons via une analyse en profondeur des sentiments"



Tirer les services vocaux derrière Alexa

Les hôtes ne sont pas très bons s'ils ne peuvent pas parler. Vous ne pouvez pas dire "Hey Alexa" dans une application sumérienne de la même manière que vous pouvez activer Cortana dans Windows Mixed Reality. Au lieu de cela, Amazon utilise les API de reconnaissance vocale automatique et de compréhension du langage naturel derrière Alexa pour permettre aux hôtes d’avoir des conversations.

Le sumérien est intégré à Amazon Lex et Amazon Polly. Polly est un service de synthèse vocale qui transforme le texte en scripts pouvant être parlés par un hôte. Lex est un moteur PNL pour la création d'interfaces de conversation. Il permet aux hôtes de comprendre et de réagir aux propos des utilisateurs au sein d'une application AR ou VR. Le sumérien prend actuellement en charge plus de deux douzaines de langues par le biais de Polly, et une fonction de synchronisation labiale associe les mouvements de la bouche de l'hôte à la cadence de la langue ou de la parole.

"La voix est un média qui a du sens lorsque vous êtes immergé dans la RA ou la VR", a déclaré Argenti. "Je veux parler à un personnage si je peux le voir se tenir là. Nous avons donc choisi deux de ces outils du groupe d'IA et avons essayé de les personnifier réellement. Nous voulons que la scène puisse écouter et nous répondre. vous pouvez prendre un flux complet de Lex comme vous le feriez pour un chatbot et le faire simplement glisser sur le personnage. À bien des égards, il est en fait plus facile que de développer une compétence Alexa."



Logique de script dans des mondes immersifs

Visual State Machine de Sumérien est l'endroit où vous pouvez mettre en forme des séquences complexes et des simulations virtuelles. À l'aide de l'éditeur de scénario visuel ou de l'interface JavaScript complète, les créateurs et les développeurs d'applications peuvent créer une logique de script contrôlant la manière dont les hôtes ou d'autres objets de vos scènes répondent à différentes actions. Par exemple, sumérien inclut un objet drone volant sur lequel vous pouvez utiliser un script pour voler.

Tout cela devient plus compliqué lorsque vous introduisez des objets du monde réel dans l'équation. Comme Argenti supervise également les divisions informatique sans serveur et IoT chez AWS, il a expliqué comment la connexion de services sumériens à AWS tels que Lambda et Greengrass peut offrir davantage de possibilités pour des simulations complexes. Greengrass permet aux modèles d’apprentissage automatique de fonctionner localement sur des appareils IoT eux-mêmes. Pensez à une formation de modèle ML sur les données d'une machine située dans une usine, puis transférez cet algorithme en sumérien pour simuler cette même machine en utilisant l'IA.

"Il pourrait vraiment y avoir un monde simulé en réalité virtuelle et en réalité où chaque personnage ou objet est intelligent grâce à une formation en apprentissage automatique dans le monde réel", a déclaré Argenti. "En fin de compte, vous voulez essayer de recréer la réalité de la manière la plus réaliste possible. Aujourd'hui, nous pouvons nous en approcher, mais ce n'est pas encore tout à fait du point de vue comportemental pour simuler le fonctionnement réel des choses."



Météorologue simulé de Weatherbug

Quand Amazon m'a présenté quelques démonstrations de sumérien, j'ai d'abord été surpris par le fait que la première était une application météo.

Mais comme l'explique Olivier Vincent, directeur général de WeatherBug, la réalité virtuelle est beaucoup plus logique que vous ne le pensez pour les données météorologiques. Alors que les gens commençaient à vérifier la météo dans leurs applications plutôt que de regarder les prévisions à la télévision, M. Vincent a déclaré que les bulletins météo avaient perdu l'un de leurs meilleurs atouts: votre météorologue local devant un écran vert.

"La météo consiste à vous raconter ce qui se passe à un moment donné à un endroit donné. Vous pouvez le faire en 2D de manière agréable dans votre application pour un aperçu rapide, mais nous savions à quel point les météorologues étaient populaires au fil des ans", dit Vincent "L'idée est donc de réintroduire cette personne météo dans une expérience plus immersive de l'application."

WeatherBug a construit une scène sumérienne avec un studio d’information virtuel avec un bureau d’ancrage et des écrans verts, et a invité l’hôte par défaut de Cristine, Amazon, en tant que météorologue. L'application extrait les données météorologiques actuelles de votre position que l'hôte vous lira ensuite dans le cadre d'une prévision météorologique personnalisée. Depuis l’application principale WeatherBug, Vincent a lancé le visualiseur VR permettant de faire un zoom sur un modèle 3D de Manhattan selon les prévisions de Cristine, avec des températures élevées et basses et des flocons de neige tombants.



Addison, le soignant virtuel

Electronic Caregiver, une société de technologie de gestion de la santé basée au Nouveau-Mexique, a vécu une expérience sumérienne bien différente.

La société propose une technologie pour les personnes âgées comme un ordinateur portable doté d’un bouton d’aide médicale, mais elle a également mis au point une solution appelée Addision Care, qui réduit les coûts des soins à domicile et utilise l’IA conversationnelle pour évaluer les risques de chute des patients âgés. L'entreprise propose aux pharmaciens, aux hôpitaux et aux cliniciens un kiosque analysant la démarche d'un patient à l'aide d'un apprentissage automatique. Le logiciel utilise également Addison, un hôte sumérien personnalisé, pour guider les utilisateurs dans un questionnaire verbal sur leur histoire d’automne.

"Inciter les personnes âgées à adopter la technologie n'est pas si facile", a déclaré Bryan Chasko, CTO de Electronic Caregiver. "À mesure que la situation s'améliorera, la technologie vocale impliquera ce marché. Vous ne les obtiendrez jamais de s'asseoir devant un clavier et une souris, mais avec Addison, ils peuvent simplement avoir une conversation."

Electronic Caregiver travaille sur Addison depuis des années, développant le personnage 3D avec Amazon Lex et Polly. La société est l’un des clients AWS qui ont aidé Amazon à conceptualiser les problèmes qu’elle pourrait résoudre avec le sumérien et sur la manière d’automatiser le pipeline de création d’applications AR / VR.

Judah Tveito, développeur virtuel chez Electronic Caregiver, a déclaré que le sumérien avait utilisé les processus sur lesquels il travaillait depuis des mois et les avait transformés en quelques clics. La société travaille également sur une application mobile Addison.

Electronic Caregiver envisage finalement Addison comme un fournisseur de soins virtuel à domicile, a déclaré Chasko. Pour les utilisateurs âgés qui vivent seuls, l'IA peut notamment leur rappeler de prendre des médicaments ou appeler automatiquement le 911 en cas de chute ou autre urgence médicale.

«L’un des plus gros problèmes que nous puissions résoudre est l’isolement que ressentent les aînés qui vivent seuls», a déclaré Chasko. "Nous voulons vraiment avoir un environnement familial permanent, 24 heures sur 24, 7 jours sur 7 où, lorsque vous ne parlez pas à Addison, vous êtes dans la salle de bain et vous tombez. Le simple fait de crier:" J'ai besoin d'aide "pourrait sauver de nombreuses vies"



The Moneymakers: B2B et IoT

Amazon a beaucoup parlé de la façon dont les applications sumériennes pourraient vivre dans l'affichage dynamique numérique. Imaginez une personne marchant dans le hall d'un hôtel, un centre commercial ou un stade et voyant un hôte marchant à leurs côtés sur un écran. Cela peut sembler un peu effrayant, mais les hôtes peuvent également traiter des informations contextuelles telles que la localisation pour transformer la publicité en conversation personnalisée. Argenti considère les hôtes comme des extensions virtuelles de la marque d’une entreprise qui pourraient évoluer en fonction des besoins de l’entreprise.

"Si vous installez ces applications quelque part avec une caméra, vous pouvez imaginer un personnage 3D engageant avec vous personnellement: vous savez qui vous êtes, peut-être la dernière fois que vous êtes allé dans la salle, ou même la dernière chose que vous avez commandée", a déclaré Argenti.

"Un navire de croisière est un bon exemple. L’hôte pourrait vous dire:" Hé, selon votre situation actuelle, votre réservation dans 20 minutes, vous n’allez pas le faire. Voulez-vous que je le repousse 15 minutes - Les expériences que vous recréez ont également un aspect visuel: un hôte qui vous parle de voyages aura un aspect différent de celui qui vous parle de vos stratégies financières. L'ajout d'informations de lieu pourrait faire changer les caractères en fonction de l'endroit où vous vous trouvez. ils se retrouvent eux-mêmes; la façon dont ils s'habillent, et la façon dont ils bougent, les inflexions qu'ils ont."

Amazon explore une gamme d'applications B2B et IoT pour les clients sumériens. Sur le plan industriel, Argenti a déclaré que Nokia avait mis au point un système avec des capteurs et des visualisations pour surveiller l'environnement à l'intérieur des conteneurs d'expédition, afin de mesurer des éléments tels que la température intérieure et l'absorption des chocs sans les ouvrir.

"Vous pouvez imaginer un monde de RA où nous connectons des millions de périphériques à AWS et obtenons beaucoup de données sensorielles provenant du monde réel", a-t-il déclaré. "Nous pouvons ensuite utiliser AR avec triangulation pour identifier un objet et y afficher des informations pertinentes. Il est extrêmement applicable à tout ce qui va de l'entretien à la réparation en passant par la surveillance, la sécurité, etc."

Il existe également de nombreuses possibilités de commerce électronique lorsque vous utilisez des actifs virtuels. Tout modèle 3D en sumérien issu du propre catalogue d’achat d’Amazon a le potentiel de générer des frais de parrainage des développeurs si vous l’ajoutez à une scène AR / VR. C'est un moyen pour les entreprises et les petites entreprises et les développeurs indépendants sur AWS de monétiser leurs applications sumériennes.

Argenti envisage de nombreuses opportunités de croisement entre les divisions de vente au détail sumériennes et Amazon.

"Nous pouvons relier une partie du travail que notre équipe de vente au détail réalise dans l'ameublement, les appareils électroniques domestiques et d'autres articles de grande valeur pour créer des modèles 3D", a-t-il déclaré. "Ensuite, vous pouvez les utiliser pour une passe photoréaliste d'un espace. Comment installer un loft moderne? Quels types de meubles organisons-nous?"



Tout revient à AWS

Créer des passerelles vers tous les appareils et plates-formes AR / VR constitue un moyen astucieux de réduire l’obstacle au développement de la RA / VR, non seulement pour les entreprises B2B, mais également pour les développeurs. En même temps, l'incitation commerciale la plus convaincante derrière Sumérien est un outil permettant de développer une utilisation plus large d'AWS. Cela vaut tant pour les clients existants qui testent le nouveau service que pour les nouveaux utilisateurs sumériens qui commencent ensuite à utiliser les services de stockage, de calcul, de traitement, d'intelligence artificielle et autres d'Amazon, car ils sont tous intégrés à l'expérience. Le modèle de tarification est également attrayant, car Amazon n'impose aucun frais initial. AWS facture uniquement ce que vous utilisez.

Cela fait partie de ce qu'Amazon considère comme une boucle plus grande où tout se fait par AWS. Les données proviennent d'un périphérique IoT, sont traitées par une fonction AWS Lambda, déployées sur AWS Greengrass pour se rendre à AWS IoT, où elles forment un module d'apprentissage automatique, et sont finalement extraites en tant que modèle 3D dans une visualisation AR en sumérien.



La vision d'Amazon pour notre avenir AR / VR

Amazon espère que les Sumériens pourront jouer un rôle en incitant l’industrie à créer des produits 3D grand public et à réduire les coûts. De son côté, Argenti a déclaré que les catalyseurs de base sont en place grâce à ARKit et ARCore. Il a ajouté que le moment critique serait que les développeurs aient suffisamment d'applications et de vidéos. Du côté de la réalité virtuelle, les grands changements attendus par Amazon sont les prix des équipements, l’usure des vêtements et le sans fil.

«Lorsque cela se produit et que vous pouvez porter une expérience de réalité virtuelle comme une paire de lunettes, la réalité virtuelle décollera vraiment», a déclaré Argenti. «Je pense que cela doit être aussi naturel que de regarder une vidéo sur une tablette ou d'allumer une télévision avant que celle-ci ne soit prête pour la consommation grand public au même niveau que les autres écrans que nous avons aujourd'hui. Pour ce faire, développez tout un écosystème de créateurs de contenu, d'annonceurs, d'utilisateurs finaux et d'entreprises s'adressant à ces utilisateurs. ”

Argenti a également souligné l'importance de l'immersion dans les expériences de réalité virtuelle et mixte. L'éducation et la formation constituent un autre cas d'utilisation cible des applications sumériennes par Amazon. Que vous appreniez à utiliser un appareil médical, à réparer un véhicule ou à apprendre une nouvelle langue, il a déclaré que le but était de vous laisser tomber dans un environnement aussi visqueux que possible, comme dans le monde réel.

«Vous pouvez vous asseoir dans un bistrot français et apprendre la langue sans y être réellement», a-t-il déclaré. «Les avatars de l'hôte vous parlent en français. Les menus sont en français. Et puis, dans cette réalité, vous pourriez peut-être automatiquement toucher un menu et le voir traduire, en passant votre doigt sur un élément pour voir les mots changer dans une autre langue. Une grande partie de l'éducation est contextuelle et, par conséquent, en tant qu'outil d'apprentissage, avoir une expérience qui engage tous vos sens est puissant. ”