Accueil / Réalité Virtuelle / VR et AR : Toutes les annonces de la conférence Facebook F8 2018
facebook-f8-vr-ar

VR et AR : Toutes les annonces de la conférence Facebook F8 2018

La conférence F8 de Facebook a destination des développeurs vient de s’achever et avec elle Facebook a dévoilé son lot de nouveauté concernant la réalité virtuelle et la réalité augmentée. GoGlasses vous propose un tour d’ensemble des annonces de F8 concernant la VR et l’AR.

Au même titre que la conférence Build de Microsoft ou la Google I/O, la conférence F8 de Facebook qui a lieu chaque année et présenté par Mark Zuckerberg lui-même est un des évènements majeurs de l’écosystème des développeurs qui profitent de cette dernière pour se mettre à jour sur leurs applications et viennent se tenir au courant des prochaines nouveautés du premier réseau social mondial. Cet évènement est important pour l’ensemble de l’écosystème puisque Facebook en profite pour faire des annonces sur l’amélioration de son propre réseau social, mais également pour annoncer les différentes nouveautés sur les autres produits et applications qu’il possède (Instagram, WhatsApp), ainsi que sur les projets R&D qu’il développe en interne (on se souvient par exemple l’année dernière de l’interface de communication en BCI proposée par une chercheuse de Facebook our dicter un message « par la pensée »). Si les annonces ont été nombreuses cette année, nous nous concentrerons seulement sur les nouveautés autour de la réalité virtuelle et de la réalité augmentée. C’est parti !

Pour revoir la conférence F8 2018, c’est juste ci-dessous :

Oculus Go : Facebook dévoile officiellement son nouveau casque VR

Cela fait maintenant déjà plusieurs mois que l’on sait que Facebook va sortir un nouveau casque VR autonome nommé Oculus Go. On connaissait déjà toutes ses caractéristiques, mais on attendait de le voir sur scène pour prendre l’ampleur de ce nouveau casque. C’est Hugo Barra, le Vice-Président VR d’Oculus, qui l’a lui-même présenté lors d’un Unboxing complet et qui donne très envie d’avoir ce casque entre les mains et de tester les très nombreuses applications déjà disponibles.

Pour rappel, l’Oculus Go est un casque VR dit « autonome », c’est-à-dire qu’il ne nécessite à aucun moment de posséder un ordinateur compatible ou bien un smartphone pour l’insérer (comme cela était le cas sur les casques VR type Samsung Gear VR ou Google Cardboard). Les casques VR autonomes sont bien la prochaine génération de casques de réalité virtuelle qui va probablement réellement lancer la réalité virtuelle auprès du grand public. Pour un prix à 199$, il a fort à penser que ce casque VR va faire parti des best-sellers des ventes VR en cette année 2018.

Vous êtes perdu sur le marché de la réalité virtuelle ? Vous ne savez pas quel type de casque VR acheter pour vos besoins ? GoGlasses vous fournit un comparatif très complet sur les meilleurs casques VR autonome du marché en 2018. Vous trouverez toutes les explications nécessaires pour savoir quel type de casque VR vous procurer en 2018.

Comparatif des meilleurs casques VR autonome 2018

Facebook annonce les photos 3D sur le Newsfeed

Facebook souhaite aller encore plus loin dans le partage du contenus en proposant toujours de partager de nouveaux contenus. Après les photos, la vidéo, les photos 360 et vidéos 360 ainsi que les objets 3D, Facebook voudrait maintenant que vous puissiez partager des photos 3D. Pour l’heure on en sait encore très peu sur la fonctionnalité et la manière dont cela va fonctionner. On pense particulièrement à l’ancienne application Seene (racheté par Snapchat) qui permettait de capturer des photos « 3D » ou tout du moins qu’on pouvait regarder sous une autre perspective. On imagine que Facebook va probablement mêler cela avec ses algorithmes de deep-learning et probablement avec son application VR Memory, mais pour l’instant pas vraiment plus d’informations sur ce sujet. Quoi qu’il en soit, cette future fonctionnalité de la part de Facebook montre bien que le réseau social a bien l’objectif de fournir les meilleures technologies de partage pour un internet encore plus immersif.

VR Memory : la reconstruction en réalité virtuelle de vos souvenirs

VR Memory est également une application qui va être proposé prochainement par Facebook et qui se base sur ses algorithmes d’intelligence artificielle.

La fonctionnalité est un peu particulière, surprenante et semble presque…magique à tel point qu’on a du mal à comprendre exactement comment cela fonctionne. Le principe est le suivant : imaginons que vous soyez à un anniversaire et que vous preniez plusieurs photos de ce moment pour l’immortaliser. Et bien en plus d’avoir ces photos 2D, Facebook va vous proposer de revivre ce moment en réalité virtuelle avec une reconstruction de l’environnement dans lequel a été pris la photo. Un environnement d’ailleurs plutôt flou et constitué de différents points. Sur la vidéo, la reconstruction semble fidèle et on semble distinguer l’intérieur de la maison même si cela n’est clairement pas net. D’un point de vue technique, il nous est précisé que cela est possible grâce à des algorithmes développés par les équipes de Facebook. On ne sait pas encore quand cette application sera possible à utiliser et combien il lui faudra de photo pour avoir un rendu « fidèle » (on a du mal à comprendre comment avec seulement quelques photos, la question des proportions est gérée par exemple). En outre, si cette application parvient effectivement à créer un environnement en réalité virtuelle de votre souvenir on peut s’interroger sur les questions de vie privée si Facebook rentre dans les moindres détails de votre maison… A l’inverse, si en quelques photos vous pouvez recréer un environnement en réalité virtuelle proche de la réalité (type photogrammétrie), de nombreux domaines (immobilier, voyage…) vont s’intéresser à cette fonctionnalité pour proposer à leurs clients de nouvelles expériences !

Oculus TV

oculus-tv-990x543

Et si vous regardiez la télévision depuis votre Oculus Go ? Si pour l’heure ce n’est pas encore le cas, c’est un des objectifs poursuivi par Facebook avec sa prochaine application Oculus TV qui sortira plus tard dans l’année 2018. Pour l’heure le streaming n’est pas encore supporté. Si certains peuvent avoir du mal à penser que regarder la télévision dans un casque VR n’est pas vraiment un bon usage, repensez rapidement à ce que le mobile a apporté à la télévision et comment il devient un vecteur extrêmement important de visionnage de vidéo / TV et vous verrez que la télévision sur un casque VR autonome n’est peut-être pas un usage si éloigné qu’on ne le pense. Il faut d’abord résoudre la problématique du streaming puisque vous devez streamer un film / émission en 2D dans un environnement en 3D temps réel qui va probablement intégrer du social VR. On en est pas encore là mais vous pourrez dès cette année tester ce type d’application sur Facebook. On est, pour notre part, très curieux de ce que cela va donner.

Les avatars en 3D deviennent encore plus réalistes

avatar-facebook-f8-990x535

C’est une des très bonnes nouvelles de cette keynote : Facebook améliore sans cesse ses avatars en VR pour qu’ils soient de plus en plus réalistes. L’objectif est, comme nous l’explique le CTO de Facebook Mike Schroepfer, de prendre une photo d’une personne et grâce à des capteurs pouvoir l’animer grâce à des expressions. Dans quelques années on pourra probablement avoir un avatar totalement en 3D nous reproduisant parfaitement et que nous pourront utiliser dans un environnement en réalité virtuelle. Absolument parfait pour un environnement de social VR et donner un côté encore « plus réaliste » à cette réalité virtuelle !

AR Plateforme : du nouveau pour la réalité augmentée

La plateforme pour créer du contenu en réalité augmentée nommé AR Studio n’est pas nouvelle sur Facebook. On vous en parlait déjà en détail et nous avions testé sur GoGlasses il y a quelques mois. Mais avec F8, les développeurs de chez Facebook on annoncé de nouvelles fonctionnalités qui sont détaillées sur le site :

  • Tracking: Use AR Target Tracker, Body Tracking, Hand Tracking, High-Fidelity Face Tracking, and more to follow movement and tie it to your experience
  • Patch Editor: Control audio, manipulate materials, add interactions, and even create your own shaders without writing a single line of code
  • Free-to-use assets: Add ready-made sound files from Facebook’s free library and 3D models through our partnership with Sketchfab
  • Background Segmentation: Separate people from their background, create experiences that transport people to different places
  • Location AR: Tie your AR effects to places in the real world, making pre-determined experiences available when people get to a certain location
  • Semantic Scene Understanding: Create experiences that are contextually aware, like having heat waves rise up when a coffee cup is recognized in the scene
  • Analytics for AR effects published by Facebook Pages (coming soon): Track the reach and engagement of your Page’s published AR experience by measuring impressions, captures, and shares
  • 3D Posts in Camera: Take a 3D post from News Feed and experience it in your world with Facebook Camera on your mobile device

Vous avez donc à disposition un logiciel facile d’utilisation pour créer des filtres en réalité augmentée que vous pourrez ensuite partager sur Facebook et Instagram. Vous n’avez plus qu’à laisser libre court à votre imagination !

Instagram : les développeurs peuvent créer leurs propres filtres en réalité augmentée

Depuis déjà quelques mois, Instagram a repris le même principe que Snapchat : à savoir la possibilité d’intégrer des filtres en réalité augmentée sur son réseau social de partage de photo. C’est aujourd’hui une fonctionnalité totalement adoptée par les utilisateurs qui l’intègrent de plus en plus dans leurs Stories. Toutefois, à l’origine ce type de filtres n’étaient pas disponibles pour les développeurs tiers qui ne pouvaient pas créer de nouveaux filtres. C’est maintenant chose possible avec la plateforme AR Studio. Des partenariats avec des grandes marques ou personnalités tels que Vogue, Kelly Jenner ou encore Buzzfeed sont en train d’être tissés pour ces sociétés et influenceurs puissent créer du contenu pour leurs utilisateurs. Une fonctionnalité qui très probablement faire beaucoup parler d’elle dans les prochains mois et que l’on va voir de plus en plus.

Facebook et Sketchfab : un partenariat pour la 3D

On soulignera enfin le partenariat entre Sketchfab et Facebook sur la plateforme AR Studio. En effet, depuis le logiciel vous avez accès directement à des milliers, voire des millions d’assets 3D pour créer soit des filtres en réalité augmentée, soit directement pour les visionner dans votre environnement réel en AR. Une belle opportunité pour un grand nombres de domaines d’uploader des contenus 3D sur le plateforme Sketchfab et pour les partager ensuite avec ses amis ou ses clients (immobilier, e-commerce, culture, journalisme…). Dans les prochains mois on s’attend à ce que cette fonctionnalité soit de plus utilisée. On s’attend également à ce que d’autres plateformes comme GooGle Poly soient également compatibles afin d’agrandir encore plus les choix disponibles sur la plateforme AR Studio.

A propos de Milan Boisgard

Fondateur du site GoGlasses.fr, je cherche à comprendre et à analyser le phénomène de réalité virtuelle et augmentée pour en tirer des usages concrets et développer le domaine.