Meta Connect 2023 : Plus d’IA, blocage intelligent Ray Ban et réalité mixte

Chaque année, l’événement Meta Connect de deux jours est une célébration pour les développeurs et les passionnés de réalité virtuelle du monde entier.

Avec de nouvelles annonces de produits physiques et de fonctionnalités pour la suite d’applications Meta, Mark Zuckerberg et son équipe ne manquent jamais de capter l’attention de l’utilisateur quotidien de Facebook ou du fan dévoué de Quest.
Cette année n’était pas différente non plus.

Mission 3 : De la réalité virtuelle à la « réalité mixte »

La première annonce, et la plus attendue, a été l’introduction de Quest 3, le nouvel appareil de réalité mixte grand public de Meta. Après le succès et la popularité généralisée de Quest 2, cette annonce était quelque chose que les fans et les développeurs de VR attendaient depuis des années.

Dès la première impression, Quest 3 est le successeur louable de Quest 2, qui a vraiment changé le paysage de la réalité virtuelle et de son utilisation dans la consommation multimédia personnelle.

La nouvelle version est encore plus prometteuse avec son format ergonomique sans fil et, surtout, son format plus fin.

De nouvelles lentilles plates et un corps redessiné ont permis au Quest 3 d’être 40 % plus fin que son prédécesseur. Outre les objectifs, l’écran lui-même a reçu une mise à niveau majeure avec dix fois plus de pixels que la génération précédente, une résolution 4K et une précision des couleurs améliorée. L’audio 3D amélioré permet une expérience plus immersive sous le capot.

En termes de spécifications, le nouveau Quest 3 est désormais équipé de la puce Snapdragon XR2 Gen 2, plus performante, spécialement conçue pour alimenter les appareils VR, MR et XR.

Bien qu’elle soit toujours livrée avec une paire de contrôleurs mis à jour et simplifiés, cette puce puissante permet un suivi manuel plus précis, faisant du Quest 3 une expérience presque sans contrôleur comme l’Apple Vision Pro.

Mais la renommée du Quest 3 réside dans son excellente capacité de cartographie grâce à ses caméras et capteurs intégrés. Contrairement aux anciens matériels Quest, Meta commercialise en fait le Quest 3 en tant qu’appareil de réalité mixte, abandonnant son personnage VR. Ce changement de marketing semble plus logique et cohérent, compte tenu du fonctionnement réel des appareils.

Là où le Quest 2 et le Quest original ont été présentés comme des outils de réalité virtuelle permettant aux utilisateurs de se glisser dans un monde virtuel, le Quest 3 renverse la situation et adopte une approche quelque peu opposée. Au lieu de placer l’utilisateur entièrement dans une réalité virtuelle, il augmente la réalité virtuelle au sein de notre réalité 3D, créant un pont accessible entre le virtuel et le réel.

Grâce aux capacités de cartographie de caméra et au capteur de profondeur dédiés du casque, Quest 3 offre non seulement une réalité virtuelle totalement immersive dans laquelle plonger, mais permet également d’augmenter les objets numériques avec le monde réel, créant ainsi une réalité mixte où les utilisateurs peuvent voir et interagir avec. à la fois le monde numérique et le monde numérique, ainsi que le monde réel.

Cette interaction peut prendre soit la forme d’un docking où les utilisateurs déposent simplement un objet numérique, qu’il s’agisse d’un écran ou d’un « accessoire » sur une surface où il restera pour toujours, soit une forme interactive où l’objet numérique rebondit ou glisse sur le support physique. surface.

Cette réalité mixte rend le gameplay de Quest 3 encore plus immersif et expressif. Au lieu de jouer dans une atmosphère semblable à celle d’un écran dans Quest 2 ou Quest, cette fois-ci, les joueurs peuvent profiter de l’espace dans leur environnement physique et déposer un grand écran au milieu pour jouer sur un écran géant, offrant ainsi une fausse expérience de console. de jouer avec des amis dans la vraie vie.

Cet agrandissement de l’écran, associé à la faiblesse du GPU de la nouvelle puce Snapdragon, fait de Quest 3 une expérience fluide et riche avec plus de détails sur les titres à venir grâce aux intégrations de jeux sur le cloud Xbox.

Plus d’intelligence artificielle

Meta a annoncé son propre chatbot, appelé Meta AI, qui peut être utilisé pour obtenir des réponses aux questions de base et traiter les demandes comme les autres assistants IA ou pour smartphone du marché. Mais comme Meta AI est alimenté à la fois par Meta et par la recherche Bing de Microsoft, il peut rechercher des informations en temps réel sur Internet, ce qui le rend plus avancé que ChatGPT d’OpenAI.

L’IA arrive également sur les applications Meta comme Instagram.

Dans un premier temps, l’IA sera introduite dans la section de retouche photo de l’application, où l’IA pourra changer rapidement l’arrière-plan d’une photo ou même redessiner le sujet à l’aide d’un message texte.

Meta a également annoncé AI Studio, une plate-forme permettant d’utiliser les capacités de Meta AI et de créer des choses étonnantes avec. Cependant, étant donné que ces intégrations d’IA devraient être mises en œuvre plus lentement que les autres produits annoncés par Meta en raison de problèmes de sécurité associés, il faudra beaucoup de temps avant de voir les développeurs tirer pleinement parti des capacités de l’IA.

Ray-Ban intelligent

Toutes ces capacités basées sur l’IA et des années d’expérience dans le développement d’appareils Quest se retrouvent dans un autre produit Meta passionnant, les nouvelles lunettes intelligentes Ray-Ban Meta.

Les nouvelles lunettes intelligentes sont le résultat de la collaboration de Meta avec EssilorLuxottica et Ray-Ban.

Cette paire de lunettes d’apparence simple est dotée d’appareils photo ultra-larges de 12 MP et d’un Snapdragon AR1 Gen1, lui permettant d’enregistrer des vidéos 1080p. Pour stocker des vidéos et des photos, vous disposez de 32 Go d’espace de stockage interne.

Profitant de la vue à la première personne de la caméra frontale, Meta a conçu le verre pour enregistrer des vidéos et prendre des photos destinées à être partagées directement avec la gamme de produits Meta. Pour cette raison, Meta a été créé en streaming en direct à partir de lunettes intelligentes via des applications comme Instagram.

Pour améliorer la qualité du streaming en direct, la paire de lunettes intelligentes est équipée d’une gamme de 5 microphones et de haut-parleurs spécialement conçus avec un volume maximum de 50 % et des basses deux fois supérieures par rapport aux lunettes de dernière génération.

L’année prochaine, Meta fabriquera également des lunettes multimédia en permettant au système intégré de voir à travers la caméra.

Cela ouvrira la porte à des questions plus utiles telles que « Qu’est-ce que je vois ? ». Une invite comme celle-ci permettrait à Meta AI de voir ce qu’une personne voit à travers la caméra et de le faire correspondre aux objets de son ensemble de données d’entraînement ou à des images provenant d’Internet.