Comment Qualcomm voit la prochaine génération de casques XR | Hugo Swart

Qualcomm a beaucoup de succès dans les gadgets XR (réalité virtuelle, vérité augmentée ou réalité mixte), et ses puces ont été utilisées dans plus de 60 éléments XR à ce jour. C’est une augmentation par rapport aux 30 gadgets du CES 2020.

L’homme en charge de cet effort est Hugo Swart, vice-président et superviseur de base des efforts XR de Qualcomm. J’ai rencontré Swart au CES 2023 pour parler de l’avenir de XR et des appareils que nous verrons sortir dans la nouvelle génération de produits.

Bien que Qualcomm ne fabrique pas les casques, la famille de processeurs Snapdragon qu’il conçoit est cruciale pour la puissance et les performances de traitement des appareils. Lorsque l’entreprise progresse avec sa technologie, nous obtenons des casques XR plus légers et plus performants avec une autonomie de batterie bien meilleure. Et de nos jours, nous aurons des lunettes AR qui ressemblent à une paire de lunettes de soleil normales ou à des verres correcteurs.

Qu’est-ce qui se passe ? Gadgets Snapdragon Spaces, une bien meilleure connexion avec le Wi-Fi 7, un meilleur passthrough vidéo et, espérons-le, un ensemble d’exigences et de gadgets qui permettront un métaverse ouvert. J’ai parlé avec Swart de ces sujets lors de l’exposition technologique CES 2023 en cours à Las Vegas.

Voici un enregistrement édité de notre interview.

Hugo Swart est vice-président et directeur général de XR (VR et AR) chez Qualcomm.

VentureBeat : J’étais juste au coin de la rue en train de jeter un coup d’œil au nouveau casque HTC. Ça a l’air plutôt bien.

Hugo Swart : Le matériel est plutôt sympa. Nous prenons toujours en charge une grande partie des logiciels, mais j’aime bien ça aussi. Nous commençons à voir de plus en plus d’appareils. Le Lenovo VRX, je ne sais pas si vous avez réellement essayé cela. Ils utilisent également des lentilles à crêpes. Il est destiné aux entreprises.

C’est ce que nous voyons depuis le plus longtemps. Si vous faites un casque VR, il n’y a absolument rien de mieux que le XR2. C’est toujours une plateforme incroyablement populaire. En général, croyez-le ou non, nous avons déjà introduit plus de 60 appareils. Bien sûr, il existe des appareils de l’entreprise de premier plan, mais aussi de nombreuses startups. Nous avons un excellent moyen d’étendre notre soutien à tous ces types d’entreprises.

VentureBeat : Voyez-vous des périodes claires où nous avons eu une génération 1.0, puis une génération 2.0 ?

Swart : Nous avons fait le XR2. Fondamentalement, la principale distinction était l’emballage du produit. C’était simplement un plan divers. Le XR2 Gen 1, le premier, a un boîtier qui aide à l’aspect gentil, mais lors de la dissipation de la chaleur, il concentre en fait la chaleur dans une zone. Avec XR2, nous mettons la mémoire de côté. Il aide à la dissipation de la chaleur. C’est le genre de modification que nous appelons un Plus ou un Pro. En ce qui concerne les générations, c’est vraiment un nouveau processeur dans son ensemble.

Un exemple de cela, nous avons annoncé l’AR2 en novembre dernier. Je ne crois pas que nous en ayons parlé. La famille d’articles XR concerne, bien sûr, les articles qui peuvent être VR, MR, AR. Puis, alors que nous nous concentrions sur des verres d’aspect plus fins et plus petits, nous avons estimé que nous devions faire quelque chose de différent. C’est pourquoi nous avons créé une nouvelle plate-forme uniquement pour la réalité augmentée. C’est pourquoi nous l’appelons la plate-forme AR. L’AR2 est une toute nouvelle architecture pour AR afin que nous puissions obtenir moins d’un watt de puissance dans les lunettes. Comment tu fais ça? Vous avez vraiment besoin de plus de puissance si vous voulez créer des multimédias et des graphiques riches et tout ça. Vous pouvez répartir le traitement entre les lunettes et quelque chose que vous apportez en même temps, ou quelque chose comme un PC.

Nous parlions de rendu fractionné il y a bien longtemps. Je me souviens que c’était un GDC. C’est un peu la même chose, le même concept, où vous effectuez la perception – suivi des mains, suivi de la tête et quelques-unes de ces fonctionnalités de compréhension – dans le casque, puis envoyez ces positions à l’unité de calcul hôte. L’unité de calcul hôte exécute réellement les applications. Ensuite, il l’encode et le renvoie et vous faites des prévisions et toutes ces fonctions de traitement d’affichage dans le casque.

C’est pourquoi c’est complètement différent. C’est révolutionnaire. Cela va rendre possible les lunettes VR à faible facteur de forme du fait de cette architecture qui supprime, ou du moins diminue beaucoup, la consommation d’énergie. La puissance est ce qui détermine la taille. C’est la dissipation thermique. Vous ne pouvez pas y mettre un ventilateur. Tout type d’option thermique entraîne une taille. Vous devez minimiser la taille, donc vous devez minimiser la puissance. Vous devez réduire la taille physique, ce qui implique que vous avez besoin de moins. C’est le compromis que nous avons découvert pour autoriser ces lunettes à petit facteur de forme.

L’autre chose est que nous autorisons le sans fil. C’est une procédure dispersée sans fil. Nous utilisons le Wi-Fi 7. Il ne nécessite pas toujours le Wi-Fi 7, mais il est évident qu’avec le Wi-Fi 7, vous disposez de la meilleure latence et des meilleures techniques pour travailler dans des scénarios plus difficiles. Vous connectez le Wi-Fi 7 de votre téléphone ou de votre PC aux lunettes.

VentureBeat : Quel point de vue avez-vous lorsque les gens regardent quelque chose comme la Meta Mission Pro ? Vérité combinée exceptionnelle, fantastique sans fil, tous les autres avantages. Vous pouvez lire le texte maintenant. Ils le veulent pour 400 $.

Swart : Il y a certainement une évolution vers des prix plus bas. Je ne peux pas dire le point de taux précis car cela inclut beaucoup de choses autour de la conception d’entreprise, etc. Vous avez vu que HTC a un point de coût inférieur à celui de Mission Pro. Le VRX, je ne sais pas exactement s’ils ont parlé de prix ou non. Le Pico 4 est nettement moins cher. Je ne me souviens pas du numéro du haut de ma tête. Il n’a pas toutes les fonctions. C’est pourquoi je pense qu’il est sain de voir arriver tous ces appareils. Les gens peuvent développer des articles à différents niveaux de fonctionnalités et de coûts, puis cibler différents cas d’utilisation, différents marchés. Cela nous aide à faire avancer l’industrie.

Vous pouvez dessiner ou façonner avec le Meta Mission Pro.

VentureBeat : Garder les attentes de tout le monde en ligne, c’est quelque chose qui nuit constamment à ce marché à certains égards.

Swart : Je suis d’accord. Si vous regardez le passthrough vidéo, c’est une fonctionnalité remarquable. Cependant, c’est la toute première version que les gens mettent sur le marché. Il y a encore beaucoup d’optimisation qui peut être faite, à la fois sur le front de l’affichage et même sur la façon dont vous faites le traitement, comment nous faisons le silicium. Cela peut être amélioré pour les types de performances de passthrough vidéo. Donc je suis d’accord. « Attente » est un mot-clé ici. Même le battage médiatique et le buzz autour du métaverse – c’était fantastique d’avoir cela, mais les gens ont une attente spécifique. « C’est ici maintenant. Je peux résider dans un monde virtuel ! » Eh bien, attendez. C’est une action à la fois.

C’est ce que j’aime dans ce que nous voyons dans l’industrie XR ou le marché métaverse. À partir de 2015, si vous regardez en arrière 2015 et comparez où nous en sommes maintenant, c’est plutôt beaucoup de progrès. Nous avons la catégorie autonome et toutes les performances relatives aux autonomes. L’autonomie est également capable de s’associer à des systèmes de calcul tels que des PC, etc. Nous avons réalisé de nombreux développements au cours des deux dernières années.

VentureBeat : Voyez-vous déjà des choses que l’on pourrait appeler le métaverse ?

Qualcomm Snapdragon prend en charge le traitement dispersé AR avec AR2.

Swart : Je pense que oui. Je ne considère pas toujours le métaverse comme un monde virtuel, mais plutôt comme la combinaison des mondes physique et numérique. J’aime lier davantage le métaverse à l’informatique spatiale. Parce que sens, nous sommes tout simplement au début des expériences métavers que nous avons. Nous sommes au début de l’informatique spatiale.

Au début des années 2000, lorsque nous parlions de l’Internet mobile, c’était à peu près la même chose. C’est là que j’ai commencé ma carrière. On m’a demandé : « Quel est le meilleur cas d’utilisation pour l’Internet mobile ? » « Eh bien, vous verrez des vidéos. Vous aurez des appels vidéo. Vous aurez la navigation. » Ce n’est pas que nous ne connaissions pas le cas d’utilisation. C’est juste que ce n’était pas préparé pour tout le monde. Il a fallu des écrans d’affichage qui avaient l’aspect parfait de la nature. Il a fallu une connexion.

C’est ce que nous voyons maintenant avec le métaverse et l’informatique spatiale. Vous avez tous ces vecteurs d’amélioration, qu’il s’agisse du processeur ou de la connectivité ou des écrans d’affichage ou de la communauté. Nous avons maintenant Snapdragon Spaces, qui est un ensemble d’API suivant OpenXR. Nous souhaitons permettre aux concepteurs de créer plus facilement du contenu et d’être facilement disponibles dans tous les gadgets. Ce n’est pas un magasin d’applications. Ce ne sont en fait que des caractéristiques de perception. Comment exposer ces éléments de perception aux designers ? Cela finit par être une solution horizontale. C’est ce que nous recherchons avec Snapdragon Spaces.

VentureBeat : Je ne sais pas si la chose la plus saine que je vois dans la communauté – je vois tous les développeurs, toutes les personnes qui utilisent Nvidia Omniverse pour créer des applications d’entreprise. Il y a toutes ces choses imprévues que les grands développeurs ne font pas toujours. C’est exactement la même chose côté développeur. Des choses comme Beat Saber qui sortent de nulle part. Cela semble être l’une des choses les plus encourageantes.

Swart : Une autre chose dont nous avons parlé en novembre lorsque nous avons révélé AR2 est notre partenariat avec Adobe. J’aime vraiment ce que font ces gens. Ils produisent des outils pour le matériel 3D, les actifs 3D, pour les non-codeurs. C’est l’exemple dont nous avons besoin. N’importe qui peut développer du contenu maintenant. Vous avez besoin d’outils pour que les individus ordinaires commencent à créer. Cela va des jumeaux numériques complets qui doivent fonctionner exactement comme ils le font dans la réalité, jusqu’à ce que je développe de la manière que je souhaite créer.

Nous en voyons beaucoup les choses s’enchaînent. Je ne sais pas si vous vous êtes amusé avec ShapesXR, mais c’est une très bonne application. C’est également lié à la création, la production 3D. Il y a un grand développement sur ce front.

VentureBeat : Qu’en est-il des choses comme l’USD et qu’est-ce que cela pourrait entraîner en ce qui concerne les exigences du métaverse ?

Swart : Nous soutenons et travaillons pour l’USD, mais aussi pour le glTF. Ce n’est pas comme si nous étions religieux à propos de l’un ou de l’autre. On voit que ces exigences, ces formats gagnent du terrain. Côté client, nous souhaitons être optimisés. Par coïncidence, c’est aussi ce dont nous avons discuté lors de notre Top Snapdragon avec Adobe. Avec Adobe, nous examinons l’USD et comment l’améliorer pour le mobile. Sur quoi nous suggérons les téléphones portables, mais également les casques.

Qualcomm fabrique de nombreuses versions de puces Snapdragon pour XR.

VentureBeat : Je vois une activité très intéressante chez Nvidia avec tout le travail d’Omniverse et l’assistance pour USD. On dirait que certains des autres gars sont peut-être trop pacifiques. Intel est en quelque sorte silencieux. Ils l’ont soutenu, mais alors AMD – d’autres entreprises pourraient être aussi enthousiastes que certains des leaders.

Swart : Ce n’est pas que nous ne le faisons pas soutiens le. Nous concentrons simplement plus de notre énergie sur les plus grands défis. Je ne dis pas que ce n’est pas un obstacle. Il y a des défis où nous pouvons avoir un impact plus important. Des choses comme la puissance, la taille et la fonctionnalité, rendant tout cela facilement accessible aux concepteurs. C’est là que nous nous concentrons. Il est essentiel d’avoir ces exigences et ces choses pour aider à éliminer ou à réduire la fragmentation.

VentureBeat : Vous semblez-vous comme si nous étions sur une cadence annuelle maintenant pour les toutes nouvelles générations ?

Swart : Pas encore. Pas. Si vous regardez le XR, notre gamme de produits VR, avec XR2 Gen 1, nous avions le Pro. Je vais garder un petit thriller jusqu’à la génération 2. Il y a beaucoup de choses qui peuvent être améliorées autour d’une plate-forme donnée, ce qui implique le processeur. Une fois que vous produisez un processeur, l’application logicielle, les écrans, les éléments importants qui l’entourent — développer une nouvelle puce chaque année, d’abord, cela n’a pas encore de sens économique. Deuxièmement, c’est perturbateur. Certaines de ces choses prennent du temps à s’améliorer sur une plate-forme offerte. Au moment où vous avez optimisé, si vous avez soudainement besoin de passer au suivant ? Vous essayez constamment de rattraper votre retard.

Le secteur des appareils intelligents, la société de PC, ce sont peut-être des marchés en pleine croissance et cela a du sens. Pour XR, il est préférable de concentrer les efforts de l’industrie sur une plate-forme donnée. Il y a une heure correcte. Je pense que la période va se réduire, mais en ce moment une cadence annuelle est trop rapide.

Hugo Swart est optimiste quant à l’avenir du XR.

VentureBeat : Pensez-vous qu’il est inquiétant que la loi de Moore ralentisse à un moment où l’on s’attend à ce que nous achetions tous massivement le métaverse ?

Swart : Oui et non. Le grand aspect des ingénieurs est que si vous leur donnez un problème, ils trouveront un moyen de le contourner. AR2 en est un exemple. Je n’ai pas le même genre de gains que j’obtiens sur le nœud de procédure. Comment surmonter ce problème ? Oh, c’est en dispersant le traitement. De préférence, naturellement, je souhaite avoir tout cela au même endroit. J’aimerais l’avoir avec la 5G. J’aimerais tout avoir, et peut-être que je l’aurais si la loi de Moore continuait au même rythme. Sans cela, nous devons être plus imaginatifs et découvrir des méthodes pour contourner.

Oui, c’est inquiétant. Nous devons trouver ensemble des moyens de créer les expériences que tout le monde souhaite sans compter sur les avantages du nœud de procédure.