La saga complète du casque de réalité mixte troublé d’Apple a été révélée

La saga complète du casque de réalité mixte troublé d’Apple a été révélée

23 mai 2022 0 Par Le Caiman
Un homme en tee-shirt est assis sur scène.

Une série de rapports dans Les informations brosser un tableau détaillé de la progression, de la politique et des problèmes auxquels est confronté le projet d’Apple de développer un casque de réalité virtuelle, augmentée ou mixte depuis que l’initiative a pris de l’ampleur en 2015.

Citant plusieurs personnes familières avec le produit, y compris certaines qui y ont travaillé directement, les rapports décrivent un concours de volontés sur la direction de l’appareil. L’affrontement était entre l’équipe des produits de réalité mixte d’Apple (appelée « Groupe de développement technologique ») et le célèbre designer Apple Jony Ive et son équipe de design industriel. Le rapport met en lumière la direction d’Apple pour l’appareil, que Bloomberg a récemment signalé approche du lancement.

Ils affirment également que le PDG d’Apple, Tim Cook, a été relativement à l’écart du produit par rapport à d’autres comme l’iPhone, et que l’emplacement du groupe de développement technologique dans un bureau séparé du siège principal d’Apple a été une source de problèmes et de frustration.

Les sources de l’information disent que les efforts de réalité mixte d’Apple ont commencé presque accidentellement lorsque la société a acheté une startup allemande AR appelée Metaio pour utiliser une partie de sa technologie sur Project Titan, son projet de voiture autonome. Un autre moment clé a été le moment où Apple a embauché le chef d’équipe du projet AR / VR, Mike Rockwell, loin de Dolby Laboratories. À partir de 2015, Rockwell a constitué une équipe qui comprenait le cofondateur de Metaio, Peter Meier, et le directeur d’Apple Watch, Fletcher Rothkopf.

En 2016, plusieurs démos AR ont été présentées aux membres du conseil d’administration d’Apple. Dans l’un d’entre eux, un minuscule tricératops a grandi sous les yeux des membres du conseil d’administration. Dans un autre, une pièce a été transformée en un environnement immersif et verdoyant. Mais le conseil d’administration n’était pas Rockwell et l’obstacle le plus important de l’entreprise. Selon The Information, c’est Ive qui a supervisé à la fois les équipes de conception industrielle et d’interface humaine chez Apple.

Ive et son équipe se sont opposés à un casque VR parce qu’ils pensent que la réalité virtuelle sépare les utilisateurs des personnes et du monde qui les entourent, et que les casques VR ont l’air démodés. Mais le groupe de développement technologique a obtenu le soutien de l’équipe de conception industrielle en présentant un concept : un écran orienté vers l’extérieur à l’avant du casque qui montrait des images des expressions faciales et des yeux du porteur aux personnes qui l’entouraient. Le porteur pouvait voir les personnes qui l’entouraient grâce à un flux de caméra externe.

Rockwell et ses collègues ont développé et publié ARKit en 2017, une suite de développement d’applications qui permettait aux développeurs de créer des applications AR pour iPhone et iPad en utilisant des technologies et des techniques qui pourraient être adaptées ultérieurement à un casque.

Au début, Rockwell et le reste de l’équipe de réalité mixte voulaient que le casque soit attaché à une station de base pour fournir des graphismes et des performances maximaux impressionnants, et certains membres de l’équipe l’envisageaient principalement comme un outil pour les professionnels et les créatifs à utiliser à leur bureau. . Mais je n’aimais aucune de ces idées et je voulais que ce soit un produit de style de vie grand public que les consommateurs pourraient emporter partout. La haute direction d’Apple a soutenu le plan d’Ive, et Ive joue toujours un rôle actif dans le développement du casque, même s’il travaille maintenant avec Apple en tant que consultant.

La décision de faire du casque un appareil autonome aurait causé des maux de tête importants. Par exemple, certains ont estimé que le moyen le plus optimal de le faire fonctionner correctement aurait été de mettre plus de fonctions sur une seule puce. Mais comme le travail sur le silicium était déjà terminé, ils devaient trouver des moyens de lutter contre la latence inhérente à la communication entre plusieurs puces de l’appareil. Ils avaient également créé un logiciel en supposant que le plan de la station de base irait de l’avant.

Néanmoins, l’appareil entre dans les phases finales de développement. Bloomberg a affirmé la semaine dernière qu’une version avancée du produit avait récemment été présentée au conseil d’administration d’Apple, et qu’Apple a « accéléré » le développement du logiciel du casque, qui est une ramification d’iOS appelée rOS. (Le R signifie « réalité ».)

Le reportage de The Information révèle de nombreux détails sur le prochain casque. Il comporterait une résolution d’au moins 4K pour chaque œil, ce qui, selon l’équipe, était le strict minimum pour que les utilisateurs ne perçoivent pas l’image comme pixélisée, contrairement à la plupart des casques VR grand public actuels. Son processeur intégré serait étroitement lié au processeur M2 qui devrait arriver sur Mac et iPad dans les mois à venir.

Le casque aurait également 14 caméras, certaines tournées vers l’extérieur et d’autres vers l’intérieur. Cela permettrait aux utilisateurs de voir le monde extérieur et aux personnes à proximité de voir une représentation vidéo des yeux de l’utilisateur. Il suivrait en direct les mouvements du visage et du corps du porteur pour le mapper à un avatar 3D (probablement similaire au Memoji de l’iPhone) qui pourrait être utilisé pour organiser des réunions à distance et des rassemblements sociaux avec d’autres porteurs de casque éloignés.

En raison des capacités de traitement limitées de la puce M2 dans un casque sans station de base connectée (la station de base annulée aurait un M1 Ultra ultra-performant), les avatars seraient cartoonesques. Les sources de l’information disent également que des avatars plus photoréalistes ont été tentés lorsque la station de base faisait partie du plan, mais la vallée étrange était un problème.

Apple avait initialement prévu de lancer le casque en 2019, mais il semble maintenant qu’il pourrait être annoncé plus tard cette année ou en 2023. De plus, Apple prévoit d’introduire des lunettes AR plus naturelles comme produit de suivi, mais cet appareil peut encore être à des années de l’expédition.