RealityKit 2 d’Apple permet aux développeurs de créer des modèles 3D pour la réalité augmentée à l’aide de photos iPhone – TechCrunch


Lors de sa conférence mondiale des développeurs, Apple a annoncé une mise à jour importante de RealityKit, sa suite de technologies qui permet aux développeurs de commencer à créer des expériences AR (réalité augmentée). Avec le lancement de RealityKit 2, Apple affirme que les développeurs auront plus de contrôle visuel, audio et d’animation lorsqu’ils travailleront sur leurs expériences AR. Mais la partie la plus notable de la mise à jour est la façon dont la nouvelle API de capture d’objets d’Apple permettra aux développeurs de créer des modèles 3D en quelques minutes en utilisant uniquement un iPhone.

Apple a noté lors de son discours de développeur que l’une des parties les plus difficiles de la création de grandes applications AR était le processus de création de modèles 3D. Cela pourrait prendre des heures et des milliers de dollars.

Avec les nouveaux outils d’Apple, les développeurs pourront prendre une série de photos en utilisant simplement un iPhone (ou un iPad, un reflex numérique ou même un drone, s’ils préfèrent) pour capturer des images 2D d’un objet sous tous les angles, y compris le bas.

Ensuite, en utilisant l’API Object Capture sur macOS Monterey, il suffit de quelques lignes de code pour générer le modèle 3D, a expliqué Apple.

Crédits image : Pomme

Pour commencer, les développeurs commenceraient une nouvelle session de photogrammétrie dans RealityKit qui pointe vers le dossier dans lequel ils ont capturé les images. Ensuite, ils appelleraient la fonction de processus pour générer le modèle 3D au niveau de détail souhaité. Object Capture permet aux développeurs de générer les fichiers USDZ optimisés pour AR Quick Look – le système qui permet aux développeurs d’ajouter des objets 3D virtuels dans des applications ou des sites Web sur iPhone et iPad. Les modèles 3D peuvent également être ajoutés aux scènes AR dans Reality Composer dans Xcode.

Apple a déclaré que des développeurs comme Wayfair, Etsy et d’autres utilisent la capture d’objets pour créer des modèles 3D d’objets du monde réel, ce qui indique que les achats en ligne sont sur le point d’obtenir une mise à niveau importante de la réalité augmentée.

Wayfair, par exemple, utilise Object Capture pour développer des outils pour leurs fabricants afin qu’ils puissent créer une représentation virtuelle de leurs marchandises. Cela permettra aux clients de Wayfair de pouvoir prévisualiser plus de produits en RA qu’ils ne le pourraient aujourd’hui.

Crédits image : Apple (capture d’écran de l’outil Wayfair))

En outre, Apple a noté que des développeurs, dont Maxon et Unity, utilisent la capture d’objets pour créer du contenu 3D dans des applications de création de contenu 3D, telles que Cinema 4D et Unity MARS.

D’autres mises à jour de RealityKit 2 incluent des shaders personnalisés qui donnent aux développeurs plus de contrôle sur le pipeline de rendu pour affiner l’apparence des objets AR ; chargement dynamique des actifs ; la possibilité de créer votre propre système de composants d’entité pour organiser les ressources de votre scène AR ; et la possibilité de créer des personnages contrôlés par les joueurs afin que les utilisateurs puissent sauter, faire évoluer et explorer les mondes AR dans les jeux basés sur RealityKit.

Un développeur, Mikko Haapoja de Shopify, a essayé la nouvelle technologie (voir ci-dessous) et a partagé des tests dans le monde réel où il a photographié des objets à l’aide d’un iPhone 12 Max via Twitter.

Les développeurs qui souhaitent le tester par eux-mêmes peuvent utiliser l’exemple d’application d’Apple et installer Monterey sur leur Mac pour l’essayer. Ils peuvent utiliser l’application appareil photo Qlone ou toute autre application de capture d’images qu’ils souhaitent télécharger depuis l’App Store pour prendre les photos dont ils ont besoin pour la capture d’objets, explique Apple. À l’automne, l’application compagnon Qlone Mac tirera également parti de l’API Object Capture.

Apple dit qu’il existe aujourd’hui plus de 14 000 applications ARKit sur l’App Store, qui ont été créées par plus de 9 000 développeurs différents. Avec plus d’un milliard d’iPhones et d’iPads compatibles AR utilisés dans le monde, il note qu’Apple propose la plus grande plate-forme AR au monde.

en savoir plus sur la WWDC 2021 d'Apple sur TechCrunch





Source link

Laisser un commentaire

Votre adresse de messagerie ne sera pas publiée. Les champs obligatoires sont indiqués avec *