Depth Pro AI d’Apple : une révolution pour la réalité augmentée grâce à la capture 3D

[Cambot]

Un bond en avant dans l’intelligence artificielle

Chaque semaine, les progrès technologiques de l'intelligence artificielle (IA) nous étonnent par de nouvelles découvertes. Cette fois, c'est une petite entreprise de Cupertino, en Californie, qui est à l'origine de l'innovation.
 
Depth Pro : la nouvelle IA d’Apple

Alors que l'attention est focalisée sur Apple Intelligence et son prochain lancement, promettant d'introduire des fonctionnalités d'IA contextuelles dans la vie quotidienne, la société a également révélé un nouveau modèle d'IA baptisé Depth Pro.

Comme son nom le suggère, cette IA est capable de cartographier la profondeur d'une image en temps réel. Ce qui la rend vraiment unique, c'est sa capacité à accomplir cette tâche sur du matériel informatique grand public standard, sans avoir besoin d'une Nvidia H100.
 
Les applications potentielles de Depth Pro

Depth Pro est un modèle de recherche qui n'est pas forcément destiné à être commercialisé par Apple. Cependant, si un jour les « Apple Glasses » voyaient le jour, Depth Pro pourrait grandement améliorer les fonctionnalités de réalité augmentée, notamment pour le Vision Pro.

Ce modèle d'Apple peut évaluer la profondeur relative et absolue, créant ainsi une « profondeur métrique ». Ces informations peuvent être utilisées de différentes façons pour enrichir l'image.

Quand une personne prend une photo, Depth Pro mesure avec précision les distances entre les éléments de la scène. Il est également conçu pour éviter des erreurs classiques, comme confondre le ciel avec l'arrière-plan ou mal distinguer le premier plan de l'arrière-plan.

Des utilisations variées pour une technologie prometteuse

Les applications de Depth Pro sont presque infinies. Les voitures autonomes, les drones et les robots aspirateurs pourraient utiliser une meilleure détection de la profondeur pour éviter les obstacles plus efficacement. En réalité augmentée ou dans les magasins de meubles en ligne, cette technologie aiderait à placer les objets de manière plus précise dans un espace, qu'il soit réel ou virtuel.

Dans le domaine médical, elle pourrait améliorer la reconstruction des parties du corps et la cartographie des organes internes. Enfin, Depth Pro pourrait rendre la transition des images vers la vidéo plus fluide, en utilisant des IA génératives comme la Luma Dream Machine.

Source : https://www.servicesmobiles.fr/depth-pro...des-101190

[EnZ0]

J'ai creusé un peu le sujet et il s'avère que ce modèle pourrait avoir des applications assez révolutionnaires.

Par exemple, dans le domaine de la réalité augmentée, Depth Pro pourrait grandement améliorer le placement d'objets virtuels dans l'environnement réel. Imaginez pouvoir scanner une pièce avec votre smartphone et y placer des meubles virtuels avec une précision millimétrique, le tout en temps réel !

Pour la photographie aussi, ça ouvre pas mal de possibilités. On pourrait facilement ajouter un flou d'arrière-plan naturel à n'importe quelle photo, même prise avec un simple smartphone. Ou encore, faire des retouches précises sur certaines parties de l'image en fonction de leur profondeur.

Ce qui me fascine le plus, c'est la vitesse de traitement. Générer une carte de profondeur en moins d'une seconde, c'est du jamais vu ! Ça rend l'utilisation en temps réel vraiment envisageable.

Enfin une vraie nouvelle création de la pomme depuis le départ de Steve Jobs, le seul, l'unique.