Apple a annoncé son dernier modèle AI, 'Depth Pro'. Cette technologie incroyable peut générer une carte de profondeur 3D haute résolution à partir d'une seule image 2D en seulement 0,3 seconde.
Bien que l'on s'interroge sur son intégration dans les derniers iPhones, cette technologie est attendue pour révolutionner l'édition photo, la RA, la RV et même la conduite autonome. Cet article explore le fonctionnement de 'Depth Pro' et ses exemples d'application.
Mécanisme de génération rapide et précise de cartes 3D
'Depth Pro' utilise un « transformateur de vision multi-échelle » efficace, capable de saisir simultanément la structure globale et les détails d'une image. Traditionnellement, l'estimation de la profondeur nécessite plusieurs images ou des informations de réglage de la caméra, mais 'Depth Pro' élimine ce besoin, calculant instantanément des données 3D précises à partir d'une seule image 2D.
Généré par l'équipe éditoriale en utilisant le modèle publié
En outre, sa capacité à tracer précisément les contours des objets permet de reproduire fidèlement des structures fines telles que les cheveux ou le feuillage. Cela permet une expérience 3D réaliste par AI, avec de nouvelles applications attendues dans les domaines de la RA et de la conduite autonome.
Bokeh plus précis et séparation des sujets
En utilisant les cartes de profondeur haute résolution générées par 'Depth Pro', le flou d'arrière-plan et la sélection des sujets deviennent plus rapides et précis, permettant un bokeh de haute qualité même sur smartphone. L'AI saisit les informations de profondeur au niveau du pixel, permettant des effets saisissants sur les détails fins comme les cheveux ou les feuilles.
Photo par littlekiss photography
Amélioration de la réalité en RA et RV
'Depth Pro' contribue également grandement à l'amélioration de la qualité de la RA et de la RV. Contrairement aux modèles de reconnaissance de profondeur traditionnels, il peut estimer instantanément la profondeur sans métadonnées de caméra, permettant de placer avec précision des objets virtuels dans l'espace réel.
Cela renforce la visualisation de l'agencement des meubles et l'engagement réaliste dans les jeux.
Applications à la conduite autonome et perspectives futures
La rapidité et la précision de 'Depth Pro' sont idéales pour la détection de profondeur dans la conduite autonome utilisant des caméras embarquées. L'AI saisit en temps réel l'environnement, reconnaissant les obstacles sur la route pour améliorer la sécurité.
Photo par Yuzurigima
Apple a déjà ouvert cette technologie en open source, et on s'attend à ce qu'elle soit utilisée dans de nombreux autres domaines à l'avenir.
