Aller au contenu principal
ToolPotion
Conseiller IA
Soumettre

DepthPro2

Modèles IAModèles d'IA et LLMOpen source · Hugging Face

DepthPro2 est un modèle d'IA développé par Apple pour l'estimation de profondeur monoculaire métrique. Il calcule avec précision la profondeur pour chaque pixel à partir de photos uniques, de vidéos ou de flux en direct à pleine résolution. Le modèle est conçu pour produire une profondeur nette aux bords des objets et maintenir une cohérence temporelle entre les images, ce qui le rend adapté à diverses applications de vision par ordinateur.

Voir le modèle
Partager
Voir le modèle
Partager

DepthPro2 est un modèle d'IA sophistiqué d'Apple conçu pour une estimation précise de profondeur monoculaire métrique. Ce modèle peut traiter divers types d'entrées visuelles, y compris des photographies uniques, des séquences vidéo complètes et des flux de caméra en direct, générant des informations de profondeur pour chaque pixel à la résolution native de l'entrée.

Lire la suite

Une force clé de DepthPro2 réside dans sa capacité à fournir des estimations de profondeur nettes, en particulier autour des bords des objets, et à maintenir une excellente cohérence temporelle, garantissant des mesures de profondeur stables d'une image à l'autre dans le contenu vidéo.

Le modèle est disponible en plusieurs tailles, chacune avec son propre référentiel et ses poids, permettant aux utilisateurs de choisir en fonction de leurs besoins spécifiques en matière de vitesse et de précision. Les modèles plus grands (L, H+) offrent des résultats de profondeur plus nets et plus stables, tandis que les versions plus petites (S, B) privilégient un traitement plus rapide. Tous les modèles DepthPro2 intègrent un estimateur de longueur focale partagé, `apple/DepthPro2-focal`, qui prédit automatiquement la longueur focale lorsqu'elle n'est pas fournie, améliorant ainsi la polyvalence du modèle.

Sous le capot, DepthPro2 utilise une architecture de transformateur multi-vues qui traite conjointement une ou plusieurs images. Ce transformateur alterne les mécanismes d'attention au sein des images individuelles et entre les images après ses blocs initiaux. Un décodeur DPT prédit ensuite une carte de profondeur inverse pour chaque image en assemblant des tokens de divers blocs en cartes de caractéristiques à différentes résolutions (1/32 à 1/4 de la résolution d'entrée). Cette méthodologie avancée permet à DepthPro2 de surpasser les travaux antérieurs tant en netteté (mesurée par le score Boundary F1) qu'en cohérence temporelle (mesurée par le Jitter) à travers des ensembles de données comme Sintel et Spring.

DepthPro2 est publié sous la licence Apple Machine Learning Research Model, qui permet son utilisation pour la recherche scientifique non commerciale et le développement académique. Cela en fait une ressource précieuse pour les chercheurs et les développeurs explorant des techniques avancées d'estimation de profondeur. Le modèle est hébergé sur Hugging Face, où les utilisateurs peuvent le télécharger, explorer ses fichiers et l'exécuter, avec des exemples de démarrage rapide fournis pour le traitement d'images et de vidéos. Il est important de noter que la profondeur est considérée comme infinie pour les scènes infiniment éloignées, comme le ciel.

  • CatégorieModèles d'IA et LLM
  • Modèle tarifaireOpen source
  • DéploiementCloud
  • PlateformesHugging Face

  • Estimation de profondeur monoculaire métrique

  • Traite des photos uniques, des vidéos et des flux en direct

  • Sortie de profondeur à pleine résolution

  • Profondeur nette aux bords des objets

  • Profondeur temporellement cohérente entre les images

  • Disponible en plusieurs tailles de modèle (S, B, L, H+)

  • Estimateur de longueur focale intégré

  • Architecture de transformateur multi-vues

  • Décodeur DPT pour la prédiction de carte de profondeur inverse

  • Surpasse les travaux antérieurs en netteté et en cohérence temporelle

  • Licence d'utilisation uniquement pour la recherche

  • Exemples en ligne de commande et de flux en direct disponibles

  • Hébergé sur Hugging Face pour un accès facile

  1. Accéder au modèle : Visitez la page DepthPro2 sur Hugging Face.

  2. Sélectionner la taille du modèle : Choisissez la taille de modèle souhaitée (S, B, L, H+) en fonction des besoins de performance.

  3. Télécharger les poids : Téléchargez les poids spécifiques du modèle depuis son référentiel.

  4. Configurer l'environnement : Préparez votre environnement de développement avec les dépendances nécessaires.

  5. Intégrer via le code : Utilisez les exemples de code fournis pour le traitement d'images ou de vidéos.

  6. Exécuter l'inférence : Exécutez le modèle sur vos données d'entrée pour générer des cartes de profondeur.

  • Navigation Robotique
  • Réalité Augmentée (AR)
  • Reconstruction 3D
  • Véhicules Autonomes
  • Analyse d'Imagerie Médicale
  • Surveillance Vidéo
  • Création de Contenu

Chez Apple

Avis sur DepthPro2

Chargement...

Outils IA populaires comme DepthPro2

DepthPro2-focal

Modèles IA

DepthPro2-focal est un modèle d'IA développé par Apple pour l'estimation de profondeur monoculaire. Il comprend 23,5 millions de paramètres et est conçu pour fournir une…

Modèles d'IA et LLM
Voir l'outil

Modèles IA

Modèle d'IA développé par Apple pour l'estimation de profondeur monoculaire. Il comprend 23,5 millions de paramètres et est conçu pour fournir une…DepthPro2-focal est un modèle d'IA développé par Apple pour l'estimation de profondeur monoculaire. Il comprend 23,5 millions de paramètres et est conçu pour fournir une…

Modèles d'IA et LLM
Voir le Top 5 Modèles IA

Depth Anything 3

Applications IA

Depth Anything 3 est un modèle qui prédit une géométrie spatialement cohérente à partir d'entrées visuelles. Il utilise un transformateur simple avec une représentation de rayon…

Modèles d'IA et LLM
Voir l'outil

Applications IA

Modèle qui prédit une géométrie spatialement cohérente à partir d'entrées visuelles. Il utilise un transformateur simple avec une représentation de rayon…Depth Anything 3 est un modèle qui prédit une géométrie spatialement cohérente à partir d'entrées visuelles. Il utilise un transformateur simple avec une représentation de rayon…

Modèles d'IA et LLM
Voir le Top 250 Applications IA

Modèle avancé de compréhension vidéo conçu pour fonctionner efficacement sur divers appareils. Il offre des capacités d'analyse vidéo et de raisonnement visuel…SmolVLM2 est un modèle avancé de compréhension vidéo conçu pour fonctionner efficacement sur divers appareils. Il offre des capacités d'analyse vidéo et de raisonnement visuel…

Modèles d'IA et LLM
Voir le Top 5 Modèles IA

LTX-2.5 est un modèle open world conçu pour générer des vidéos et des audios synchronisés et de haute fidélité à partir de diverses entrées. Il offre un contrôle et une…

Modèles d'IA et LLM
Voir l'outil

Modèle open world conçu pour générer des vidéos et des audios synchronisés et de haute fidélité à partir de diverses entrées. Il offre un contrôle et une…LTX-2.5 est un modèle open world conçu pour générer des vidéos et des audios synchronisés et de haute fidélité à partir de diverses entrées. Il offre un contrôle et une…

En vedetteModèles d'IA et LLM
Voir le Top 5 Modèles IA

DepthFlow AI

Applications IA

DepthFlow AI est un outil en ligne qui transforme des images 2D statiques en vidéos de mouvement 3D immersives avec profondeur. Il utilise l'estimation de profondeur par IA pour…

Générateurs de vidéos IA
Voir l'outil

Applications IA

Outil en ligne qui transforme des images 2D statiques en vidéos de mouvement 3D immersives avec profondeur. Il utilise l'estimation de profondeur par IA pour…DepthFlow AI est un outil en ligne qui transforme des images 2D statiques en vidéos de mouvement 3D immersives avec profondeur. Il utilise l'estimation de profondeur par IA pour…

Générateurs de vidéos IA
Voir le Top 250 Applications IA

Meta Segment Anything Model 2 (SAM 2) est un modèle de segmentation unifié pour les images et les vidéos. Il permet une sélection d'objets rapide et précise à l'aide de clics, de…

Modèles d'IA et LLM
Voir l'outil

Modèle de segmentation unifié pour les images et les vidéos. Il permet une sélection d'objets rapide et précise à l'aide de clics, de…Meta Segment Anything Model 2 (SAM 2) est un modèle de segmentation unifié pour les images et les vidéos. Il permet une sélection d'objets rapide et précise à l'aide de clics, de…

Modèles d'IA et LLM
Voir le Top 5 Modèles IA

Xception

Modèles IA

Xception est un modèle d'apprentissage profond disponible via l'API Keras 3. Il fait partie de Keras Applications, offrant des modèles pré-entraînés pour diverses tâches de vision…

Modèles d'IA et LLM
Voir l'outil

Modèles IA

Modèle d'apprentissage profond disponible via l'API Keras 3. Il fait partie de Keras Applications, offrant des modèles pré-entraînés pour diverses tâches de vision…Xception est un modèle d'apprentissage profond disponible via l'API Keras 3. Il fait partie de Keras Applications, offrant des modèles pré-entraînés pour diverses tâches de vision…

Modèles d'IA et LLM
Voir le Top 5 Modèles IA

Llama-3.2-11B-Vision-Instruct est un modèle d'IA multimodal conçu pour la reconnaissance visuelle, le raisonnement d'image et la légende. Développé par Meta, il intègre des…

Modèles d'IA et LLM
Voir l'outil

Modèle d'IA multimodal conçu pour la reconnaissance visuelle, le raisonnement d'image et la légende. Développé par Meta, il intègre des…Llama-3.2-11B-Vision-Instruct est un modèle d'IA multimodal conçu pour la reconnaissance visuelle, le raisonnement d'image et la légende. Développé par Meta, il intègre des…

Modèles d'IA et LLM
Voir le Top 5 Modèles IA
1 sur 8