Description
BlenderWorld sert de benchmark pour évaluer la performance des agents de création 3D. Il se concentre sur l'évaluation de 13 agents visuels à travers 223 tâches de création 3D du monde réel. Ces tâches couvrent divers domaines créatifs, y compris l'architecture, la conception de personnages, la modélisation de produits et l'animation. Le benchmark est conçu pour tester la capacité des agents à interpréter des textes, des images et des vidéos, et à travailler dans Blender pour livrer des scènes 3D complètes et modifiables.
Lire la suite
Le processus d'évaluation implique à la fois des exigences d'apparence et structurelles, avec 59 tâches incluant des pièces jointes de spécifications. Chaque agent est évalué sur le même ensemble de tâches, et leur performance est notée sur une échelle de 0 à 100. Le modèle leader, GPT-6-Astra, démontre une performance supérieure, bien qu'il réussisse chaque critère sur moins de la moitié de toutes les tâches.
BlenderWorld fournit un tableau principal détaillé avec des scores, permettant aux utilisateurs de comparer la performance de différents modèles. Le benchmark inclut également des aperçus 3D interactifs et des scores assortis à des exemples sélectionnés, offrant un aperçu plus approfondi du travail produit par les agents. Le pipeline d'évaluation implique une combinaison de notation basée sur des rubriques et des dimensions, avec GPT-5.6-terra servant de juge automatique principal.
Le benchmark prend également en compte les préférences humaines, avec un accord significatif entre les scores du juge principal et les préférences humaines majoritaires. BlenderWorld est une ressource précieuse pour les chercheurs et les développeurs cherchant à comprendre les capacités et les limites des agents de création 3D actuels.
- CatégorieGénérateurs de modèles 3D
- Modèle tarifaireGratuit
- DéploiementCloud
- PlateformesWeb
Points forts de BlenderWorld
Évalue 13 agents visuels
223 tâches 3D du monde réel
Tâches en architecture, animation, et plus
Scores sur une échelle de 0 à 100
Aperçus 3D interactifs
Exemples sélectionnés avec des scores assortis
Notation basée sur des rubriques et des dimensions
Accord sur les préférences humaines
Premiers pas avec BlenderWorld
Explorer : voir les résultats du benchmark
Comparer : analyser les performances des modèles
Inspecter : examiner les aperçus 3D interactifs
Évaluer : comprendre les critères de notation
Cas d'utilisation de BlenderWorld
- Évaluation de Modèles 3D
- Analyse de Domaines Créatifs
- Comparaison de Performances
- Inspection Interactive
- Étude des Préférences Humaines





