Meshy 7 évalue la fidélité image-to-3D grâce à un nouveau benchmark d’alignement

Une image de référence peut montrer une main, un panneau gravé ou une courbe mécanique précise. Un modèle 3D généré peut conserver la silhouette générale tout en perdant ces trois éléments. Meshy 7, lancé le 10 août, est conçu pour réduire cet écart grâce à un nouveau benchmark mesurant à quel point un résultat image-to-3D correspond à l’objet représenté par l’image.

Meshy a testé le système face à quatre autres modèles de fondation image-to-3D en utilisant une seule image d’entrée. Son modèle a obtenu 81,0 % pour les proportions globales, 79,7 % pour la distribution spatiale et 59,8 % pour les détails de surface, un modèle de référence comparé à lui-même représentant 100 %. Aucun système testé n’a atteint 60 % sur les détails de surface, et le score de Meshy 7 était supérieur de 5,3 points à celui du modèle suivant.

Le test compare la géométrie générée à des modèles 3D de référence exclus de l’entraînement. Chaque référence est rendue depuis une position de caméra connue, puis reconstruite à partir de l’image obtenue. Avant l’évaluation, les résultats peuvent subir une translation, une rotation et une mise à l’échelle uniforme, mais leurs proportions ne peuvent pas être corrigées en étirant un axe. Le benchmark vérifie donc si les détails se trouvent aux bons endroits, et pas seulement si le résultat forme une structure 3D exploitable.

Meshy attribue cette amélioration à trois changements : un encodeur d’image qui fonctionne à plusieurs échelles et en plus haute résolution, des données d’entraînement reconstruites de manière à ce que chaque échantillon corresponde directement à sa géométrie cible, ainsi qu’un score d’alignement ajouté pendant l’entraînement plutôt que réservé à l’évaluation. Avec quatre vues combinées, tous les modèles testés se sont améliorés et se sont retrouvés à environ deux points les uns des autres, tandis que Meshy 7 a conservé son avance.

Qu’est-ce que cela change en pratique ? Pour les designers et les artistes 3D, une correspondance plus fidèle pourrait réduire le remodelage nécessaire après la génération, en particulier lorsqu’une référence comporte de petits détails de surface ou des proportions précises. Mais le produit ne constitue pas encore un flux de travail universel : le mode Ultra ne prend en charge que la génération à partir d’une seule image, la prise en charge de plusieurs vues est prévue, les téléchargements nécessitent un abonnement de niveau Pro ou supérieur, et Meshy indique que ses rapports techniques sur la géométrie et les textures seront publiés séparément après le lancement.