L'équipe hybride de Tencent a lancé Hunyuan3D-PolyGen, le premier grand modèle génératif 3D de l'industrie qui répond aux normes de qualité artistique, capable de générer des modèles 3D professionnels qui peuvent être utilisés dans le développement de jeux et la production cinématographique et télévisuelle, améliorant ainsi de manière significative l'efficacité des artistes. Le modèle présente des avancées technologiques significatives en matière de capacité de modélisation de géométries complexes et de stabilité de la génération, prend en charge plusieurs méthodes d'entrée, réduit considérablement le nombre de jetons et améliore la qualité de la modélisation grâce à la compression BPT et aux stratégies d'optimisation de l'apprentissage par renforcement. Il est actuellement disponible gratuitement sur la plateforme Tencent Hybrid 3D.
- Ce résumé est généré par une IA qui analyse le contenu de l'article à des fins d'information uniquement.
Une nouvelle étape dans la technologie de génération 3D
Récemment, l'équipe Mixed Yuan de Tencent a de nouveau réalisé une percée majeure dans le domaine de la génération 3D en lançant le nouveau modèle Hunyuan3D-PolyGen. Ce modèle est considéré comme le premier grand modèle généré en 3D de l'industrie à atteindre les normes de l'art, qui non seulement réalise un certain nombre d'innovations au niveau technique, mais plus important encore, montre une grande valeur commerciale dans l'application pratique. Il est entendu que le modèle a été utilisé par l'équipe interne de développement de jeux de Tencent, ce qui a permis d'améliorer considérablement l'efficacité des artistes.
Par rapport aux modèles 3D traditionnels, la principale caractéristique de Hunyuan3D-PolyGen est sa capacité à générer des modèles 3D qui répondent aux normes artistiques professionnelles. Cela signifie que les modèles générés ne sont pas seulement agréables à l'œil, mais surtout que les spécifications techniques peuvent être directement appliquées à des scénarios professionnels tels que le développement de jeux, la production cinématographique et télévisuelle.
L'innovation technologique qui rompt avec les contraintes traditionnelles
Concepts de conception pour des applications pratiques
Hunyuan3D-PolyGen a été conçu avec un objectif clair à l'esprit : les modèles 3D générés doivent être directement utilisables dans des projets réels. À cette fin, l'équipe s'est concentrée sur trois points essentiels :
| Indicateurs techniques | Problèmes liés aux méthodes traditionnelles | Solutions PolyGen |
|---|---|---|
| Nombre de surfaces contrôlées | Trop de visages, affectant le rendu en temps réel | Contrôle intelligent du nombre de surfaces pour répondre aux besoins du jeu |
| Qualité du câblage | Le câblage est confus et difficile à modifier dans le message | Générer des topologies régulières et efficaces |
| modélisation | Modélisation intégrale, peu pratique pour les modifications locales | Prise en charge de la conception architecturale par composants |
Percées technologiques fondamentales
Les innovations technologiques les plus remarquables du modèle se situent dans deux domaines. La première est l'amélioration significative de la capacité à modéliser des géométries complexes ; le modèle est capable de traiter des objets complexes comportant plus de 20 000 faces, ce qui est difficile à réaliser avec les méthodes antérieures de génération autorégressive de 3D. Le second est l'amélioration de la stabilité de la génération, qui réduit considérablement la probabilité d'échec de la génération grâce à l'introduction d'une stratégie de formation spécialisée.
Analyse de l'architecture technique
Cadre autorégressif pour la génération de grilles
Hunyuan3D-PolyGen utilise un processus de génération autorégressif complet, et l'ensemble du processus peut être divisé en trois étapes clés :
- Phase de tokenisation de la grilleConvertit les informations sur les sommets et les faces d'un maillage 3D en une séquence de jetons compréhensibles par le modèle.
- Phase de génération intelligenteGénération pas à pas de séquences complètes de tokens en treillis sur la base de données de nuages de points à l'aide d'une modélisation autorégressive
- Phase de reconstruction structurelle: redécoder la séquence de jetons générée en une structure de maillage 3D standard.
Innovations dans la technologie de compression BPT
Afin de résoudre le problème de la redondance élevée des jetons dans les méthodes traditionnelles, l'équipe a mis au point une technique de compression appelée BPT (Blocked and Patchified Tokenization). Cette technique permet d'obtenir une compression importante grâce à deux stratégies :
Optimisation de l'index des blocsEn divisant l'espace 3D en une structure de blocs réguliers et en convertissant la représentation originale des coordonnées (x,y,z) sous la forme (ID de bloc, décalage), le nombre de jetons est directement réduit d'environ 33%.
Compression combinée de feuilles de pâtesEn identifiant les sommets partagés des facettes voisines, plusieurs facettes sont combinées en une structure de patch pour la représentation, ce qui comprime davantage le jeton d'environ 41%.
En combinant ces deux techniques, BPT a réussi à réduire de 74% le nombre de tokens nécessaires pour représenter la même maille, ce qui permet au modèle de traiter des géométries plus complexes.
Stratégies d'optimisation de l'apprentissage renforcé
Pour résoudre le problème de la faible tolérance aux pannes et de la faible stabilité de la génération de maillages 3D, l'équipe a introduit un cadre de post-entraînement par apprentissage par renforcement spécialement conçu à cet effet. Ce cadre utilise plusieurs mesures de la qualité artistique comme signaux de récompense, notamment
- Évaluation de la régularité du câblage
- Contrôle de la cohérence géométrique
- Vérification de l'intégrité du plastron
- Rationalité topologique
De cette manière, le modèle apprend à générer non seulement des structures en 3D, mais surtout des structures de haute qualité qui répondent aux normes professionnelles.
Comparaison des effets
Entrez dans le diagramme :
Effet :
Entrez dans le diagramme :
Effet :
Entrez dans le diagramme :
Effet :
Application pratique Vérification des effets
Un retour d'information authentique de la part d'une équipe de professionnels
D'après les commentaires de l'équipe interne de développement de jeux de Tencent, Hunyuan3D-PolyGen donne de bons résultats dans les projets réels. Cette amélioration de l'efficacité se reflète principalement dans deux aspects : premièrement, une augmentation significative de la vitesse de génération du modèle initial, et deuxièmement, une réduction significative de la charge de travail de l'édition et des ajustements de post-production.
Support d'entrée polyvalent
Le modèle fait preuve d'une excellente adaptabilité et est capable de gérer de nombreux types d'intrants :
- Photo uniqueModèle 3D : Générer un modèle 3D complet directement à partir d'une image
- Images multi-vuesLa prise en charge d'un maximum de quatre images de référence sous différents angles
- Entrée ligne: générer des structures 3D détaillées, même à partir de simples dessins au trait
- description textuelleLes modèles 3D : Génération de modèles 3D correspondants directement à partir de descriptions en langage naturel
Qualité Comparaison Avantage
Par rapport aux méthodes de retopologie et de topologie IA existantes, Hunyuan3D-PolyGen présente des avantages évidents. En particulier, en termes de contrôle des facettes, le modèle est capable de conserver plus de détails tout en utilisant moins de facettes, ce qui est particulièrement important pour le développement de jeux qui nécessitent un équilibre entre performance et qualité.
Importance technique et perspectives d'avenir
Du point de vue du développement technologique, le succès de ce modèle apporte de nouvelles idées à l'ensemble de l'industrie. En particulier, son innovation en matière d'algorithmes de compression et d'applications d'apprentissage par renforcement jette les bases des travaux de recherche ultérieurs. Dans le même temps, le succès de ce modèle dans son application pratique constitue également une preuve solide de l'application approfondie de la technologie de l'IA dans l'industrie créative.
Actuellement, les utilisateurs peuvent expérimenter cette technologie sur la plateforme Hunyuan3D de Tencent, qui offre 20 utilisations gratuites par jour. Avec l'amélioration continue de la technologie et l'expansion des scénarios d'application, nous avons des raisons de croire que les outils d'IA comme Hunyuan3D-PolyGen joueront un rôle de plus en plus important dans la création future de contenu numérique, apportant des changements révolutionnaires à l'ensemble de l'industrie créative.
Adresse de l'expérience :3d.hunyuan.tencent.com
评论列表 (8条)：
加载更多评论 Chargement...