Ce nouveau texte

Le texte en 3D devient bon.

L'IA text-to-3D s'améliore de jour en jour. Alors que les IA génératives 2D telles que Midjourney et Stable Diffusion ont fait la une des journaux, la modélisation 3D est passée sous le radar. Mais maintenant, les chercheurs Junzhe Zhu et Peiye Zhuang ont créé HiFA, et c'est un générateur d'IA 3D impressionnant, même à ce stade précoce.

HiFA peut créer des modèles 3D haute définition à utiliser dans les jeux vidéo, les scènes 3D et l'animation. Certains peuvent débattre des jeux qui peuvent utiliser ces actifs, mais cette IA offre de bons résultats. La controverse autour de l'utilisation de l'IA est toujours en cours, l'artiste Greg Rutkowski m'ayant récemment déclaré qu'il était "terrifiant" de voir son travail utilisé dans une IA sans autorisation. Mais la technologie progresse rapidement.

La différence entre HiFA et ses rivaux vient de son utilisation et de l'optimisation de l'IA générative texte-image pré-formée, telle que Stable Diffusion. Bien que certaines IA textuelles en 3D puissent créer des modèles, elles sont construites sur des rendus formés en 2D et peuvent donc présenter des incohérences. Ci-dessous, HiFA décrit son approche et pourquoi ses modèles d'IA 3D sont meilleurs que la plupart.

« Pour remédier à ces limitations, nous proposons une reformulation de la perte d'optimisation à l'aide de la diffusion préalable. De plus, nous introduisons une nouvelle approche de formation qui libère le potentiel de la diffusion préalable. Pour améliorer la représentation de la géométrie 3D, nous appliquons une supervision de profondeur auxiliaire pour les images rendues par NeRF et régulariser le champ de densité des NeRF.

Je suis personnellement impressionné, les modèles 3D générés par cette IA ont l'air bien. Si vous ne souhaitez pas utiliser le modèle final, vous pouvez simplement prendre et adapter le maillage 3D et le peaufiner ou créer quelque chose de nouveau à partir de celui-ci.

Notre récent didacticiel "Comment utiliser Adobe Firefly" a révélé que notre artiste Ken Coleman utilise l'IA pour générer des éléments pour l'art conceptuel et les mélange dans ZBrush et Procreate dans son flux de travail. Cette IA d'Adobe est considérée comme le modèle le plus éthique, si vous voulez en savoir plus, lisez notre article "Adobe Firefly expliqué".

Si vous souhaitez approfondir l'IA générative, lisez nos guides des meilleurs générateurs d'IA et découvrez également comment les générateurs d'IA se comparent. Mais aucun de ceux-ci ne fournit vraiment de modèles de texte en 3D comme ce nouveau générateur d'IA proposé par HiFA, vous pouvez voir plus de modèles créés dans cette application d'IA ci-dessous, ou découvrir comment tout cela fonctionne sur le site Web de HiFA.

Merci d'avoir lu 5 articles ce mois-ci* Inscrivez-vous maintenant pour un accès illimité

Profitez de votre premier mois pour seulement 1 £ / 1 $ / 1 €

*Lire 5 articles gratuits par mois sans abonnement

Inscrivez-vous maintenant pour un accès illimité

Essayez le premier mois pour seulement1 £ / 1 $ / 1 €

Des nouvelles quotidiennes sur la conception, des critiques, des conseils pratiques et plus encore, choisis par les éditeurs.

Ian Dean est rédacteur en chef, Art & Design chez Creativebloq et ancien rédacteur en chef de nombreux magazines de premier plan. Ces titres comprenaient ImagineFX, 3D World et le principal titre de jeu vidéo Official PlayStation Magazine. Au début de sa carrière, il a écrit pour des magazines de musique et de cinéma, notamment Uncut et SFX. Ian a lancé le magazine Xbox X360 et édité PlayStation World. Pour Creative Bloq, Ian combine ses expériences pour apporter les dernières nouvelles sur l'IA, l'art numérique et l'art et la technologie des jeux vidéo, et plus encore à Creative Bloq, et pendant son temps libre, il griffonne dans Procreate, ArtRage et Rebelle tout en trouvant le temps de jouer Xbox et PS5. Il est également un utilisateur passionné de Cricut et un fan de découpe laser, et travaille actuellement sur Glowforge et xTools M1.