En une phrase
La vidéo présente une méthode pour exécuter localement Trellis 2, un générateur 3D d'images à modèle, avec seulement 6 Go de VRAM sur ComfyUI grâce à une version GGUF compressée, offrant des performances plus rapides et une qualité visuelle quasi identique au modèle complet, rendant ainsi l'outil accessible à davantage d'utilisateurs.
Points clés
- Accessibilité accrue via GGUF : Trellis 2, initialement gourmand en VRAM, peut désormais fonctionner avec seulement 6 Go de VRAM (par exemple, sur une RTX 3050 ou 4060) grâce à un format GGUF compressé, élargissant considérablement son accessibilité.
- Performance et VRAM optimisées : La version GGUF est non seulement moins exigeante en VRAM (environ 6,1 Go pour le modèle Q4) mais s'avère également plus rapide que le modèle complet non compressé (jusqu'à 2 minutes de moins pour une génération complète), tout en maintenant une excellente qualité.
- Qualité visuelle préservée : La différence de qualité entre les divers niveaux de quantification GGUF (Q4, Q5, Q6, Q8) et le modèle original est jugée presque invisible, même pour les détails fins et les géométries complexes.
- Installation simplifiée et workflows dédiés : L'installation s'effectue via des scripts spécifiques à partir de pixel-minus-artistry.com/trellis-2-gguf, intégrant le fork GGUF d'Arrow X dans ComfyUI Easy Install, avec des workflows ComfyUI préparés pour les nœuds GGUF.
- Conseils d'optimisation pour faible VRAM : Pour les cartes 6 Go, il est recommandé de baisser la résolution de génération à 512, de diminuer le nombre de tokens, de réduire la résolution des textures, de fermer les applications gourmandes et d'ajouter le tag `--disable-pinned-memory` au fichier de démarrage de ComfyUI.
- Utilisation des modèles générés : Les modèles 3D obtenus, bien que de bonne qualité initiale, nécessitent généralement une retopologie (dans des logiciels comme Blender ou ZBrush) avant d'être utilisés pour des applications finales comme le rigging ou l'intégration dans un moteur de jeu.
Ressources
- ComfyUI — interface utilisateur graphique pour les modèles de diffusion stables, utilisé avec ComfyUI Easy Install.
- pixel-minus-artistry.com/trellis-2-gguf — source des scripts d'installation et de téléchargement des modèles Trellis 2 GGUF.
- Blender — logiciel de modélisation 3D open-source, mentionné pour la retopologie.
- ZBrush — logiciel de sculpture numérique, mentionné pour le remesh.
- Autodesk 3ds Max — logiciel de modélisation, animation et rendu 3D, mentionné pour la retopologie.
- Discord — plateforme de communication, mentionnée pour la communauté et le support.