Entraînement d’une LoRA sur FLUX pour la génération d’images personnelles

Aperçu

FLUX est un nouveau modèle open source proche de Stable Diffusion que j’étais impatient de tester. Ne disposant pas d’un PC assez puissant pour l’entraînement, j’ai utilisé Civit AI afin de créer une LoRA à partir de 25 photos légendées de moi-même. L’objectif était d’évaluer FLUX pour produire des images réalistes ou stylisées de mon visage via deux checkpoints différents.

Compétences mises en avant :

• Entraînement de LoRA : création d’un modèle personnalisé via Civit AI et tests de plusieurs checkpoints ;
• Ajustements du modèle : choix de deux checkpoints, l’un réaliste et l’autre plus stylisé ;
• Utilisation de ComfyUI : exécution locale du modèle FLUX couplé à la LoRA.

Technologies utilisées : FLUX, ComfyUI, Civit AI

Points forts du projet

Principales caractéristiques

• Ressemblance réaliste : premier checkpoint dédié à la reproduction fidèle de mon visage, légèrement surappris pour privilégier la ressemblance ;
• Génération stylisée : second checkpoint plus flexible pour des rendus créatifs ;
• Workflow efficace malgré peu de ressources : entraînement sur Civit AI puis exécution locale via ComfyUI.

Réalisations

• Surapprentissage maîtrisé : obtention d’un modèle très réaliste reproduisant fidèlement les détails de mon visage ;
• Variété de rendus stylisés : production d’images créatives montrant la polyvalence de FLUX ;
• Usage ingénieux des ressources : appui sur Civit AI pour pallier le manque de puissance locale.

Résultats

Le projet a permis de créer des images fidèles comme des rendus plus artistiques tout en tirant parti d’un entraînement externe. La LoRA s’est révélée performante sur les deux checkpoints, montrant le potentiel de FLUX pour la génération d’images personnelles.

Visual Gallery

Conclusion

Ce projet met en lumière le potentiel de FLUX pour la génération d’images personnelles. En entraînant une LoRA sur 25 photos légendées, j’ai obtenu des rendus à la fois réalistes et créatifs. L’utilisation de ressources externes comme Civit AI, combinée à une exécution locale via ComfyUI, prouve qu’il est possible de contourner les limites matérielles.

Pour en savoir plus ou envisager une collaboration, contactez-moi ou découvrez mes autres projets. }

.gallery a { flex: 1 1 calc(50% - 10px); /* Display 2 items per row */ box-sizing: border-box; display: block; overflow: hidden; border-radius: 5px; transition: transform 0.3s ease; }

.gallery a:first-child { flex: 1 1 100%; /* Make the first image span the entire row */ }

.gallery a:hover { transform: scale(1.05); }

.gallery img { width: 100%; height: auto; display: block; border-radius: 5px; } </style>