Comment utiliser FreeU pour améliorer la qualité de l'image
FreeU est une méthode simple et élégante qui améliore la qualité de render sans formation supplémentaire ni réglage fin en modifiant les facteurs de l'architecture U-Net. FreeU se compose de facteurs d'échelle de saut (indiqués par s1 et s2) et de facteurs d'échelle de dorsale (indiqués par b1 et b2).
Sauter les facteurs
a) Vise à minimiser le lissage excessif de la texture
b) Aide à préserver les détails de l'image render
Facteurs de l'épine dorsale
a) Amplifie la carte des caractéristiques de l'ensemble de l'image render
b) conduit à un lissage excessif des textures
c) génère des détails plus vifs et améliore la qualité de l'image
C'est pourquoi, dans leur document, un équilibre entre les facteurs de mise à l'échelle du saut et les facteurs de mise à l'échelle de l'épine dorsale est essentiel pour garantir un bon render. Pour plus de détails sur FreeU,
vous pouvez cliquer sur le lien suivant : Lien
Pour notre plateforme, nous utilisons la commande suivante pour appeler FreeU avec les facteurs suivants :
/freeu: s1, s2, b1, b2
Par défaut, nous recommandons les valeurs suivantes de s1,s2,b1, b2 pour :
- SD 1,5 : s1 = 1, s2 = 1, b1 = 1,2, b2 = 1,2
- SD XL : s1 = 0,9, s2 = 0,2, b1 = 1,2, b2 = 1,4
Notez que pour les facteurs d'échelle et d'épine dorsale, la fourchette est comprise entre 0 et 2.
En résumé de nos tests, nous pouvons recommander ce qui suit (si vous avez la flemme de lire les tracés X-Y) :
- Ajustez b1 et b2 en fonction de vos préférences pour obtenir la sensation spécifique et les détails requis entre 0 et 2.
- Ajustez s1 et s2 entre 0,8 et 1,5 (jusqu'à 1,6) pour obtenir le bon contraste et la bonne saturation des couleurs.
- Notez que vos valeurs varieront en fonction du modèle et des lora/embeddings utilisés.
-------------------------------------------
Dans ce test, nous allons montrer la puissance de freeu en utilisant l'invite suivante :
/render /size:768x768 /seed:1 /guidance:7 /sampler:dpm2m /images:2 1girl, half body shot, maid outfit, posing on shopping street , /freeu:s1,s2,b1,b2
Nous modifierons un ensemble de facteurs d'échelle, soit le saut et la colonne vertébrale, et maintiendrons l'autre constant pour comprendre ce qui se passe.
Si vous êtes prêt, c'est parti !
Nous allons maintenant modifier les facteurs de l'épine dorsale tout en gardant les facteurs de saut constants.
Même si l'on utilise un point de contrôle réaliste, la tendance reste la même si l'on utilise un point de contrôle semi-réel ou basé sur anime. En résumé, nous pouvons observer la tendance suivante :
a) La modification des facteurs de saut (s1 et s2) affecte les couleurs et la saturation du site render.
b) La modification des facteurs de l'épine dorsale (b1 et b2) modifie la carte des caractéristiques du site render.