Une nouvelle série de models permettent encore plus de contrôle pour la génération d’images dans via automatic 1111 dans le module text2img
Installation
Pour bénéficier de ces models vous devez mettre à jour l’extension ControlNet (que vous devez avoir installer au préalable) dans Automatic1111.
Allez dans Extensions puis cliquez sur Check for Updates
Si vous voyez écrit “behind” c’est qu’il y a une mise à jour.
Cliquez alors sur “Apply and restart UI”
Vous devez maintenant télécharger les nouveaux models ici:
Il y a 8 models en tout.
Dans automatic1111 activez le multi ControlNet (au moins 2) et notez que le fichier config pour les models Adapter est sketch_adapter_V14.yaml par défaut.
Avec ce fichier config vous n’avez accès à la plupart des models sauf Depth, Segmentation et Open pose. Pour pouvoir les vous en servir vous devrez utiliser le fichier image_adpater_v14.yaml.
Exemple d’utilisation
Il est difficile d’obtenir un placement précis d’objets avec seulement un prompt.
Je vais utiliser un croquis et le model TI Adapter Sketch associé au pré-processeur Hed
Je saisis un prompt qui décrit ce que je souhaite: “banane et une pomme dans une assiette sur une table”
Voici ce que j’obtiens:
Pour plus d’exemples regardez cette vidéo :