ControlNet

ControlNet: Architettura che aggiunge condizioni spaziali a un modello di diffusione senza sostituirne i pesi principali. Una copia addestrabile del codificatore riceve mappe come bordi o pose e la combina con il modello congelato. Permette controllo strutturale più diretto del solo prompt.

In English: ControlNetLegge III · Come una rete impara dai dati

Una copia addestrabile del codificatore riceve mappe come bordi o pose e la combina con il modello congelato. Permette controllo strutturale più diretto del solo prompt.

Esempi

  • Canny edge
  • Mappa di profondità
  • Posa umana

Fonti