Comment les diffusion models génèrent des images

Partie du cours Prompt Engineering

Jusqu'ici, chaque prompt que vous avez écrit produisait du texte. Cette leçon ouvre la partie 3, où le même prompt produit une image. Le support change, mais l'état d'esprit de la partie 1 reste le même : vous pilotez toujours un modèle avec des mots, et des mots vagues donnent toujours un résultat vague.

On imagine souvent qu'un modèle d'image fouille une immense bibliothèque et recoud des morceaux d'images existantes. Ce n'est pas ce qui se passe. Il n'y a ni collage ni recherche dans un catalogue. Le modèle construit chaque image de zéro, et sa matière première de départ est du bruit purement aléatoire.