Как diffusion-модели генерируют изображения

Часть курса Prompt Engineering

До сих пор каждый написанный вами промпт порождал текст. Этот урок открывает часть 3, где тот же самый промпт порождает картинку. Носитель меняется, а вот подход из части 1 остаётся прежним: вы по-прежнему направляете модель словами, и расплывчатые слова по-прежнему дают расплывчатый результат.

Многие предполагают, что модель изображений ищет по огромной библиотеке и сшивает вместе куски готовых картинок. Происходит совсем не это. Никакого коллажа и никакого поиска по базе. Модель строит каждое изображение с нуля, а исходный материал, с которого она начинает, это чистый случайный шум.