Из шума по описанию
Нейросеть, которая рисует картинки по описанию, называют генератором изображений. Такие генераторы бывают встроены в чат-ассистентов, работают как отдельные сервисы или запускаются на своём компьютере. Кнопки у них разные, но устроены они похоже, и метод работы с ними один. Этому методу и посвящён курс.
Как генератор научился рисовать? Его обучили на огромном количестве картинок с подписями. Он не хранит эти картинки и не склеивает их кусками: из них он вывел, как обычно выглядят «кот», «закат», «акварель», «свет из окна», — и умеет собирать новые изображения, похожие на такие описания.
Рисует он необычно. Работа начинается не с пустого листа, а с шума — случайной ряби, похожей на экран без сигнала. Шаг за шагом генератор убирает из шума всё, что не похоже на ваше описание, и в ряби проступает картинка.
Отсюда два важных следствия. Первое: одно описание даёт много разных картинок — каждая начинается со своего шума. Начальный шум задаётся числом, которое называют зерном (сидом). Второе: при том же описании, том же зерне и тех же настройках многие генераторы дают ту же самую картинку — и это главный инструмент управления (урок 5).
Важно понимать и другое: генератор не понимает мир так, как человек. Он знает, как обычно выглядят вещи вместе, но не знает, сколько пальцев должно быть у руки и что буквы складываются в слова. Отсюда его типичные ошибки.