Prompt engineering — процесс структурирования
слов, которые могут быть интерпретированы и поняты
моделью Text2Image / текст-в-изображение.

Подумайте об этом как о языке, на котором вам нужно говорить, чтобы сказать модели искусственного интеллекта, что нужно нарисовать.
Оперативное проектирование - это отличный способ расширить возможности
модели Text2IM. Хорошие промпты могут превратить изображения из хороших в
отличным.

Stable Diffusion — это дифузионная модель генерирующая «текста в изображение». Он обучена на изображениях размером 512x512 на базе данных LAION-5B. LAION-5B — это крупнейший мультимодальный набор данных в свободном доступе.

Обработка одного и того же промпта будет выдавать разный результат для разных размеров и соотношения сторон. Генерация изображений в отличной от 512x512 непропорционально увеличивает время на обработку. Поэтому сначала стоит получить «подходящее» изображение, а потом его увеличить.

Stable Diffusion создает изображение, начиная с шума, и постепенно удаляя его. Параметр "Steps" или "Quality & Details" — параметр, который управляет количеством шагов шумоподавления. Обычно чем выше, тем лучше, но для сохранения скорости работы при оптимальном качестве пользуются диапозоном от 25-50.

Семплеры — это методы удаления шума из изображения во время генерации. Они различаются способом расчета следующего шага, требуют разной продолжительности и разного количества шагов для получения удовлетворительного результата.

Euler a — универсальный / быстрый / качественный
Подробнее youtube

Токен — слово, имя, термин или словосочетание. Например: «Платье», «Wes Anderson», «F1.2» (темпин из фотографии), «дождливая улица».

Токен имеет абстрактную «силу» и может влиять на другие токены. Сила токена варьируется от модели к модели. В некоторых сервисах токен может быть сильным, а может не работать совсем.

Лимит промпта составляет — 75 слов. Можно составлять длинные промпты пытаясь описать буквально все подряд: и композицию, и освящениие и детали, а можно воспользоваться сильным промптом-модификатором для получения определенного стиля или «картинки».

Использование модификатора имени фотографа или режессера, избавит от необходимости детализировать качество фотографии и фотореализм. С хорошим модификатором не придется писать даже негативные промпты. Так "Wes Anderson" выстроит и свет, и ракурс по центру, и английский стиль в одежде.

Один и тот же токен, может быть интерпретирован по разному. Если написать «Harry potter, by Wes Anderson» то получим Вэса Андерсона как персонажа Гарри Поттера, но в стилистике фильмов самого Вэса. А если написать «Harry potter Daniel Radcliffe, by Wes Anderson», то получим просто стилистику Андерсона.

Последовательность слов/токенов влияет на конечный результат. Чем правее стоит токен, тем он слабее. Перечислять токены отдельно, через запятую, а не пытаться втиснуть их в одну фразу или предложение.

Параметр криативности влияет на свободу придерживаться промпту. Меньшие числа дают ИИ больше свободы для творчества, в то время как более высокие числа заставляют его придерживаться промпта.

Предпочтительно использовать параметры выставленные по умолчанию. Результат с разной креативностью для промпта «photo of a young beautiful woman, street, center»

Начиная промпт определяемся с тем, что это будет по сути: фото, рисунок, скетч и д.т.

Разумеется можно уточнять — какая фотография: стрит, студийная, или рисунок: маслом, тушью, фломастером.

Модификаторы — это токены, которые меняют: стиль, формат, перспективу, ракурс изображения. Есть волшебные слова и фразы, которые, могут повысить качество изображения.

Extreme Close-up
Close-up
Medium shot
Long shot / Full shot / Full-body shot

GoPro — экшн камера
Selfie — селфи, это селфи
CCTV — камера наблюдения

За имитацией/подражанием стилей обращаемся к именам художников, заканчивая промт конструкцией «, by ...». Одни художники сильно отличаются стилем, другие — едва уловимо

При создании пейзажа стоит указать время дня: утро, полдень или ночь, и время года. Некоторые художники незначительно влияют на результат, в то время как другие кардинально его меняют.

Художники ужасов известны тем, что создают пугающие изображения, но их можно использовать для создания приятных изображений, смешанных с другими.

При использовании аниме-художников стоит помнить о стиле, на котором они сосредоточены, и о том, к какому времени они относятся.

Выбор правильного исполнителя может кардинально изменить результат. У художников-фантастов, как правило, очень своеобразный стиль. Помните, что вы можете использовать не только традиционные художественные средства, но и художников из фильмов.

Не забывайте, что вы можете использовать известных фотографов в своих промптах. Попробуйте использовать пейзажных или портретных фотографов в зависимости от того, на чем вы фокусируетесь.

Токены Concept sheet и Concept art — сами по себе сильные, поэтому формируя такую стилизацию вне оглядки на то, что чаще всего рисует сам автор, получим примерно всегда схожий результат.

Google Arts and Culture
Stable Art Artist Guide
SD Artist Collection
The AI Art - Modifiers Guide