Обучение генеративной нейросети Stable Diffusion XL уникальному стилю авторских иллюстраций с помощью техники DreamBooth + LoRA.
Датасет: Коллекция из 30 оригинальных рисунков
Ожидаемые результаты: Повторение моделью, характерных для авторского стиля особенностей, в частности:
- Цветовая палитра: приглушённые, атмосферные тона — серо-голубые, тёплые жёлтые, тёмно-красные, глубокие синие
- Техника: сочетание карандашного рисунка с цифровой заливкой, стилизация под акварель
- Атмосфера: меланхоличная, кинематографичная, с драматическим освещением
Исходный размер 1479x886
Процесс обучения
- Модель: SD 1.5 (~2 ГБ), метод: LoRA через
train_text_to_image_lora.py; - Обучение: 800 шагов, 8-bit Adam, gradient checkpointing, fp16;
Результаты: Удалось передать некоторые элементы стиля
Исходный размер 1975x985
