Gustav Doré (1832–1883) Один из величайших XIX века и иллюстраторов в принципе. Он создал настолько запоминающийся визуальный стиль гравюр для «Библии», «Божественной комедии» и «Дон Кихота», что сложно представить эти книги в другом стиле.
Датасет для тренировки модели За свою жизнь (51 год) Доре создал более 800 работ и в разы больше черновых зарисовок. Я решил натренировать LoRA модель лишь на 100 самых популярных, а потом попробовать воссоздать сюжеты его работ через промпт. Изображения для обучения взяты с сайта WikiArts non-profit. Все изображения лицензированы CC0 Public Domain.
Результаты: У меня получилась легковесная LoRA модель для SDXL 1.0, которая переняла основные визуальные черты гравюр художника. Модель справилась с генерацией как квадратов, так и 16:9. Для обучения изображения сжимались до 512×512, поэтому воссоздать мелкие детали и характерные для гравюр штрихи не получилось. Также по непонятной причине разные тематики промпта окрашивали все изображения (в красный, зеленый или синий), хотя датасет преимущественно черно-белый. На сгенерированные изображения применялись апскейл и цветокоррекция.
Описание применения генеративной модели: В работе использовалась LLM модель ChatGpt 5.2 Codex для написания блока скачивания WikiArt и блока скачивания результатов в zip архиве из Google Colab
