Концепция
Все мое детство прошло среди животных, которые были полноправными обитателями одного большого двора. Куры — неуклюжие, смешные, с вечно любопытными глазами-бусинками. Их перья переливались на солнце, а бесконечное квохтанье звучало по всей улице.
Я решила обучить генеративную нейросеть Stable Diffusion созданию иллюстраций с курицами в моем стиле. Главная цель — узнать, сможет ли нейросеть повторить особенности стиля: текстуру, формы и детали.
Мои иллюстрации имеет несколько важных особенностей: — Перья и тени имеют карандашную текстуру; — Курицы выглядят неуклюжими; — Имеют практически одинаковую форму туловища; — На персонажах есть один элемент одежды — разноцветные шарфики.
Генерации
Для начала я решила сгенерировать куриц и шарфы в разных расцветках.
in yorelu style, chicken in a scarf
in yorelu style, black chicken in a blue scarf in yorelu style, grey chicken in a dark blue striped scarf
in yorelu style, chicken in a polka dot scarf in yorelu style, black chicken in a green polka dot scarf in yorelu style, black chicken in a red polka dot scarf
in yorelu style, chicken in a red scarf in yorelu style, chicken in a yellow striped scarf
Но потом мне стало интересно, как курицы будут выглядеть, если их перекрасить в несвойственные для этих птиц цвета, допустим, в розовый или даже радужный.
in yorelu style, yellow chicken in a rainbow scarf in yorelu style, rainbow chicken
in yorelu style, pink chicken in a white scarf in yorelu style, green chicken in a green polka dot scarf
Я решила попробовать сгенерировать двух куриц вместе. Забавно, что у них один шарф на двоих, но на последней генерации у каждой курицы по своему шарфу.
in yorelu style, two brown chickens in a striped scarf
in yorelu style, two black chickens in a red polka dot scarf
Мне также захотелось посмотреть, как курицы будут выглядеть в других предметах одежды, поэтому я сгенерировала для них платья, куртки, обувь и даже шляпу.
in yorelu style, chicken in a dress
in yorelu style, chicken in a jacket
in yorelu style, chicken in shoes in yorelu style, chicken in a hat
Комментарий
Нейросеть не просто скопировала мой стиль — она сумела его интерпретировать. В сгенерированных изображениях сохранилась живая карандашная текстура, а форма, цвет и детали оказались близки к оригинальным работам. Более того, модель проявила самостоятельность: добавила новые элементы одежды, которых не было в исходных иллюстрациях, но которые при этом органично вписались в общую стилистику.
Описание применения генеративной модели
Процесс обучения — Базовая модель: Stable Diffusion XL 1.0 — Метод адаптации: Dreambooth с LoRA — Размер датасета: 12 изображения — Количество шагов: 1000 — Разрешение: 512×512 пикселей
Сначала я подготовила рабочую среду: проверила видеокарту и установила необходимые библиотеки. Затем загрузила свои фотографии и выбрала уникальное ключевое слово, которое станет «триггером» для моего стиля в будущем. После этого я запустила обучение модели по технологии LoRA. В финале я выгрузила готовый результат на Hugging Face, и теперь могу использовать свою модель для генерации новых уникальных образов.
