Идея проекта
Проект посвящён изучению и интерпретации художественного стиля Утагава Хокусая через современную цифровую визуализацию.
Датасет
В исходном датасете для обучения генеративной нейросети собрано 46 изображений созданные художником.
Процесс обучения модели
Устанавливаю все необходимые библиотеки для качественной работы.
Загружаю датасет картин в стиле Хокусая из Hugging Face, а также визуально проверяю изображения, чтобы удостоверится в правильности датасета.
Обрезала изображения, чтобы быть уверенной, что картины одинаковые по размеру.
Каждое изображение получило текстовое описание.
Запустила обучение LoRA.
Подключила LoRA и появилась возможность генерировать изображения.
Результирующая серия изображений
В рамках проекта основное внимание было уделено двум типам изображений: пейзажам и портретам. Они позволяют наиболее полно раскрыть особенности изучаемого стиля.
Полученная серия демонстрирует устойчивость стиля и способность модели переносить его на разные типы изображений.
Портреты
prompt = portrait of a young Japanese woman in kimono, standing under cherry blossoms, soft morning light, Hokusai style, delicate linework, ukiyo-e patterns, serene expression.
prompt = an elderly Japanese fisherman, straw hat, sitting on a wooden dock, morning mist, Hokusai style, detailed wrinkles, reflective mood.
prompt = portrait of a samurai in full armor, sunset, under torii gate, Hokusai style, dramatic lighting, intricate armor details.
prompt = a young girl reading scroll by a lantern, Hokusai style, warm indoor light, fine ukiyo-e lines, delicate facial expression.
prompt = Japanese scholar painting calligraphy, traditional robe, Hokusai style, soft natural light, detailed brush textures.
prompt = portrait of a geisha walking along river, rain, umbrella, Hokusai style, reflective water, detailed kimono folds.
Пейзажи
prompt = serene Japanese river winding through mountains, morning fog, Hokusai style, ukiyo-e waves, reflection in water, pastel colors.
prompt = snowy mountain village at sunset, smoke rising from chimneys, Hokusai style, wooden houses, soft winter light.
prompt = coastal cliffs with crashing waves, seagulls flying, early morning haze, Hokusai style, dynamic water motion.
prompt = sunrise over rice fields, misty hills, Hokusai style, soft warm light, delicate lines, atmospheric depth.
prompt = bamboo forest path, dappled sunlight, Hokusai style, ukiyo-e linework, mist in the background, serene mood.
prompt = volcanic mountains with rivers, Hokusai style, dramatic clouds, soft pastel fog, detailed landscape composition.
Вывод
Была обучена модель на основе Stable Diffusion XL с использованием LoRA для генерации изображений в японском стиле.
Обученная модель показала, что даже при небольшом количестве шагов она способна улавливать черты стиля. При генерации по разным текстовым запросам удалось получить серию изображений, объединённых единым визуальным языком, но при этом различающихся по сюжету и настроению.
В результате мы можем увидеть, что технологии генеративных нейросетей могут применяться для изучения художественных стилей, а также для создания собственных визуальных проектов на их основе.
