Концепция проекта
Во время ярмарки blazar я познакомилась с творчеством художницы Полины Коваль, и именно ее работы стали отправной точкой для этого эксперимента. Ее живопись сочетает хрупкость и телесность с абстрактными формами и размытыми переходами. В картинах ощущается интимность, метафоричность и тонкая работа с фактурой.
Цель проекта
Обучить генеративную нейросеть улавливать эти визуальные особенности и воспроизводить их в новых изображениях, сохраняя характерное настроение и пластичность стиля. Для обучения был собран набор из 16 картин Полины Коваль из доступных источников и выставочных проектов.
Техническая реализация
Для эксперимента использовалась модель Stable Diffusion XL (SDXL), к которой были применены методы DreamBooth и LoRA. Работа велась в Google Colab. DreamBooth помог зафиксировать ключевые элементы стиля: текучие и мягкие очертания фигур, телесные мотивы, раскрытые через текстуры и фрагментарность LoRA позволила адаптировать модель к этому стилю без изменения базовой архитектуры SDXL. Обучение проводилось на GPU A100 (500 шагов).
Модель основана на stable-diffusion-xl-base-1.0 https://huggingface.co/stabilityai/stable-diffusion-xl-base-1.0
Результат
После обучения сеть начала создавать изображения, близкие по атмосфере к живописи Полины Коваль. В них прослеживаются: мягкие переходы и растворяющиеся фигуры внимание к поверхности и фактуре ощущение интимности и утонченной абстрактности.
photo collage in koval style, a woman holding a dove
photo collage in koval style, a woman sitting in a flower field
photo collage in koval style, two people hugging each other
photo collage in koval style, a swan
photo collage in koval style, a dove with a flower
Ссылка на код