Стиль Альфонса Мухи через LoRA
Alphonse Mucha (1860–1939) — чешский художник, один из главных представителей стиля ар-нуво. Его декоративные плакаты стали символом эпохи модерна: плавные линии, растительные орнаменты, пастельные тона и женские фигуры в обрамлении круглых рамок. Работы Мухи перешли в общественное достояние в 2010 году (70 лет после смерти автора).
Идея проекта
Я хотела проверить, сможет ли нейросеть «выучить» стиль Мухи и применить его к сюжетам, которых в его время не существовало: кот-киборг, астронавт в открытом космосе, самурай, дракон. Может ли орнаментальная эстетика модерна жить в контексте фэнтези и научной фантастики?
Датасет
Для обучения я собрала ~200 работ Альфонса Мухи из открытых источников. Датасет включает плакаты, декоративные панно, книжные иллюстрации и живопись. Все изображения лицензированы как Public Domain.
Все изображения обрезаны до квадратного формата 512×512 — центральный кроп с ресайзом:
Обрезка изображений из датасета
Обучение
В основе — модель Stable Diffusion XL, дообученная методом LoRA. Если коротко: LoRA позволяет «показать» нейросети набор изображений в определённом стиле, и она запоминает этот стиль, не теряя умения рисовать всё остальное. Каждое изображение получило текстовое описание с триггер-словом MUCHANOVO — выдуманное слово, которого нет ни в одном языке. Оно служит командой: если в запросе встречается MUCHANOVO, модель понимает, что нужно рисовать в стиле Мухи. Обучение заняло около часа в Google Colab. За 1000 итераций модель обработала датасет множество раз, постепенно запоминая характерные визуальные паттерны.
Запуск обучения
Сравнение: до и после
Один и тот же сюжет — девочка читает книгу под гигантским грибом. Слева: чистая SDXL без обучения. Справа: SDXL + LoRA в стиле Мухи. LoRA привнесла тёплую сепийную тональность, характерную для печатной графики рубежа XIX–XX веков, и мягкую текстуру, напоминающую литографию.
Результаты
Серия из 8 работ. Промпты описывают только сюжет — стилистику привносит LoRA.
a cyborg cat on a rooftop, poster illustration, MUCHANOVO style an astronaut floating in space with Earth behind, poster illustration, MUCHANOVO style
a samurai standing in rain holding a katana, poster illustration, MUCHANOVO style a deep sea diver surrounded by jellyfish, poster illustration, MUCHANOVO style
a jazz musician playing saxophone on stage, poster illustration, MUCHANOVO style a wolf howling at the moon on a mountain, poster illustration, MUCHANOVO style
a ballerina mid-leap on a theater stage, poster illustration, MUCHANOVO style a girl reading a book under a giant mushroom, poster illustration, MUCHANOVO style
Что получилось
LoRA выучила характерные черты визуального языка датасета: приглушённую тёплую палитру, графичный контур, штриховую технику и винтажную атмосферу печатной графики. Стиль консистентно применяется к самым разным сюжетам — от киберпанка до фэнтези. Результат отличается от ожидаемого «плакатного» Мухи с яркими орнаментами и круглыми рамками. Это связано с тем, что датасет включал всё творчество художника: не только знаменитые постеры, но и живопись, книжные иллюстрации, наброски. Модель выучила усреднённый стиль, ближе к книжной графике, чем к рекламным плакатам. Для более точного результата стоило бы отобрать для обучения только декоративные постеры.
Материалы
Ноутбук с кодом обучения и генерации прилагаются: https://disk.360.yandex.ru/d/t_EZK-F5OId3Pg
GenAI
В проекте использована LLM модель Claude (Anthropic) для написания кода парсера датасета.
