Микромир
Описание идеи
Я всегда была очарована тем, как выглядит микроорганизмы, словно маленький город со своей микросистемой, который спрятан от наших глаз. Собрав Dataset из научных иллюстраций, микроскопических фотографий, я решила поэкспериментировать и создать с помощью Stable Diffusion свою версию того, как выглядел бы город микроорганизмов через призму городской инфраструктуры.
Dataset — картинки из pinterest
Для достижения качественного результата я собрала Datasetиз 97 изображений, что позволило модели изучить особенности микроскопических структур и перенести их в урбанистический контекст. Такой средний размер Dataset обеспечил достаточно неплохую детализацию генерируемых изображений.
После проверки качества изображений я загрузила модель для автоматической генерации описаний к каждому изображению. Это позволило создать детальные промты, которые точно описывали стиль и содержание моих исходных изображений.
После я зарегистрировалась на Hugging Face, получила токен доступа и настроила аутентификацию в Kaggle для возможности загрузки обученной модели в репозиторий.
Обучение модели заняло около 40 минут. В результате была создана Lora модель, адаптирующая базовую Stable Diffusion 2.1 под мой уникальный стиль микроскопических городских пейзажей.
После обучения я загрузила модель из репозитория Hugging Face и использовала ее для генерации новых изображений по созданным промтам.
На заключительном этапе я использовала созданные промты для генерации тематической серии изображений, загружая модель непосредственно из репозитория Hugging Face.
Результат
Городская инфраструктура нашего реального мира состоит из множества зданий, парков, дорог и различных объектов.
prompt — «futuristic city with roads as complex blood vessel networks under high magnification, buildings as diverse fungal species from microscopic images, transportation as bacterial cell movemen»
Первым делом я хотела создать мегаполис. Получившиеся картинка воссоздала отдалённый вид мегаполиса, но в основном преобладают элементы микроорганизмов.
prompt — «breathtaking bioluminescent landscape, glowing bacterial structures, vibrant neon colors, cinematic lighting, magical atmosphere, organic formations, highly detailed, artstation trending, b»
Вторая картинка воссоздаёт городской пейзаж. Здесь мы видим здания в крупном плане, что позволяет лучше рассмотреть их архитектурные особенности и формы.
prompt — «complex highway interchange with stacked fungal overpasses, cloverleaf intersections of glowing neural pathways, multiple lanes of bacterial vehicle traffic, structured entry/exit ramps, ne»
Третья картинка нам напоминает автомагистраль с развязками. Получилась довольно реалистичная дорога по которой передвигаются наши микроорганизмы.
prompt — «organic metropolis where highways are arterial blood flow systems, architecture based on fungal microscopy with gills and caps, vehicles as cocci and bacilli bacteria in motion, glowing bio»
Четвёртая картинка показывает город, с интересным ландшафтом. Получился вид сверху, здесь можно увидеть парк развлечений, множество тропинок и зданий.
prompt — «central urban park surrounded by dense fungal skyscrapers, geometric pathways between glowing moss lawns, bacterial street lights along paved walkways, mycelium benches facing city streets,»
Как же город и без парка, четвёртая картинка крупным планом показывает цветущий парк микромира. Получились уникальные растения с яркими, насыщенными цветами. Даже я бы не отказалась отдохнуть в таком уютном парке.
Разбор результата
Первое изображение абстрактно представляет мегаполис, в котором элементы микроорганизмов играют ключевую роль. Цветовая палитра и фактуры создают уникальное визуальное впечатление.
Второе изображение произвело на меня гораздо большее впечатление, чем первое, так как вместил в себе в равной мере детали микроорганизмов и здания реального мира, что сделало картинку более понятной.
Третья картинка получилась тоже достаточно хорошей. Она напоминает нам дорогу, которая частично состоит из нескольких видов микроорганизмов, повторяя их не полностью, а лишь некоторые детали форму и цветовую палитру.
Четвёртая картинка удачно сочетает как цветовую палитру, так и формы микроорганизмов, что создает органичное изображение парка. Эти элементы гармонично переплетаются, придавая пространству уникальный визуальный стиль и подчеркивая связь между природой и микромиром.
Последняя картинка получилась тоже немного абстрактной. В основном в ней преобладают элементы микроорганизмов, но всё же можно разглядеть и городскую инфраструктуру.
Использовала:
- Stable Diffusion
- Hugging Face
- kaggle
- Lora
