Исходный размер 1140x1600

Обучение генеративной нейросети под стиль художника Thony Hoax

./идея

Мой личный художественный стиль находится в застое из-за большого количества проектов, в каждом из которых необходим свой стиль. Из-за этого мой стиль стал теряться, и я перестал понимать, какие приемы мне необходимо использовать для того, чтобы у артов прослеживалось своеобразное стилистическое единство.

Короче говоря — мне нужно было найти за что зацепиться для развития своего персонального стиля.

big
Исходный размер 2585x1600

Карточки персонажей для настольной игры «AN OBELUS»

big
Исходный размер 2480x3500
Исходный размер 2585x1600

Изображения для презентации игры-платформера «Зачарованная книга с которой хочется спать»

0

Персонажи и их иконки в merge-игре «Бульбульбуль!»

Исходный размер 2585x1600

2D-спрайты врагов для bodehorror action-игры «DISCIPLE: MANTIS»

Изображения выше НЕ ИСПОЛЬЗОВАЛИСЬ для обучения нейросети, так как все они исполнены в совершенно разных стилях.

Я считаю что визуальный стиль должен подстраиваться под проект, а не наоборот, поэтому в это было вложено огромное количество усилий.

Но что насчет персонального стиля? Из-за огромного количества проектов я начал его терять. Так и родилась затея для этого проекта.

Важная ремарка: в генеративной модели использовано название HOUSEOFHOAX, так как я считаю, что важно разделять художника и нейросеть, обученную на работах художника, так как это два фундаментально разных типа контента.

./использованные изображения

0

Я использовал арты, нарисованные в период с 2021 по 2025 годы из-за того, что их в целом было довольно мало. В итоге набралось около 20 изображений, и, как выяснилось в итоге, этого было более чем достаточно для выполнения поставленной задачи — ведь в какой-то степени я ожидал от нейросети толику daydreaming’а*.

*daydreaming — процесс, когда нейросеть начинает «выдумывать» ответы на запрос или собирать по неподходящим частям силуэты на изображениях. То есть, простым языком, daydreaming — артефакты.

./обучение нейросети

В качестве рабочей среды я выбрал Kaggle, для работы использовался исходный документ, прикрепленный в курсе. Для того чтобы обучить нейросеть использовались, Stabble Diffusion, LoRA и Hugging Face.

Сначала были загружены все необходимые библиотеки, затем я загрузил свой датасет.

Позже — зарегистрировался на Hugging Face, получил токен и применил его.

В целом, действовал по пайплайну, представленному в курсе.

Исходный размер 1280x449

В определенный момент код отказывался работать так, как это ожидалось, но в итоге его удалось приручить, и нейросеть таки «съела» изображения и почти корректно определила, что на них изображено.

Исходный размер 1028x368

./результаты

Исходный размер 1015x1018

Выше — одна из первых генераций. Запрос — art in HOUSEOFHOAX style, dark skinned man with green eyes and black hair, topless.

Мне было любопытно, как нейросеть увидит тело в моей стилистике. Мне всегда было тяжело рисовать «живые» мышцы, местами неидеальные, не очень красивые, в общем, не «пластмассовые».

Результат меня порадовал, ведь мышцы (торс и руки) выглядят по-необычному сухими, неидеальными, неровными. Пожалуй, мне нужно будет потренироваться чтобы повторить такое.

Также эта и последующие генерации отметили слабое место: прически. Все они либо «прилизаны», либо стремятся вверх как языки пламени. Стоит уделить больше времени объему волос.

Исходный размер 1016x1021

Следующий запрос — «art in HOUSEOFHOAX style, bald woman, piersed nipples, rounded with feathers, dynamic pose».

Для хорошего арта важна динамика и «воздух» в движениях и в положении объектов/одежды, поэтому я составил вопрос, фокусирующийся именно на этом.

Я удивился тому, как интересно расположились перья, и как они окружили персонажку, а в особенности — её руки. Они выглядят так, будто они нанизаны на вуаль, поддуваемую снизу, из-за чего появился приятный объемный эффект. Нужно будет потренировать взаимодейтсвия персонажей с объемами, чтобы избавиться от плоскостности.

Обучение генеративной нейросети под стиль художника Thony Hoax
Проект создан 10.04.2025
Мы используем файлы cookies для улучшения работы сайта и большего удобства его использования. Более подробную информац...
Показать больше