Создание инфраструктуры креативного производства.
Цель проекта — создать уникальную генеративную нейросеть, способную создавать изображения в определённом художественном стиле и изображать конкретного персонажа. Для этого я использовала подход дообучения (fine-tuning) на базе модели Stable Diffusion, передав ей как художественные элементы выбранного стиля, так и визуальные характеристики конкретного героя. В результате нейросеть научилась интерпретировать текстовые запросы, представляя их в виде работ, объединяющих заданный стиль и образ персонажа, что позволяет создавать оригинальные изображения.
Исходные изображения для обучения
Художественный стиль, который я придумала, это картины с мечтательными пастельными пейзажами, мягкими световыми эффектами и воздушными текстурами.
Так же я придумала персонажа Калипсу — фантастическую героиню с серебристыми волосами и фиолетовыми глазами, выполненную в стиле Арт-Нуво с элементами природы в одежде.
Модели удалось синтезировать композиции с мягкой пастельной палитрой, световыми эффектами из обучающего стиля и уникальными деталями внешности героини, отражающими её характер и оформление в духе Арт-Нуво.
Процесс обучения нейросети:
1)Подготовка и сбор данных 2)Разметка данных 3)Настройка модели 4)Файнтюнинг (дообучение) 5)Дополнительные методы улучшения 6)Валидация и отбор результатов
В процессе генерации использовались дополнительные техники улучшения качества — например, регуляризация и тщательный подбор промптов, что повысило стабильность и разнообразие выходных образов.
Некоторые изображения акцентируют внимание на лице и выражении персонажа, другие — на художественном окружении и стилистических элементах пейзажа, что подчёркивает гибкость модели.
Результаты соответствуют первоначальной концепции.
При разработке первоначальных изображений я использовала нейросеть Gigachat.
Промпты для Gigachat: Стиль: dreamy pastel landscapes with soft lighting effects and airy textures.
Персонаж: a fictional fantasy heroine with silver hair, purple eyes in the Art Nouveau style, with elements of nature (leaves, flowers) in her clothes
