Концепция
Я решила взять за основу 12 персонажей для игральных карт, посвященных хэллоуину. Их разработкой занималась моя подруга. Сами карты получились очень характерными — с их особой графикой, настроением, вниманием к деталям и немного мрачной, но притягательной эстетикой.
Основная цель проекта - узнать насколько нейросеть Stable Diffusion сможет попасть в стиль. И интересно проверить, как алгоритм справится с передачей характерных линий, цветовых решений и общей атмосферы, которые отличают работы моей подруги. А также посмотреть какие концепт-арты смогут получиться на основе этого стиля.
Исходные иллюстрации персонажей
Игральные карты выполнены в довольно просто стиле, без сложного покраса. Персонажи находятся в похожих позах.
Исходные иллюстрации персонажей
Исходные иллюстрации персонажей
Для начала, скачиваем сторонние библиотеки
Затем, загружаем изображения в архив
Выводим превью картинок
Загружаем BLIP и выводим текстовое описание картинок
Далее код находит и загружает картинки
Я создаю JSONL-файл с метаданными, где для каждой картинки генерирую подпись с префиксом
Показываем содержимое файла metadata.jsonl из папки cher
Очищаем память и запускаем ускоритель
Вводим токен hugging face и загружаем датасет
Настройки LORA
Сохраним модель на hugging face
Настраиваем Stable Diffusion и начинаем генерацию изображений
