В процессе работы я использовала ChatGPT (OpenAI) как вспомогательный инструмент для обсуждения концепции проекта, разработки сюжетов для генерации, составления промптов, структурирования текста экспликации и решения технических вопросов при работе с Google Colab. Для генерации изображений использовалась Stable Diffusion XL с обученным модулем LoRA.
Цель проекта — обучить генеративную нейросеть на собственных иллюстрациях и проверить, сможет ли она использовать особенности моего графического стиля при создании новых изображений.Мне было интересно не просто получить отдельные генерации, а исследовать, насколько нейросеть способна сохранить узнаваемый характер исходных рисунков и одновременно предложить новые визуальные решения. Поэтому для обучения я использовала собственные иллюстрации, объединённые общим стилем.
Для обучения была подготовлена подборка из 24 собственных иллюстраций. Они послужили материалом, на основе которого модель должна была усвоить особенности графического языка.
Для работы использовался Google Colab и ноутбук на основе Stable Diffusion XL с методом обучения LoRA. Этот подход позволил дополнительно обучить модель на моём наборе изображений, не создавая новую генеративную модель с нуля.После подготовки изображений и настройки параметров обучения я использовала полученную LoRA для генерации новых изображений на основе текстовых запросов. В запросах я задавала сюжет, а обученный модуль должен был помочь передать особенности исходного графического стиля.
Для итоговой серии я выбрала изображения с необычными персонажами и сюрреалистичными ситуациями. Они позволяют исследовать, как освоенный графический стиль проявляется в новых формах, пропорциях и композициях.
При анализе серии я обращала внимание на несколько характеристик: контраст между чёрным и белым, характер контуров, фактуру изображения, построение силуэтов и пропорции персонажей.Отдельный интерес представляет сравнение разных генераций. Даже при одинаковом подходе к формулировке запросов модель может предлагать разные композиционные решения, детали и формы. При этом часть особенностей исходных рисунков может сохраняться лучше, чем другие.
Проект позволил исследовать возможности и ограничения дообучения генеративной модели на собственных изображениях. Важным результатом стала не только итоговая серия, но и возможность сравнить исходный визуальный материал с новыми изображениями, созданными на его основе.
В процессе работы я использовала ChatGPT (OpenAI) как вспомогательный инструмент для обсуждения концепции проекта, разработки сюжетов для генерации, составления промптов, структурирования текста экспликации и решения технических вопросов при работе с Google Colab. Для генерации изображений использовалась Stable Diffusion XL с обученным модулем LoRA.