Обучение генеративной нейросети под стиль Джексона Поллока
Стилистика
Для до-обучения генеративной нейросети я использовала картины Джексона Поллока. Передо мной стояла цель обучить модель его живописной стилистике.
О художнике
Джексон Поллок — американский художник, идеолог и лидер абстрактного экспрессионизма, оказавший значительное влияние на искусство второй половины XX века. Живописную манеру Поллока можно назвать экспрессивной, хаотичной и революционной для своего времени.
Сбор изображений для обучения
Изображения, использованные для обучения
Для обучения нейросети нужно было подготовить базу изображений в одинаковом разрешении с соотношением сторон 1:1.
Мной были отобраны или же предварительно подготовлены, обрезаны, изображения подходящего формата, были исключены кадры с искажениями или некачественной детализацией и низким разрешением, для создания более качественного и информативного набор данных, изображений, для последующей генерации.
Подготовка среды
Подключаем необходимые модули, настраиваем рабочую директорию и загружаем собранные изображения.
Генерация метаданных
Метаданные используются при обучении моделей для связывания изображений с их описаниями. Это помогает модели лучше понять, какой визуальный контент соответствует заданному описанию, что особенно важно при дообучении модели с помощью методов Dreambooth LoRA.
Обучение модели
Эта команда запускает процесс обучения модели, по завершению которого, она сможет генерировать картинки в нужном нам стиле.
Сохранение модели на Hugging Face
Начало работы с моделью
Запускаем модель с нашей LoRA и начинаем генерировать изображения!
Результаты генерации
Получившиеся изображения можно разделить на 3 условные категории.
Животные
Люди, персонажи, взаимоотношения
Чувства, ощущения, явления
love joy
death
Получившуюся серию объединяет относительная приземленность и обыденность сюжетов, животные, люди, персонажи и чувства являются наиболее популярными сюжетами изображений, а также темами и явлениями, с которыми люди обращаются в повседневности. Объединяя такие приземленные сюжеты с экспрессивной, противоположной заурядности и обыденности, стилистикой работ Поллока, в своей серии я создаю контраст между условными формой и содержанием.
