Обучение генеративной нейросети под стиль «Острова сокровищ»
Идея проекта
Проект посвящён созданию визуальной вселенной в стиле культового советского мультфильма «Остров сокровищ» (1988) — с его карикатурными, выразительными персонажами и яркой графикой. Поставили задачу — создавать персонажей в стилистике мультфильма, чтобы получить собственную галерею пиратов, хоть немного похожих на тех, кто мог бы спокойно появиться в той версии «Острова сокровищ».
Исходные изображения для обучения
Для обучения использовались изображения персонажей и сцен из советского «Острова сокровищ» — с акцентом на: • особенности лиц • характерные позы и мимику • детали костюмов
кадры из мультфильма «Остров Сокровищ»
Сгенерированная серия изображений
В конечном итоге получилась серия изображений стилистически похожих на советский мультфильм
Развёрнутый комментарий к результатам
Что получилось? • Модель передаёт настроение персонажей — преувеличенные черты лица, выразительные жесты. • Визуально видно влияние оригинала: грубая штриховка, нарочито неровные контуры, мультяшные пропорции тел.
Методы: • В качестве основы использовалась кастомная модель, натренированная на ограниченном датасете с персонажами. • Для генерации промптов использовали ChatGPT (ГенИИ), чтобы продумать разнообразные сценарии и образы. • Генерация велась в формате: «photo collage in OSTROV style [персонаж]».
Анализ: • Большая часть персонажей получилась странной, но передающей настроение • Вариативность высокая: каждый образ уникален, но их объединяет стилистическая целостность.
Процесс обучения и код
Модель обучалась на базе визуальных примеров из мультфильма. Основные шаги: • Подготовка датасета и генерация метаданных. • Финетюнинг с использованием DreamBooth. • Генерация серий изображений по заранее составленным промптам.
Полный ноутбук с кодом: https://disk.yandex.ru/d/DkyOBZ6Kktz-TQ
Описание применения генеративной модели
В проекте использовался ChatGPT: для генерации промптов (описания пиратов, стилизация запросов под эстетику OSTROV)
Ссылка на Chat GPT: https://openai.com/