Обучение модели на основе работ Фуки Уэды. Голливудские звезды.
Введение
Цель проекта — создание нейросети, генерирующей изображения в стиле произведений японской художницы-иллюстратора Фуко Уэды (1979).
Фуко Уэда — один из моих любимых современных иллюстраторов. Её изысканные и необычные работы принесли ей мировую известность ещё в юном возрасте. Картины Уэды представляют собой сюрреалистический, волшебный мир, центральным элементом которого является женский образ. Её героини — прекрасны, меланхоличны, загадочны и полны противоречий, что и составляет особую притягательность её творчества. Они гармонично вписаны в окружающую среду, взаимодействуя как с живой, так и с неживой природой, и удивительно сочетают в себе невинность и тревогу. Использование элементов японской культуры погружает зрителя в атмосферу умиротворения, где героини Уэды предстают воплощением спокойствия и красоты.
Описание процесса обучения
Датасет для обучения был собран вручную и состоял из 23 изображений работ художницы, полученных с ее официального сайта. Для обучения нейросети Stable Diffusion использовался предложенный в лекциях код SDXL DreamBooth LoRA, доступный на GitHub. Процесс генерации изображений осуществлялся с использованием промптов, содержащих префикс «in FUKOUEDA style».
Работы Фуко Уэды
Фуко Уэда. Communication 2. 2017 г.
Фуко Уэда. The day was able to befriend. 2019 г., Фуко Уэда. Весенний дождь (春の雨) 2010 г.
Фуко Уэда. Flower of Memory (Tripych) (記憶の花) 2014 г., Фуко Уэда. 1. Mirror. 2015 г.
Сгенерированные изображения
Вдохновившись творчеством Фуки Уэды, я создала серию из 21 изображения голливудских звезд. Для придания каждому изображению особой выразительности, я выбрала в качестве дополнительных промтов названия различных животных и растений, с которыми я ассоциирую каждого из актеров. Это позволило сделать каждую композицию не только визуально привлекательной, но и наполненной глубиной и символикой, что придает ей дополнительный интерес, оригинальность и связь с настоящими работами художницы.
Мэрилин Монро в стиле Фуко Уэды. AI.
Изображение успешно передаёт ключевые элементы стиля Уэды: приглушённые пастельные тона (розовый, жёлтый), мягкий свет, намеренную размытость контуров. Особенно удачно передана фирменная черта персонажей ее картин — золотисто-желтый оттенок кожи.
Майкл Джексон в стиле Фуко Уэды. AI.
Однако, детализация несколько уступает оригиналу: животные, цветы и некоторые части тела проработаны менее тщательно. Кроме того, изображение содержит типичные для нейросетей артефакты — лишние конечности или некорректное количество пальцев.
Джонни Депп в стиле Фуко Уэды. AI.
Нейросеть смогла не только скопировать стиль художницы, но и органично адаптировать его к изображениям известных личностей. Несмотря на необычный, сюрреалистичный антураж, окружающий знаменитостей, каждый актер безошибочно идентифицируется.
Джим Керри в стиле Фуко Уэды. AI.
Неотъемлемой чертой творчества Фуки Уэды является атмосфера умиротворения, нежности и меланхолии. Нейросети удалось воссоздать этот эффект, и знакомые лица голливудских звезд, представленные в такой стилистике, хоть и выглядят непривычно, но тем не менее, образуют гармоничное сочетание.
Райан Гослинг в стиле Фуко Уэды. AI.
Энн Хэтэуэй в стиле Фуко Уэды. AI.
Леонардо Ди Каприо в стиле Фуко Уэды. AI.
Тимоти Шаламе в стиле Фуко Уэды. AI.
Натали Портман в стиле Фуко Уэды. AI.
Роберт Дауни-младший в стиле Фуко Уэды. AI.
Анджелина Джоли в стиле Фуко Уэды. AI.
Деми Мур в стиле Фуко Уэды. AI.
Дуэйн Дуглас Джонсон в стиле Фуко Уэды. AI.
Марго Робби в стиле Фуко Уэды. AI.
Маргарет Куолли в стиле Фуко Уэды. AI.
Крис Хемсворт в стиле Фуко Уэды. AI.
Уилл Смит в стиле Фуко Уэды. AI.
Том Холланд в стиле Фуко Уэды. AI.
Зендея в стиле Фуко Уэды. AI.
Скарлетт Йоханссон в стиле Фуко Уэды. AI.
Киану Ривз в стиле Фуко Уэды. AI.
Вывод
Проект демонстрирует потенциал нейросетей в имитации художественных стилей, но также подчёркивает ограничения текущих технологий. Нейросеть способна уловить основные элементы стиля Фуко Уэда, но не может полностью воспроизвести уникальность, глубину и мастерство оригинальных работ. Для достижения более высокого уровня сходства необходимы дополнительные усилия по обучению нейросети и тонкой настройке параметров генерации.
Блокнот
Источники исходных изображений
Сайт Фуки Уэды — https://fucoueda.com/