HildAI | Обучение генеративной нейросети под стиль мультсериала «Hilda»

Этот проект родился из моей любви к мультсериалу «‎Hilda» от Netflix — ещё на первом курсе я создавала настольную игру и анимацию в его стиле, а теперь превратила эту эстетику в ИИ-инструмент для всех, кто хочет творить в этом уютном мире.

Я хотела бы, чтобы эта модель стала не просто генератором картинок, а настоящим творческим «соавтором», который вдохновляет и поддерживает.

Я надеюсь, что этот проект, эта модель поможет художникам преодолеть страх чистого листа, предоставляя новые идеи через неожиданные генерации и сохраняя магию рукотворного стиля мультсериала. Эта модель может стать источником вдохновения для концепт-артов, референсов и даже создания комиксов или раскадровок.

Пусть эта обученная модель станет инструментом, который вдохновит на эксперименты и позволит взглянуть на привычные вещи под новым углом, превращая любимую эстетику в неисчерпаемый источник креативности и новых открытий.

Для обучения модели я собрала оригинальный датасет из 90 скриншотов мультсериала «Хильда», полученных с платформ Fancaps и Pinterest.

Все изображения прошли предварительную обработку: • Приведение к квадратному формату (соотношение 1:1) • Единообразное уменьшение разрешения до 512×512 пикселей • Визуальная проверка, чтобы персонажи были кадрированы аккуратно и по центру, чтобы не было намешано ничего лишнего.

Работа началась с использования предоставленного нам учебного шаблона для нейросетевого обучения.

После подготовки датасета я приступила к обучению модели, чтобы она могла создавать изображения в стиле мультсериала.

Процесс обучения и генерации стал для меня увлекательным экспериментом, где технологии и искусство переплелись, открывая новые возможности для творчества и вдохновения, поиска референсов.

Этот опыт позволил мне не только глубже понять работу нейросетей, но и создать неплохой инструмент, способный интерпретировать невероятную эстетику «Хильды» через призму ИИ.

При начальном тестировании модели был использован базовый промт: «art in HILDA style, a blue-haired, smiling, happy girl» num_inference_steps=25

Результат генерации оказался вполне ожидаемым: множество артефактов, несовершенная анатомия персонажа, асимметрия черт лица, а также абстрактный фоны. Всё это возникло из-за малого числа шагов и поверхностного промта.

Однако всё равно считывается знакомая цветовая палитра, форма волос, нос. Генерация уже отдаленно походит на стилистику мультсериала, что является хорошим знаком.

Важно отметить, что качество изображений было улучшено с помощью апскейлинга в соответствующих программах.

Третья и четвертая генерации демонстрируют наиболее точное соответствие стилистике мультсериала «Хильда».

На этих изображениях четко прослеживаются ключевые элементы фирменного визуального языка: • Характерные упрощенные формы персонажей, схожие формы глаз, носа • Выразительные толстые контуры • Сдержанная природная палитра (охристые, болотно-зеленые и небесно-голубые тона) • Минималистичная проработка теней и текстур

В рамках одного из первых тестирований возможностей обученной модели я провела эксперимент по адаптации известных анимационных персонажей — Микки Мауса (Disney) и Эльзы (Frozen) — в стилистике мультсериала.

Анализ сгенерированных изображений показывает, что модель успешно комбинирует характерные черты разных персонажей из обучающего датасета. Она успешно усвоила и передала основные стилевые особенности.