Нейрокомикс от агентства KAIFOOI: «Воспоминания о настоящем»

Команда digital-агентства KAIFOOI взяла за основу реальную историю уральского села Маминское и развернула её сразу в четырёх эпохах, чтобы показать: судьбу любого места можно изменить к лучшему.

Когда отдел креаторов скинул в общий чат агентства ссылку на конкурс — у нескольких человек одновременно что-то стрельнуло в голове, и это точно была не мигрень.

Дело в том, что в Свердловской области есть проект URALRUIN. Его авторы, Артур Ларионов и Ольга Гордиенко вместе с командой занимаются возрождением заброшенных и полузабытых мест на Урале. Они же второй год подряд проводят фестиваль в селе Маминское. В этом году наш арт-директор Виктор Лёгостев и hr-менеджер Аня Давыдова присоединились к команде фестиваля, чтобы помочь с запуском веломаршрута, созданием ленд-арт-объектов и другими организационными моментами. Остальные участники KAIFOOI посетили фестиваль уже в качестве гостей.

Изначально в основу сценария должна была лечь история проекта URALRUIN и их инициатив. Наш креатор Аня Мельникова изучила всё об истории села Маминское и написала классный сценарий про успешного городского архитектора, который по стечению обстоятельств попал в село и стал менять его к лучшему. Команда начала работу над визуализацией, но уже следующим утром в рабочий чат с криком «Кто продал наш сценарий конкурентам?!» ворвался проджект Даня. Оказалось, на Sostav вышел крутой комикс с очень похожим сюжетом. Аня развернула историю на 180°, полностью переписав сценарий в духе «Топей», но история повторилась — гении думают одинаково. Тогда и родилась мысль о том, что сюжет нужно сделать не линейным, а рваным, с перемещениями во времени. Причём часть про 2020 год и организацию фестиваля в селе была основана на реальных событиях.

Первые варианты генераций, основанные на сотни собранных рефов от нашего дизайнера Саши Попова, были похожи на иллюстрации в духе русских сказок. По ним мы собрали идеальный референс для параметра — sref (style reference) в Midjourney — by Ivan Bilibin style.

Иван Билибин — художник, автор уникальных иллюстраций к русским сказкам. Причём иллюстраций у него достаточно много — более 800 изображений, поэтому Midjourney достаточно хорошо поняла, какой стиль мы имеем в виду. Нам очень понравилась визуализация, но как адаптировать этот стиль под четыре разных эпохи, оставалось для нас загадкой.

Мы начали экспериментировать с тем, как можно получить одинаковую рисовку

с разными атрибутами времени — чтобы и будущее, и прошлое, и настоящее выглядело так, словно оно сделано одними кистями (желательно похожими на кисти Ивана Билибина).

В итоге ключом к решению нашей проблемы стало создание одного универсального имиджа, который можно складывать в -sref. Мы создали такой имидж для периода 1686 года, а потом через Photoshop сделали адаптивы по цвету для других времен — 1998, 2020 и 2066 годов.

Но чем сложнее были сцены, тем хуже отрабатывал -sref. Одной картинки было недостаточно, и генерации выглядели далеко не так, как нам хотелось. Выходом стала скрупулезная работа от сцены к сцене с использованием параметров -sref.По факту мы создавали одну сцену, делали её рефом и так шли от сцене к сцене, чтобы сохранить наследственность. Это был долгий путь, и даже в таком наполовину ручном режиме мы зачастую не получали идеальный результат. Поэтому часть объектов и фонов менялось через Generative Fill Photoshop’а, а некоторые объекты перекрашивалась вручную.

И насчет ‘by Ivan Bilibin style' — мы всё-таки использовали этот текстовый параметр при генерации и в будущем, и в прошлом, и в настоящем. Эта вводная стала своеобразным уравнителем, который помогал привести генерации разных эпох к одному стилю.

Секрет запоминающегося персонажа — яркая внешность. Но чем мельче и сложнее отличительные черты, тем более разнообразными их будет генерировать нейросеть.

Поэтому нам потребовалось более 200 генераций для каждого из 8 персонажей, чтобы отточить образы и сделать их лица идеальными для параметра -cref (character reference) — функции в Midjourney, которая прикрепляет рефере Источник: www.sostav.ru