Nano Banana + Kling AI в архитектурной 3D Визуализации

На этом уроке мы познакомимся с передовым методом создания коротких анимационных роликов в архитектурной визуализации с помощью искусственного интеллекта. Этот подход позволяет значительно ускорить процесс и получить качественный результат без долгого ожидания, характерного для покадрового рендеринга. Для достижения еще большей реалистичности мы интегрируем людей с помощью нейросети "Nano Banana".
Nano Banana + Kling AI в архитектурной 3D Визуализации
На этом уроке мы познакомимся с передовым методом создания коротких анимационных роликов в архитектурной визуализации с помощью искусственного интеллекта. Этот подход позволяет значительно ускорить процесс и получить качественный результат без долгого ожидания, характерного для покадрового рендеринга. Для достижения еще большей реалистичности мы интегрируем людей с помощью нейросети "Nano Banana".
Урок не на YouTube
Этот урок доступен в «Бесплатном базовом курсе» без рекламы и долгой загрузки.
БЕСПЛАТНЫЙ | БАЗОВЫЙ КУРС ЛИБО В TELEGRAM
ТАЙМКОД ПО УРОКУ:
  • 00:00 — Вступление.
  • 01:30 — Где можно использовать Nano Banana.
  • 03:35 — Генерация девушки в кресле.
  • 04:32 — Имитация движения камеры.
  • 06:50 — Использование Banana в Photoshop.
  • 13:30 — Два кадра — один персонаж.
  • 18:30 — Анимация по двум кадрам в Kling AI.
  • 20:40 — Выводы.
Онлайн-курс по 3D-окружению для архитектурной визуализации в 3Ds Max и Corona Render
Подробнее
~

Извлекаем информацию с референса в JSON

Извлекаем информацию с референса в JSON

  • Прежде чем приступить к генерации, нужно составить четкий запрос — текстовое описание окружения вокруг вашего дома. Вы можете сделать это самостоятельно, основываясь на своем видении. Или попросить нейросеть проанализировать референсное изображение и создать структурированную инструкцию в формате JSON.
  • Проанализировать изображение можно с помощью любой текстовой нейросети, зависит от того, есть ли у вас доступ к этим ресурсам в вашем регионе. Возможно, вам придется использовать известные сервисы для обхода ограничений. Я в своей работе чаще всего пользуюсь ChatGPT.

  • Подобрав референс с необходимым окружением загружаем его в чат.
  • В запросе копируем текст ниже из рамки.
Extract all the info from this image and convert it to structured JSON. The generated prompt should only contain information about season, landscape design, plants, trees, ground cover, sky, color palette of plants, render quality, environment, lighting, atmosphere and mood
Рендер
«Добавить девушку, сидящую в кресле»
«Движение камеры вправо. Измени положение рук девушки. Девушка прикасается к чашке губами».
Рендер
«Добавить двух детей и собаку перед домом. Дети играют с собакой».
«Дети играют с собакой. Измени положение детей и собаки в кадре».
"Движение камеры влево"
Рендер
«Вставить мужчину в изображение. Мужчина убирает снег лопатой перед входом в дом».
«Заменить одежду на мужчине»
«Изменить позу мужчины, он кидает снег лопатой в сторону». Изображение обрезано в Photoshop.
  • Иногда нейросеть не может сразу поставить человека в нужное место, даже если дать ей подробное описание. В таких случаях проще вырезать фрагмент изображения и создать персонажей на нем.
  • Результат вставили в Photoshop и замаскировали края для лучшего слияния. Подобный фрагмент был создан в окружении соснового леса. Два мужчины не хотели сидеть рядом, но, разделив генерацию на две части, удалось усадить обоих.
Рендер
«Посади в левое кресло мужчину».
«Посади в правое кресло мужчину».
«Измени их позу, они пьют из своих кружек».
Маски в Photoshop
  • Можно добавить людей в интерьерные фотографии. Важно заранее выбрать ракурс, ориентируясь на положение персонажа, и оставить для него место.
  • Для добавления этого же персонажа в другой ракурс, просто продолжите диалог в этом чате и попросите перенести персонажа с первого изображения на второе.
Рендер
"Добавь босую девушку с длинными светлыми волосами в шелковом бежевом халате"
«Изменить позу девушки»
Рендер
"Девушка в первого изображения сидит в кресле на втором изображении"
"Измени положение рук девушки. Девушка прикасается к чашке губами" Кадр кадрирован в ФШ.
Онлайн-курс 3D визуализации экстерьера
в 3Ds MAX и Corona Render
Подробнее
~

Анимация людей в Kling AI

Анимация людей в Kling AI

  • Для создания видео нам потребуется иная нейросеть, лучше всего на данный момент подходит Kling AI. С выходом версии 2.1, которая позволяет создавать видео по двум кадрам, весь процесс стал более гибким и предсказуемым. В бесплатной подписке "Basic" вы можете воспользоваться этой функцией три раза. Платную подписку я приобретал в сервисе https://ggsel.net там есть множество проверенных продавцов. «Pro» подписка за 32 доллара позволит сгенерировать около 85 видео по 5 секунд.
  • Чтобы создать анимацию, выберите AI Video Generator и модель Video 2.1. Загрузите два кадра в разделы Start и End. Не нужно вводить промты, это только запутает нейросеть и приведет к непредсказуемым результатам. В "Nano Banana" мы уже предусмотрели все необходимое.
"The girl and her mom are walking slowly down the path. For realism, add a slight movement of the trees from the wind. The camera zooms in, The speed of the camera motion is slow"
  • Создать видео можно и из одного изображения, добавив к нему промпт. Так появился кадр с мамой и дочкой, идущими от дома. В Nano Banana не удалось с первого раза разместить персонажей правильно. Пришлось создать фрагмент и доработать его в Photoshop.
  • Для анимации использовалось одно изображение, загружаемое в пункты Start и подбирается описание в поле Prompt.
  • Первая часть посвящена основному описанию: "The girl and her mom are walking slowly down the path".
  • Вторая, анимация окружения: "For realism, add a slight movement of the trees from the wind"
  • Третья, движению камеры: "The camera zooms in, The speed of the camera motion is slow"
"The girl and her mom are walking slowly down the path. For realism, add a slight movement of the trees from the wind. The camera zooms in, The speed of the camera motion is slow"
Рендер
«Маленькая девочка и ее мама гуляют по тропинке рядом с домом».
Результат монтажа в Photoshop
  • Сейчас нейросети могут создавать короткие видеоролики низкого качества. Артефакты в них все еще заметны, особенно когда персонаж двигается быстро. Также нейросети плохо работают с большим количеством людей на дальнем плане. Для мобильных устройств это не так важно, но для крупных проектов пока остается актуальной покадровая анимация.

Крупные онлайн-курсы

Крупные онлайн-курсы

  • Онлайн-курс по 3D-окружению для архитектурной визуализации
    Посмотреть программу курса
  • Онлайн-курс по 3D визуализации экстерьера в 3Ds MAX и Corona Render
    Посмотреть программу курса
  • Сборник готовых проектов в 3Ds MAX. Всего 13 сцен: 5 экстерьеров и 8 интерьеров.
    Посмотреть сцены
  • Онлайн-курс 3D визуализации интерьера для начинающих в 3Ds MAX и Corona Render
    Посмотреть программу курса

Другие уроки

Другие уроки

ПКАЗАТЬ ЕЩЕ