К ленте

Нейрорендер и 3D-превиз: новый подход к анимации

Генерация видео с помощью нейросетей сталкивается с проблемой неуправляемости результатов. Попытки задать точную траекторию камеры или походку персонажа через текстовый промпт часто приводят к непредсказуемым артефактам и высоким затратам на вычислительные ресурсы.

Для решения этой задачи разработчики внедряют гибридный пайплайн, сочетающий программирование и искусственный интеллект. На первом этапе создается легкий 3D-превиз с использованием инструментов Three.js и Claude Code.

Этот подход позволяет заранее отработать режиссуру и блокинг сцены без затрат на видео-инференс. В браузере проверяется физика шага, паузы перед поворотом головы и ракурсы камеры с использованием простых нетекстурированных манекенов.

Созданный ролик-превиз используется как входной референс для модели MiniMax H3. При финальной генерации промпт значительно сокращается: он содержит лишь указание следовать движению из исходного видео и описание локации.

Такой метод снижает риск ошибок при анимации персонажей и делает процесс создания контента более предсказуемым. Однако вторичная динамика, такая как складки ткани и движение рукавов, все еще требует дополнительной доводки.

3,3 тыс. просмотров

Ещё из канала Метаверсище и ИИще

Похожие в категории Технологии