Брэд Питт останется без работы: Alibaba выпустила нейросеть для генерации фильмов и видеомонтажа

Система Wan2.7-Video объединяет в себе сразу четыре модели, которые отвечают за генерацию видео из текста, картинок и других видеоматериалов, а также за глубокое редактирование готового контента. В отличие от предыдущих итераций ИИ, эта модель решает главную проблему нейросетевого кино — отсутствие логической последовательности между кадрами. 

Теперь персонажи сохраняют свою внешность, голос и уникальные черты лица на протяжении всего фильма, а нейросеть способна удерживать консистентность до пяти различных героев одновременно в рамках сложных повествовательных линий.

Особое внимание разработчики уделили «умной» режиссуре: нейросеть понимает команды по управлению камерой, включая сложные пролеты дронов от первого лица, орбитальные съемки на 360 градусов и динамическое освещение. 

Пользователь может словами изменить погоду в кадре, переписать диалог (система сама подстроит мимику и движение губ) или задать финальный кадр, к которому нейросеть плавно подведет сюжет без резких склеек. 

На фоне таких возможностей голливудские звезды и огромные съемочные группы действительно начинают выглядеть как дорогой анахронизм, поскольку Wan2.7 позволяет за считанные минуты делать то, на что раньше уходили месяцы постпроизводства и миллионы долларов.

Параллельно с видеомоделью Alibaba обновила и генератор изображений Wan2.7-Image, который теперь выдает картинки с фотографической точностью и идеальной передачей цветов по конкретным кодам брендов. Нейросеть научилась детально прорисовывать анатомию, включая структуру костей и форму глаз, а также без ошибок рендерить сложные академические тексты, таблицы и формулы на 12 языках. 

Сочетание этих инструментов дает создателям контента возможность выпускать высокобюджетные проекты, не выходя из дома, что ставит под вопрос будущее традиционных киностудий.