Модель генерації відео Tongyi Wan2.7-Video запущена: підтримка повномодальних вхідних даних текст, зображення, відео, аудіо

Фенхуанська технологія повідомляє: 3 квітня, нещодавно, модель для генерації відео Wan2.7-Video офіційно запущено в роботу. Ця модель підтримує введення всіх модальностей — тексту, зображень, відео та аудіо, — з акцентом на можливості редагування та внесення змін після створення відео; її мета — зробити відеоконтент редагованим, як документ.

У частині редагування відео Wan2.7 підтримує локальні корекції кадру за допомогою інструкцій, без потреби заново генерувати повний фрагмент. Конкретні функції включають: видалення або додавання елементів (наприклад, «викинути з відео поїзд»), заміну об’єктів (наприклад, «замінити плівку на тарілку»), зміну атрибутів об’єктів (наприклад, «змінити колір будівлі»); підтримується точне додавання за наявним референсним зображенням. На рівні середовища та стилю можна, не змінюючи дії персонажа, перетворити тло з літнього на пізню осінь або в один клік перейти до художнього стилю, наприклад, фетр-проєкції тощо. Крім того, підтримується підвищення якості відео (наприклад, розфарбування чорно-білої картинки), завдання з візуального розуміння (наприклад, сегментація об’єкта) та корекція способу зйомки (наприклад, зміна фокусування).

У частині зміни сюжету Wan2.7 дозволяє редагувати репліки персонажів, їхні дії і навіть ракурс зйомки, не змінюючи вихідні ідентичність та сцену. Зміни реплік можуть зберігати емоції, рухи губ і тембр; зміни дій, наприклад, «дівчина, що сидить на дивані, стає такою, що стоїть і грає в ігри». На рівні історії можна замінити ігрового персонажа на середньовічного лицаря, зберігаючи при цьому початкову позу, в якій той тримає предмет. Такі параметри, як позиція камери, план, тип об’єктива, фокусна відстань тощо, можна також коригувати за допомогою інструкцій, наприклад, «змінити об’єктив так, щоб зйомка поступово піднімалася вгору від землі». Ці функції спрямовані на зниження технічного порогу для повторного створення відео, щоб надавати авторам більш гнучкі засоби керування.

(Редактор: Дун Пінпін)

     【Дисклеймер】Ця стаття відображає лише особисті погляди автора і не має відношення до Hexun. Сайт Hexun зберігає нейтралітет щодо наведених у тексті тверджень, оцінок і суджень та не надає будь-яких прямих чи непрямих гарантій щодо точності, надійності або повноти інформації, що міститься в матеріалі. Будь ласка, читачам слід розглядати матеріал лише як довідку та брати на себе всі ризики і відповідальність самостійно. Електронна пошта: news_center@staff.hexun.com

Повідомити про порушення