Alibaba стартира Wan2.7-Video, надграден пакет от модели за генериране на видео, който обхваща четири основни възможности – текст-към-видео, изображение-към-видео, генериране на референтно видео и редактиране на видео – отбелязвайки преминаване от генериране на един актив към цялостно създаване на видео, управлявано от AI.
Wan2.7-Video позволява на потребителите да редактират видеоклипове с едно изречение, автоматично запазвайки последователността в осветлението, сенките и текстурите. Той също така поддържа въвеждане на множество изображения и въвежда комбиниран механизъм за видео продължение и контрол на крайния кадър, позволявайки на потребителите да удължават клиповете, докато посочват точния краен кадър. Моделът поддържа мултимодални препратки, с до пет входа на теми за по-голяма творческа прецизност.
За кинематография потребителите могат просто да въвеждат кратки текстови указания и моделът автоматично ще генерира сценарии, ще планира снимки и ще коригира композицията на сцената. Може също така да адаптира градиране на цветовете и стилове на осветление, базирани на различни филмови жанрове.
Освен това системата позволява редактиране на видео също толкова интуитивно, колкото и редактиране на снимки. Потребителите могат да правят локализирани корекции чрез команди, като редактираните зони се смесват безпроблемно с оригиналния кадър по отношение на осветлението и консистенцията на материала. Моделът поддържа добавяне или премахване на елементи, замяна на обекти, модифициране на атрибути и прецизно вмъкване на съдържание въз основа на референтни изображения. Той може също така да запази движението на героите, докато трансформира околната среда – например промяна на летен фон в късна есен – или превключване на визуални стилове с една команда.
За вече съществуващи или генерирани от AI кадри, Wan2.7-Video позволява на потребителите да променят наративното съдържание и техниките за заснемане чрез текстови инструкции. Без да променят самоличността или настройката на персонажа, потребителите могат да коригират действията, диалога и дори перспективите на камерата за вторично създаване. Моделът поддържа замяна на диалог, като същевременно запазва емоционалния тон, точността на синхронизиране на устните и последователността на гласа. Потребителите могат също така да променят действията на героите – например промяна на седнал герой в такъв и да играят видео игри – като същевременно запазват всички останали елементи непроменени.
Освен това моделът позволява корекции на стила на героите, облеклото и реквизитите в рамките на една и съща сцена, без да променя позата. От производствената страна Wan2.7-Video поддържа промени в параметрите на камерата като позиция, ъгъл, мащаб на снимката, тип на обектива и фокусно разстояние.
Източник: AI Daily
Source link
Like this:
Like Loading…
Нашия източник е Българо-Китайска Търговско-промишлена палaта
