Wan-Animate-2
Новая версия персонажного оживлятора без привычных костылей вроде отдельных экстракторов движения - видео-драйвер идет прямо в трансформер, и это дрейф идентичности персонажа при сложных движениях.
Ракурс камеры можно задать текстом, независимо от исходного видео. Раньше камера была жёстко привязана к драйверу, тут её отвязали.
Есть облегчённая версия для рилтайма: обучена трёхэтапно, включая дистилляцию с поблочным обратным распространением, и держит задержку на уровне живого стрима - то есть цифровые аватары и ведущие трансляций уже не про офлайн-рендер
Гитхаб
HF
А также
https://huggingface.co/Comfy-Org/Wan-Animate-2/tree/main
https://github.com/Comfy-Org/workflow_templates/blob/main/templates/video_wan2_2_14B_animate.json
#wananimate2 #characteranimation #pose2video
Новая версия персонажного оживлятора без привычных костылей вроде отдельных экстракторов движения - видео-драйвер идет прямо в трансформер, и это дрейф идентичности персонажа при сложных движениях.
Ракурс камеры можно задать текстом, независимо от исходного видео. Раньше камера была жёстко привязана к драйверу, тут её отвязали.
Есть облегчённая версия для рилтайма: обучена трёхэтапно, включая дистилляцию с поблочным обратным распространением, и держит задержку на уровне живого стрима - то есть цифровые аватары и ведущие трансляций уже не про офлайн-рендер
Гитхаб
HF
А также
https://huggingface.co/Comfy-Org/Wan-Animate-2/tree/main
https://github.com/Comfy-Org/workflow_templates/blob/main/templates/video_wan2_2_14B_animate.json
#wananimate2 #characteranimation #pose2video