Uni3C: контроль камеры и движений человека для разных видеомоделей с использованием 3D рулек.
Сначала из первого кадра вытаскивается карта глубины и по ней делается облако точек. Затем поинтклауды сворачиваются и рендерятся в видео. Персонажи и мир обрабатываются фреймворком раздельно, а на этапе ре-рендера идёт сверка, чтобы движения выглядели адекватно относительно движения камеры.
Kijai уже наваял веса и добавил WanVideo Uni3C ноды в Comfy. Если у себя их не находите в поиске, обновите WanVideoWrapper ноды через менеджер. Uni3C ноды подрубаются в воркфлоу Wan, например в I2V.
Сайт
Гитхаб
Хаггинг (официальный)
Хаггинг (Kijai)
Сначала из первого кадра вытаскивается карта глубины и по ней делается облако точек. Затем поинтклауды сворачиваются и рендерятся в видео. Персонажи и мир обрабатываются фреймворком раздельно, а на этапе ре-рендера идёт сверка, чтобы движения выглядели адекватно относительно движения камеры.
Kijai уже наваял веса и добавил WanVideo Uni3C ноды в Comfy. Если у себя их не находите в поиске, обновите WanVideoWrapper ноды через менеджер. Uni3C ноды подрубаются в воркфлоу Wan, например в I2V.
Сайт
Гитхаб
Хаггинг (официальный)
Хаггинг (Kijai)