#AI108
Kling 3.0
Пришло время рассказать про флагман в создании видео на данный момент. Как вы наверное уже слышали релиз Seedance 2.0 перенесли.
Сначала подробно, кратко и сухо ниже ^_^
Модель отлично справляется с мультисценами и теперь хорошо справляется с липсинком на 5-ти языках (Китайский, Английский, Японский, Корейский, Испанский). Генерация видео до 15 секунд с некоторыми хитростями под капотом там судя по тестам что-то на подобии FramePack, то есть при генерации вашего видео 3-5 секунд будут без активного движения, камеры и липсинк будет работать криво в последние секунды.
Как итог рекомендую вам генерировать видео до 10-12 секунд.
Элементы - теперь можно добавлять как продуктплейсмент, так и сделать персонажей более консистентными, на вход не только изображения, но и видео (3-8 секунд), все элементы можно подвязывать в промптах.
Прокачали не только основную модель, но и Omni качество стало заметно лучше, но без референсов всё ещё не идеальный результат, поэтому не скупитесь их туда подтянуть не пожалеете.
Теперь подход к генерации и промптированию может сильно отличаться в сравнении с прошлыми моделями, по сути есть 3 подхода:
- Multi-Shot off (видео одним куском без монтажа как раньше)
- Multi-Shot Auto - один промпт в котором описаны сцены (Shot 1: ..., Shot 2 : ... и так далее всё в одном промпте)
- Custom Multi-Shot - под каждую сцену у вас отдельное поле в нём вы указываете тайминг, пишете промпт и прикрепляете элементы о которых я говорил выше
Наконец можно попрощаться со зловещей долиной - Kling 3.0 невероятно хорош в эмоциях и они не вызывают внутреннего отторжения.
Теперь о минусах - модель сильно проигрывает Seedance 2.0 в экшсценах - обмен ударов не работает в принципе, стрельба выглядит уже лучше, но цензура присутствует. Для экшн сцены с заложником, которую я прикрепил сюда взял промпт из канала PsyEyes.
По моим ощущениям - теперь генерить короткометражки можно с удовольствием и со вкусом. Пока ждём Seedance 2.0 можно прокачать свои скилы в мультисценах в Kling, ведь структура промпта практически идентична.
o_O Кратко O_o
-15 секунд генерации видео с отличным качеством (в реальности лучше делать 10-12 секунду)
- Поддержка 5 языков для речи с акцентами (Китайский, Английский, Японский, Корейский, Испанский)
- Multi-Shot за одно видео можно сделать сразу несколько планов/сцен или сделать split-cut монтаж
- Хорошо работает с Элементами(ассетами/референсами), теперь можно подтягивать как рефернс и видео 3-8 секунд. Теперь продуктплейсмент стал ещё проще
- Omni модель значительно прокачали, но если вы не поскупитесь на добавление элементов(референсов) итоговое видео будет ещё лучше.
Но в данный момент лучше просто сгенерировать в Kling 3 с другим сеттингом, результат будет лучше.
Kling 3.0
Пришло время рассказать про флагман в создании видео на данный момент. Как вы наверное уже слышали релиз Seedance 2.0 перенесли.
Сначала подробно, кратко и сухо ниже ^_^
Модель отлично справляется с мультисценами и теперь хорошо справляется с липсинком на 5-ти языках (Китайский, Английский, Японский, Корейский, Испанский). Генерация видео до 15 секунд с некоторыми хитростями под капотом там судя по тестам что-то на подобии FramePack, то есть при генерации вашего видео 3-5 секунд будут без активного движения, камеры и липсинк будет работать криво в последние секунды.
Как итог рекомендую вам генерировать видео до 10-12 секунд.
Элементы - теперь можно добавлять как продуктплейсмент, так и сделать персонажей более консистентными, на вход не только изображения, но и видео (3-8 секунд), все элементы можно подвязывать в промптах.
Прокачали не только основную модель, но и Omni качество стало заметно лучше, но без референсов всё ещё не идеальный результат, поэтому не скупитесь их туда подтянуть не пожалеете.
Теперь подход к генерации и промптированию может сильно отличаться в сравнении с прошлыми моделями, по сути есть 3 подхода:
- Multi-Shot off (видео одним куском без монтажа как раньше)
- Multi-Shot Auto - один промпт в котором описаны сцены (Shot 1: ..., Shot 2 : ... и так далее всё в одном промпте)
- Custom Multi-Shot - под каждую сцену у вас отдельное поле в нём вы указываете тайминг, пишете промпт и прикрепляете элементы о которых я говорил выше
Наконец можно попрощаться со зловещей долиной - Kling 3.0 невероятно хорош в эмоциях и они не вызывают внутреннего отторжения.
Теперь о минусах - модель сильно проигрывает Seedance 2.0 в экшсценах - обмен ударов не работает в принципе, стрельба выглядит уже лучше, но цензура присутствует. Для экшн сцены с заложником, которую я прикрепил сюда взял промпт из канала PsyEyes.
По моим ощущениям - теперь генерить короткометражки можно с удовольствием и со вкусом. Пока ждём Seedance 2.0 можно прокачать свои скилы в мультисценах в Kling, ведь структура промпта практически идентична.
o_O Кратко O_o
-15 секунд генерации видео с отличным качеством (в реальности лучше делать 10-12 секунду)
- Поддержка 5 языков для речи с акцентами (Китайский, Английский, Японский, Корейский, Испанский)
- Multi-Shot за одно видео можно сделать сразу несколько планов/сцен или сделать split-cut монтаж
- Хорошо работает с Элементами(ассетами/референсами), теперь можно подтягивать как рефернс и видео 3-8 секунд. Теперь продуктплейсмент стал ещё проще
- Omni модель значительно прокачали, но если вы не поскупитесь на добавление элементов(референсов) итоговое видео будет ещё лучше.
Но в данный момент лучше просто сгенерировать в Kling 3 с другим сеттингом, результат будет лучше.