🤖 дизайн.baзa

В Realtime редактор Krea добавили функцию, которая позволяет превращать изображения в 3D-объекты.

Veo 2 — новая SOTA видео-генерация?!

Google стратегически дождались релиза Sora от OpenAI, чтобы сразу представить свою ответку. По их внутренним тестам, Veo 2 заметно опережает конкурентов. Правда, я бы не стал слепо доверять их тестам, согласно которым клинг чуть ли не лучше MovieGen и Sora.

Однако, черрипики на сайте выглядят впечатляюще. Как минимум, фламинго не путает передние и задние ноги и Veo 2 почти безошибочно справился с фигуристкой. Но с более динамичными сценами пока есть трудности, о чём сами признаются в DeepMind — см. пример со скейтбордистом.

Технических деталей немного, кроме того, что модель на релизе выдаёт разрешение 720p с возможностью дойти до 4К! Длина видео — 8 секунд, золотая середина между 5-ю и 10-ю секундами, где уже чаще возникают артефакты. Картинки на вход, вроде бы, пока не принимает.

Есть даже регистрация в вейтлист, правда чтобы туда добавили просят заполнить небольшую анкету, да и сколько ждать — неизвестно. Надеюсь, гугл не будет опять годами держать модель за семью печатями.

@ai_newz

🎞 Вышла обновленная Pika 2.0.

Обещают качественные визуальные эффекты и выравнивание текса (что бы это ни значило). Самое главное нововведение — Scene Ingredients. Фича, которая объединит несколько изображений в одно видео.

— Загружаем несколько изображений (до 6 шт);
— Добавляем текстовую подсказку;
— Pika соединяет всё это в один ролик.

Бесплатно потестить не дают, нужен платный тариф. А чтобы убрать водяной знак и вовсе требуется максимальный тариф Fancy (76$/мес).

• Попробовать

#neural #нейросеть

@aiaiai

Сериал «Офис» в стиле Pixar

Почти год спустя снова сделал персонажей «Офиса» в стиле Пиксар. Прогресс потрясающий!

Изображения: Midjourney, Ideogram + Photoshop
Анимация: Mimimax

В комментах выложу 1,5-минутную версию, где хорошо видно мимику каждого персонажа (знаю, что никто не может минутное видео досмотреть), и все использованные генерации.

У Runway потрясающее новое обновление — улучшенное управление камерой

Можно будет выбрать направление движения, скорость, сочетать это все в ролике. Есть даже панорамирование объекта, то есть обучали не только на видео. Подробнее и с черрипиками тут.

Готовлюсь тестировать на все деньги, вместе с новым обновлением в Midjourney (позволяющим работать со своими изображениями) — это новое слово в творчестве и рекламе. После сотни итераций, конечно.

Корпорация Meta представила Movie Gen — ИИ-генератор для создания новых видео, редактирования существующих или добавления звука к ним.

Инструмент позволяет в том числе использовать фотографию для генерации персонализированного видео с участием реального человека.

Подробнее: https://forklog.com/?p=242713

#Meta #MovieGen

Помните эти и подобные задолбавшие вирусные видео, где 3D элементы интегрированны в городскую среду? Так вот новая версия Pika 1.5 сделала упор не на реалистичность картинки, а как раз на эту самую вирусность, добавив в предустановленные эффекты стекание, разрезание, сдавливание, надувание, взрыв.
К посту прикрепляю чужие эксперименты, так как бесплатные генерации тормозят жутко, а покупать подписку мне не к чему.
Выглядит забавно, особенно для создания контента.
И мемов, конечно.😏

Китайский убийца Sora обновился — Kling AI научилась двигать статичные объекты. Теперь это самый простой способ сделать анимацию в видео.

Выбираем Motion Brush и буквально рисуем траекторию движения. У объекта даже сохранятся пропорции и детали!

Бонусом подняли базовое разрешение до 1080 и увеличили длину видосов до 10 секунд. Тестим тут.

👍 Бэкдор

🔥 поразительный скачок!

В последние пару недель много чего понавыходило, но больше всего шума от видеогенераторов.

На видео сравнительный тест, который даст вам понять без лишних слов, на что обратить внимание. Runway, Pika, Lumalabs — к последнему, как вы поняли, стоит присмотреться. Кроме того, у вас будет 30 бесплатных, возобновляемых генераций в месяц.

Из элементов управления пока мы имеем только текст и референсную картинку, что означает, что мы всё ещё в начале пути. Но на скачкообразное повышение качества невозможно не обращать внимания.

Видео открывайте на полный экран.

Пробовать тут.

🔥RadSplat - качество рендеринга как NeRF, но в 900FPS!

Переносить реальные пространства в VR в высоком разрешении - это то к чему многие ресерчеры стремятся. Но для реального применения, тут важно уметь быстро рендерить реалистичную картинку отсканированных объектов.

Концептуально в новом методе RadSplat всё очень просто: сначала тренируем нерф и запекаем его в гауссовый сплат. Потом, сравнивая с нерфом, определяем важность каждого элемента сплата и обрезаем ненужные. От такого прунинга качество, внезапно, даже растёт.

Для ускорения на больших сценах предлагают разбить сцену на несколько кластеров, определить что из каждого кластера видно и рендерить только это. В чём-то это похоже на VastGaussian, о котором я рассказывал пару недель назад.

В целом оно быстрее обычных нерфов вплоть до 3 тысяч раз(!), что по скорости примерно на уровне метода Re-ReND от нашей команды, где мы запекали нерф в light-field на меши, что позволяло рендерить со скоростью до 1000FPS на GPU и 60-70 FPS на шлеме Oculus.

Сайт проекта

@ai_newz