Видео недоступно для предпросмотра
Смотреть в Telegram
Tripo: выпустили в опенсорс свой фреймворк для автоматизированного риггинга 3D объектов (люди, животные, вещи) — UniRig.
Система работает в два этапа:
* Предсказание скелета: трансформер, подобный GPT, авторегрессивно определяет топологически корректную структуру скелета, используя новую схему токенизации скелетного дерева (Skeleton Tree Tokenization).
* Предсказание весов и атрибутов: механизм перекрёстного внимания между костями и точками (Bone-Point Cross Attention) определяет веса привязки для каждой вершины, а также атрибуты костей (например, для физической симуляции) на основе предсказанного скелета и геометрии меша на входе.
На данный момент на хаггинге лежит модель для предсказания скелета. Остальное завезут позже вместе с моделью для предсказания атрибутов костей: определяет параметры, такие как жёсткость, для вторичных движений на основе физики.
Для работы нужно 8ГБ VRAM.
Сайт
Гитхаб
Хаггинг
————————————————————
🔥 Создай своего цифрового двойника, оживи персонажа, или интегрируй бренд. Напиши — @AndreyBezryadin
Система работает в два этапа:
* Предсказание скелета: трансформер, подобный GPT, авторегрессивно определяет топологически корректную структуру скелета, используя новую схему токенизации скелетного дерева (Skeleton Tree Tokenization).
* Предсказание весов и атрибутов: механизм перекрёстного внимания между костями и точками (Bone-Point Cross Attention) определяет веса привязки для каждой вершины, а также атрибуты костей (например, для физической симуляции) на основе предсказанного скелета и геометрии меша на входе.
На данный момент на хаггинге лежит модель для предсказания скелета. Остальное завезут позже вместе с моделью для предсказания атрибутов костей: определяет параметры, такие как жёсткость, для вторичных движений на основе физики.
Для работы нужно 8ГБ VRAM.
Сайт
Гитхаб
Хаггинг
————————————————————
🔥 Создай своего цифрового двойника, оживи персонажа, или интегрируй бренд. Напиши — @AndreyBezryadin