Что такое Kinetix?
Kinetix — это исследовательская лаборатория, специализирующаяся на frontier 3D и Human Motion Intelligence. Компания объединяет глубокие знания в области машинного обучения и 3D-графики для создания передовых генеративных моделей и базовых технологий для анимации персонажей.
Основные технологии
Главный продукт — модель Kamo-1, представляющая собой 3D-conditioned video generation model. Она привносит физическое grounding в генерацию видео ИИ. Модель поддерживает мультимодальную conditioning: 3D-треки камеры, 3D-анимации персонажей, восстановленные из RGB-видео, референсные изображения и текстовые промпты.
Kamo-1 использует оценки глубины и позы как контрольные сигналы, что позволяет генерировать видео, физически согласованное с пространственной компоновкой и артикулированным движением. Это обеспечивает совместный контроль над движением камеры и движением персонажа в одном кадре.
Практическое применение
Технологии Kinetix уже интегрированы в крупные продукты:
- Нативная интеграция video-to-animation модели в Unity Muse для генерации 3D-анимаций в играх.
- «Emote Creator» в игре OVERDARE от KRAFTON, позволяющий игрокам создавать собственные анимации с системой модерации.
- Интеграция моделей в Adobe Mixamo для AI-анимации персонажей.
Научная основа
Исследования Kinetix сосредоточены на human pose estimation, computer vision и фундаментальных компонентах 3D-воркфлоу персонажей. Компания сочетает понимание и генерацию движения человека с помощью 3D и ML.
Плюсы и минусы
Плюсы: высочайшая физическая точность, точный контроль камеры и движения, интеграция с ведущими игровыми и творческими платформами, научный подход.
Минусы: технологии преимущественно ориентированы на B2B-партнёрства и крупные компании, отсутствует публичный бесплатный доступ для индивидуальных пользователей, высокая технологическая сложность.
Kinetix представляет собой одно из наиболее продвинутых решений на стыке 3D, компьютерного зрения и генеративного ИИ для создания реалистичной анимации и видео.
