Описание
anymove — это репозиторий на GitHub, посвященный передовым технологиям захвата движения, позволяющий пользователям захватывать движение любого существа с одного AI-видео. Проект использует сложную настройку, которая интегрирует два вида камеры в одном кадре, что повышает точность и детализацию процесса захвата движения.
Читать далее
В своей основе anymove использует считыватель суставов DINOv2, мощный компонент, который интерпретирует и отслеживает движения существ в видео. Это позволяет точно артикулировать и воспроизводить движение, что делает его подходящим для широкого спектра приложений в анимации, разработке игр и исследованиях. Система разработана для точной подгонки рига существа в обоих видах камеры, обеспечивая последовательные и качественные данные о движении.
Выходные данные процесса anymove представляют собой файл GLB, широко поддерживаемый формат 3D-моделей, который включает геометрию, материалы и анимации. Это делает захваченное движение легко переносимым и пригодным для использования в различных 3D-программах и платформах. Открытый характер проекта поощряет вклад сообщества и позволяет постоянно улучшать и адаптироваться к новым вызовам в захвате движения.
Недавние обновления репозитория указывают на продолжающуюся разработку, с коммитами, касающимися таких функций, как веса для каждого сустава, гистерезис растений и переработанные команды для ходьбы и бега, что свидетельствует о стремлении к улучшению реалистичности и гибкости захвата движения. Проект также включает инструменты для создания финального пакета существа и предприняты усилия для обеспечения совместимости с операционными системами Windows, что расширяет его доступность для более широкой аудитории. Акцент на кадрировании каждого существа с помощью своей камеры дополнительно подчеркивает приверженность проекта к детализированным и настраиваемым решениям для захвата движения.
- КатегорияИнструменты компьютерного зрения
- Модель ценообразованияОткрытый код
- РазвёртываниеОблако
- ПлатформыWindows
Основные функции anymove
Захват движения с одного AI-видео
Поддержка любого типа существ
Использует две камеры в одном кадре для улучшения данных
Интегрирует считыватель суставов DINOv2 для точного отслеживания
Подгонка рига в обоих видах камеры
Выводит данные о движении в формате GLB
Вес для каждого сустава для детального контроля
Гистерезис растений для реалистичного взаимодействия с землей
Переработанные команды для ходьбы и бега для разнообразных анимаций
Инструменты для создания финального пакета существа
Совместимость с операционными системами Windows
Индивидуальное кадрирование камеры для каждого существа
Начало работы с anymove
Клонируйте репозиторий: Получите файлы проекта, клонируя репозиторий anymove на свой локальный компьютер.
Установите зависимости: Настройте необходимое программное обеспечение и библиотеки, следуя инструкциям в файле `requirements.txt`.
Настройте окружение: Отрегулируйте переменные окружения по мере необходимости, возможно, используя файл `.env.example` в качестве руководства.
Подготовьте риг существа: Используйте предоставленные инструменты в директории `blender`, чтобы создать и подготовить финальный пакет и риг вашего существа.
Обработайте AI-видео: Введите ваше AI-видео в систему для захвата движения, используя считыватель суставов DINOv2.
Сгенерируйте выходной файл GLB: Получите данные о захваченном движении в виде файла GLB, готового к использованию в 3D-приложениях.
Оптимизируйте движение: Примените веса для каждого сустава, гистерезис растений и другие команды для уточнения и настройки захваченного движения.
Варианты использования anymove
- Производство 3D-анимации
- Разработка игр
- Виртуальные реалии
- Риггинг персонажей
- Биомеханические исследования
- Создание образовательного контента






