Перейти к основному содержимому
ToolPotion
ИИ-советник
Отправить

anymove

anymove — это проект с открытым исходным кодом на GitHub, который предоставляет возможности захвата движения для различных существ с использованием одного AI-видео. Он использует считыватель суставов DINOv2, подгоняет риг в двух камерах в одном кадре и выводит результаты в формате GLB. Этот инструмент предназначен для разработчиков и аниматоров, работающих с захватом движения на основе ИИ.

Открыть репозиторий
Поделиться
Открыть репозиторий
Поделиться

anymove — это репозиторий на GitHub, посвященный передовым технологиям захвата движения, позволяющий пользователям захватывать движение любого существа с одного AI-видео. Проект использует сложную настройку, которая интегрирует два вида камеры в одном кадре, что повышает точность и детализацию процесса захвата движения.

Читать далее

В своей основе anymove использует считыватель суставов DINOv2, мощный компонент, который интерпретирует и отслеживает движения существ в видео. Это позволяет точно артикулировать и воспроизводить движение, что делает его подходящим для широкого спектра приложений в анимации, разработке игр и исследованиях. Система разработана для точной подгонки рига существа в обоих видах камеры, обеспечивая последовательные и качественные данные о движении.

Выходные данные процесса anymove представляют собой файл GLB, широко поддерживаемый формат 3D-моделей, который включает геометрию, материалы и анимации. Это делает захваченное движение легко переносимым и пригодным для использования в различных 3D-программах и платформах. Открытый характер проекта поощряет вклад сообщества и позволяет постоянно улучшать и адаптироваться к новым вызовам в захвате движения.

Недавние обновления репозитория указывают на продолжающуюся разработку, с коммитами, касающимися таких функций, как веса для каждого сустава, гистерезис растений и переработанные команды для ходьбы и бега, что свидетельствует о стремлении к улучшению реалистичности и гибкости захвата движения. Проект также включает инструменты для создания финального пакета существа и предприняты усилия для обеспечения совместимости с операционными системами Windows, что расширяет его доступность для более широкой аудитории. Акцент на кадрировании каждого существа с помощью своей камеры дополнительно подчеркивает приверженность проекта к детализированным и настраиваемым решениям для захвата движения.

  • КатегорияИнструменты компьютерного зрения
  • Модель ценообразованияОткрытый код
  • РазвёртываниеОблако
  • ПлатформыWindows

  • Захват движения с одного AI-видео

  • Поддержка любого типа существ

  • Использует две камеры в одном кадре для улучшения данных

  • Интегрирует считыватель суставов DINOv2 для точного отслеживания

  • Подгонка рига в обоих видах камеры

  • Выводит данные о движении в формате GLB

  • Вес для каждого сустава для детального контроля

  • Гистерезис растений для реалистичного взаимодействия с землей

  • Переработанные команды для ходьбы и бега для разнообразных анимаций

  • Инструменты для создания финального пакета существа

  • Совместимость с операционными системами Windows

  • Индивидуальное кадрирование камеры для каждого существа

  1. Клонируйте репозиторий: Получите файлы проекта, клонируя репозиторий anymove на свой локальный компьютер.

  2. Установите зависимости: Настройте необходимое программное обеспечение и библиотеки, следуя инструкциям в файле `requirements.txt`.

  3. Настройте окружение: Отрегулируйте переменные окружения по мере необходимости, возможно, используя файл `.env.example` в качестве руководства.

  4. Подготовьте риг существа: Используйте предоставленные инструменты в директории `blender`, чтобы создать и подготовить финальный пакет и риг вашего существа.

  5. Обработайте AI-видео: Введите ваше AI-видео в систему для захвата движения, используя считыватель суставов DINOv2.

  6. Сгенерируйте выходной файл GLB: Получите данные о захваченном движении в виде файла GLB, готового к использованию в 3D-приложениях.

  7. Оптимизируйте движение: Примените веса для каждого сустава, гистерезис растений и другие команды для уточнения и настройки захваченного движения.

  • Производство 3D-анимации
  • Разработка игр
  • Виртуальные реалии
  • Риггинг персонажей
  • Биомеханические исследования
  • Создание образовательного контента

Отзывы о anymove

Загрузка...

Популярные ИИ-инструменты, похожие на anymove

LivePortrait

AI-репозитории на GitHub

LivePortrait — это реализация на PyTorch с открытым исходным кодом для эффективной анимации портретов. Он оживляет портреты, анимируя их с помощью контроля сшивания и…

ИИ-инструменты анимации

№20 в AI-репозитории на GitHub

Открыть инструмент

AI-репозитории на GitHub

Реализация на PyTorch с открытым исходным кодом для эффективной анимации портретов. Он оживляет портреты, анимируя их с помощью контроля сшивания и…LivePortrait — это реализация на PyTorch с открытым исходным кодом для эффективной анимации портретов. Он оживляет портреты, анимируя их с помощью контроля сшивания и…

ИИ-инструменты анимации
№20 в AI-репозитории на GitHub

Autodesk Flow Studio

AI-приложения

Autodesk Flow Studio — это облачная AI-платформа для современных рассказчиков. Она предлагает инструменты для захвата движений, отслеживания камеры, анимации и композитинга,…

ИИ-инструменты анимацииМедиа и развлечения

№3 в ИИ-инструменты анимации

Открыть инструмент

AI-приложения

Облачная AI-платформа для современных рассказчиков. Она предлагает инструменты для захвата движений, отслеживания камеры, анимации и композитинга,…Autodesk Flow Studio — это облачная AI-платформа для современных рассказчиков. Она предлагает инструменты для захвата движений, отслеживания камеры, анимации и композитинга,…

РекомендованоИИ-инструменты анимацииМедиа и развлечения
№3 в ИИ-инструменты анимации

Plask Motion

AI-приложения

Plask Motion предлагает захват движения с помощью ИИ из видео, превращая ваши видео в анимации. Идеально подходит для разработчиков игр, предоставляет интуитивно понятный…

ИИ-инструменты анимацииМедиа и развлечения

№8 в ИИ-инструменты для разработки игр

Открыть инструмент

AI-приложения

Предлагает захват движения с помощью ИИ из видео, превращая ваши видео в анимации. Идеально подходит для разработчиков игр, предоставляет интуитивно понятный…Plask Motion предлагает захват движения с помощью ИИ из видео, превращая ваши видео в анимации. Идеально подходит для разработчиков игр, предоставляет интуитивно понятный…

ИИ-инструменты анимацииМедиа и развлечения
№8 в ИИ-инструменты для разработки игр

GANimator — это модель генерации движения, которая обучается на одном примере и была представлена на SIGGRAPH 2022. Она предлагает уникальный подход к генерации данных о движении,…

ИИ-инструменты анимацииМедиа и развлечения
Открыть инструмент

Модель генерации движения, которая обучается на одном примере и была представлена на SIGGRAPH 2022. Она предлагает уникальный подход к генерации данных о движении,…GANimator — это модель генерации движения, которая обучается на одном примере и была представлена на SIGGRAPH 2022. Она предлагает уникальный подход к генерации данных о движении,…

ИИ-инструменты анимацииМедиа и развлечения
Топ-250: AI-репозитории на GitHub

Animate Anyone

AI-репозитории на GitHub

Animate Anyone — это репозиторий на GitHub, посвященный последовательному и управляемому синтезу изображений в видео для анимации персонажей. Он предоставляет фреймворк для…

ИИ-инструменты анимации
Открыть инструмент

AI-репозитории на GitHub

Репозиторий на GitHub, посвященный последовательному и управляемому синтезу изображений в видео для анимации персонажей. Он предоставляет фреймворк для…Animate Anyone — это репозиторий на GitHub, посвященный последовательному и управляемому синтезу изображений в видео для анимации персонажей. Он предоставляет фреймворк для…

ИИ-инструменты анимации
Топ-250: AI-репозитории на GitHub

Motion For Anything You Draw

AI-репозитории на GitHub

rossark-motion-skill — это навык Claude Code, который преобразует любые SVG в профессиональную анимацию с частотой 60 кадров в секунду. Он оживляет иллюстрации с помощью живых…

ИИ-инструменты анимации
Открыть инструмент

AI-репозитории на GitHub

rossark-motion-skill — это навык Claude Code, который преобразует любые SVG в профессиональную анимацию с частотой 60 кадров в секунду. Он оживляет иллюстрации с помощью живых…

ИИ-инструменты анимации
Топ-250: AI-репозитории на GitHub

Quick Magic AI Mocap

AI-приложения

Quick Magic AI Mocap преобразует любое видео в данные захвата движения без датчиков. Он обеспечивает точное отслеживание всего тела, лица и рук с помощью ввода с камеры. Бесшовно…

ИИ-инструменты анимацииМедиа и развлечения

№15 в Игры и развлечения

Открыть инструмент

AI-приложения

Преобразует любое видео в данные захвата движения без датчиков. Он обеспечивает точное отслеживание всего тела, лица и рук с помощью ввода с камеры. Бесшовно…Quick Magic AI Mocap преобразует любое видео в данные захвата движения без датчиков. Он обеспечивает точное отслеживание всего тела, лица и рук с помощью ввода с камеры. Бесшовно…

ИИ-инструменты анимацииМедиа и развлечения
№15 в Игры и развлечения
1 из 8