Описание
Sand.ai — это компания, специализирующаяся на технологиях и продуктах генерации видео с использованием ИИ. Она самостоятельно разработала Magi-1, авторегрессионную видеомодель, и GAGA-1 для одновременной генерации аудио и видео, а также выпустила MAGI-2 Preview, описанную как крупномасштабная открытая модель генерации видео Mixture-of-Experts.
Читать далее
MAGI-2 Preview — это унифицированная аудиовизуальная модель генерации с 114 миллиардами параметров, которая активирует всего 6 миллиардов параметров на токен. Построенная на основе MagiMoE и совместно спроектированная по архитектуре, системам и данным, она генерирует диалоги, пение и эмоциональные изменения с естественной координацией синхронизации губ, мимики, движений глаз и языка тела. Поскольку визуальные и аудиоданные генерируются совместно одной моделью, диалоги и движения губ, действия и звуковые эффекты, а также изменения в окружении и аудиофидбек остаются точно согласованными. Модель также понимает масштаб кадра, композицию, перспективу и намерение движения камеры, создавая движения, такие как увеличение, слежение и орбитирование для визуального ритма, похожего на съемку.
Разработчики могут получить доступ к возможностям Sand.ai через платформу API. После входа в систему с помощью учетной записи Magi пользователи могут приобретать кредиты, создавать ключи API и аутентифицировать вызовы через заголовок Authorization. Платежи за платформу и Magi разделены, поэтому использование API не расходует кредиты учетной записи Magi.
- КатегорияИИ-генераторы видео
- Модель ценообразованияОплата за использование
- РазвёртываниеОблако
- ПлатформыВеб
Основные функции Sand.ai
MAGI-2 Preview, унифицированная аудиовизуальная модель генерации с 114 миллиардами параметров
Совместная генерация аудио и видео с точной синхронизацией губ
Исполнение персонажей: диалоги, пение и эмоциональные изменения
Контроль кинематографии над масштабом кадра, композицией и движением камеры
Авторегрессионная видеомодель Magi-1 и аудиовизуальная модель GAGA-1
Платформа API для разработчиков с управлением кредитами и ключами API
Как использовать Sand.ai?
Создайте учетную запись: войдите на платформу, используя свою учетную запись Magi.
Купите кредиты: приобретите пакет кредитов для использования API.
Создайте ключ API: сгенерируйте ключ на странице управления ключами API и сохраните его в безопасном месте.
Вызовите API: аутентифицируйтесь с помощью ключа через заголовок Authorization для генерации аудиовизуального контента.
Варианты использования Sand.ai
- Видео с говорящим персонажем
- Генерация кинематографического видео
- Создание аудиовизуального контента
- Интеграция для разработчиков
