Описание
Vidu S1 API — это модель генерации потокового видео коммерческого уровня, предназначенная для интерактивных цифровых людей в реальном времени. Этот инновационный API позволяет разработчикам создавать живые сессии, где AI-персонаж может видеть, слышать и общаться с пользователями. Платформа поддерживает генерацию без ограничения по времени, предлагая более 50 голосов на 28 языках, что делает её универсальной для различных приложений.
Читать далее
Оплата за Vidu S1 API начинается, как только цифровой персонаж готов, и сессия переходит в состояние 'on_live'. Использование тарифицируется по ставке 3 кредита за 2 секунды, списываемых каждые 6 секунд, что гарантирует, что пользователи платят только за время активного использования сервиса. Каждая сессия может длиться до 600 секунд, а для более длительных взаимодействий пользователи могут создавать новые сессии без потери качества.
Vidu S1 не ограничивается взаимодействиями по HTTP; он использует комбинацию HTTP для управления сессиями, AliRTC для передачи аудио и видео в реальном времени и WebSocket для управления сигналами. Эта интеграция обеспечивает бесшовный пользовательский опыт, где цифровой персонаж может взаимодействовать в квази-реальном времени, реагируя на пользовательские вводы с выражением и индивидуальностью.
API предназначен для различных отраслей, включая AI-компаньонов, виртуальных идолов, обучение и образование, обслуживание клиентов, коммерцию в прямом эфире и интерактивные развлечения. Он позволяет командам быстро развертывать цифровых людей уровня производства, трансформируя взаимодействие с пользователями на различных платформах. С такими функциями, как память о персонаже и мультимодальное восприятие, Vidu S1 создает персонализированные и последовательные взаимодействия, повышая удовлетворенность пользователей.
В дополнение к своим мощным возможностям, Vidu S1 API предлагает бесплатный пробный период с 1,000 кредитами для новых пользователей, позволяя им исследовать функции платформы без первоначальных вложений. Это делает его привлекательным вариантом для разработчиков, стремящихся быстро интегрировать продвинутые AI-взаимодействия в свои продукты.
- КатегорияИнструменты обработки естественного языка
- Модель ценообразованияFreemium
- РазвёртываниеОблако
- ПлатформыВеб
Основные функции Vidu S1 API
Неограниченная интерактивная продолжительность
Более 50 голосов
Поддержка 28 языков
Интерактивность в реальном времени
Управление сессиями через HTTP
Передача аудио/видео через AliRTC
Управляющие сигналы через WebSocket
Кастомное клонирование голоса
Краткосрочная память для персонажей
Высокое разрешение вывода
Как использовать Vidu S1 API?
Создать сессию: Сделайте POST-запрос с персоной персонажа, изображением аватара и голосом, чтобы получить идентификатор сессии.
Присоединиться к RTC-каналу: Используйте возвращенный токен, чтобы присоединиться к каналу AliRTC и опубликовать микрофон и камеру пользователя.
Открыть WebSocket: Подключитесь к управляющему каналу, передав токен аутентификации в строке запроса.
Дождаться готовности: Отслеживайте соединение для получения подтверждения об успешном подключении, указывающего, что персонаж активен.
Поддерживать сессию активной: Реагируйте на пинги сервера и корректно обрабатывайте любые сообщения о разъединении.
Завершить разговор и запросить выставление счета: Отправьте сообщение о завершении, закройте WebSocket и запросите окончательный статус сессии.
Варианты использования Vidu S1 API
- AI-компаньон
- Виртуальные идолы
- Обучение и образование
- AI-служба поддержки клиентов
- Коммерция в прямом эфире
- Интерактивные развлечения
