Описание
LiquidAI d1-Omni-2B — это сложная модель принятия решений, которая обрабатывает текст, изображения и аудио для предоставления откалиброванных ответов за один проход. Построенная на архитектуре LFM3-Omni-2B, она имеет 24 слоя, включая управляемые короткие свертки и механизмы внимания, и работает с длиной контекста в 128K токенов. Модель поддерживает несколько языков, включая английский, арабский, китайский и другие, с аудиовозможностями на большинстве из этих языков. Она особенно эффективна для задач, требующих аудиовхода, таких как маршрутизация звонков и голосовых сообщений, а также обнаружение звуковых событий.
Читать далее
Модель разработана для обеспечения быстрого реагирования, с временем принятия решений всего 5.8 миллисекунд на NVIDIA H100 и 3.7 миллисекунд на AMD MI325X. Она превосходно справляется с извлечением текста, чисел и дат, локализацией объектов на изображениях и оценкой количеств. Модель d1-Omni-2B не предназначена для чат-приложений и не генерирует транскрипции или речь.
Бенчмарки производительности показывают, что d1-Omni-2B превосходит другие модели, такие как d1-omni-600M и d1-3B, в различных тестах на принятие решений и изображениях, демонстрируя свою эффективность с меньшим количеством параметров. Она интегрирована в библиотеку Transformers, что позволяет легко развертывать и использовать её.
Модель лицензирована под LFM Open License v1.0, обеспечивая открытый доступ для пользователей. Она подходит для разработчиков и исследователей, ищущих надежное решение для многомодальных задач принятия решений. Однако важно отметить, что длинные устные passages могут снижать точность, особенно на языках с нелатинским алфавитом.
- КатегорияИИ-модели и LLM
- Модель ценообразованияОткрытый код
- РазвёртываниеОблако
- ПлатформыВеб
Главное о LiquidAI d1-Omni-2B
Обрабатывает текст, изображения и аудио
Откалиброванные ответы за один проход
Поддерживает несколько языков
Быстрое время принятия решений
Извлекает текст, числа и даты
Локализует объекты на изображениях
Оценивает количества
Интегрирована с библиотекой Transformers
Начало работы с LiquidAI d1-Omni-2B
Получите доступ к модели: посетите Hugging Face
Аутентификация: используйте API-ключ
Настройте окружение: установите зависимости
Интеграция через API: используйте предоставленные конечные точки
Оптимизация: настройте параметры для конкретных задач
Варианты использования LiquidAI d1-Omni-2B
- Маршрутизация звонков
- Обнаружение звуковых событий
- Локализация объектов на изображениях
- Извлечение текста
- Многоязычная обработка
