描述
LiquidAI d1-omni-600M 是一个复杂的决策模型,具有 6 亿个参数,基于 LFM2.5-Encoder-350M 框架构建。该模型旨在处理多模态输入,包括文本、图像和音频,能够在单次前向传递中完成。它特别适用于需要是/否回答、选项选择或评分的应用,如路由、审核、分类和视觉检查任务。
阅读更多
该模型的架构包括共享主干和决策头,以及用于视觉和音频的专用编码器。视觉编码器基于 SigLIP2 视觉塔,而音频编码器则使用 17 层 FastConformer。这种设计确保所有模态使用相同的主干权重进行处理,从而提高了效率和一致性。
d1-omni-600M 的一个关键特性是能够直接从模型的选项分布中返回类型化答案,消除了生成输出标记或解析的需要。这一能力对于边缘部署尤为重要,因为速度和资源效率至关重要。
该模型支持 16,384 个标记的上下文长度,能够同时处理文本、图像和音频位置。当包含图像时,状态和问题文本限制为 896 个标记,符合训练规范。该模型的词汇量为 65,536,允许广泛的输入处理。
音频能力专门通过英语说话者与助手之间的互动进行训练,重点识别发声类型、主题和说话者意图。该模型并不设计用于聊天应用,也不生成文本,因此非常适合决策任务。
LiquidAI d1-omni-600M 是一个开源模型,鼓励在人工智能领域进一步的研究和开发。它可与版本 5.15 或更高的 transformers 一起使用,并可以集成到需要高效决策能力的各种管道中。
- 类别AI 模型与大语言模型
- 定价模式开源
- 部署云端
- 平台网页版
LiquidAI d1-omni-600M亮点
600M 参数
支持多模态输入
单次决策
优化边缘部署
开源
视觉和音频编码器
无输出标记生成
上下文长度为 16,384 个标记
LiquidAI d1-omni-600M入门
访问模型页面
进行身份验证
配置模型
发送提示
LiquidAI d1-omni-600M的使用案例
- 路由和分诊
- 审核
- 意图分类
- 语音命令路由
- 视觉检查







