描述
Solar Open 2 是 Upstage 开发的大型语言模型,专门为办公生产力、文档密集型工作和编码等代理性用例设计。它基于混合注意力专家混合(MoE)架构构建,结合了线性和 softmax 注意力层,以在长上下文设置中提供高效推理。该模型具有 2500 亿参数的容量,每个令牌仅激活 150 亿参数,确保最低的推理成本。
阅读更多
该模型支持 100 万令牌的上下文长度,得益于其线性注意力层内在地编码令牌顺序,消除了位置编码的需求。这一设计选择使 Solar Open 2 能够高效地保持长上下文记忆。该模型支持英语、韩语和日语,使其在各种应用中具有多样性。
Solar Open 2 使用 NVIDIA B200 GPU 高效训练,总共耗时 200 万 GPU 小时。它通过选择性地从前身 Solar Open 1 转移权重进行初始化,加速了其在 2500 亿规模下的收敛。该模型在代理基准测试中的表现与最强的开放权重模型具有竞争力,在需要工具调用、多步骤推理和端到端任务执行的任务中表现出色。
在部署方面,Solar Open 2 可以使用 vLLM 提供服务,支持 Docker 或从源代码安装。它通过 OpenAI 函数调用接口支持工具调用,并可以与 Anthropic 的 Claude Code 和 Nous Research 的 Hermes Agent 等代理集成。该模型根据 Upstage Solar 许可证分发,并对衍生 AI 模型有特定要求。
- 类别AI 模型与大语言模型
- 部署云端, 自托管
- 平台网页版
Solar Open 2亮点
250B 参数
15B 活动参数
混合注意力 MoE 架构
1M 令牌上下文长度
多语言支持
高效推理
工具调用接口
Upstage Solar 许可证
Solar Open 2入门
访问模型页面:访问 Hugging Face 网站
身份验证:登录您的 Hugging Face 账户
配置:根据所需参数设置模型
发送提示:使用模型进行文本生成
微调:调整模型以适应特定任务
Solar Open 2的使用案例
- 办公生产力
- 文档处理
- 编码辅助
- 多语言应用
- 工具集成









