跳转到主要内容
ToolPotion
AI 顾问
提交(免费)

Hy4 预览

Hy4 预览是腾讯 Hy 团队开发的新一代专家混合模型。它具有7700亿个参数,旨在提高软件工程、游戏开发和科学研究等多个领域的生产力。

访问URL
分享
Hy4 预览 截图
Hy4 预览 截图

Hy4 预览是腾讯 Hy 团队开发的前沿专家混合(MoE)模型。它总共有7700亿个参数,每个令牌激活49亿个参数。该模型的架构由78层组成,结合了密集的前馈网络(FFN)和专家混合层,每层包含256个路由专家和一个共享专家。这种设计允许每个令牌激活前8个路由专家,从而增强其处理能力。

阅读更多

该模型采用带索引缓存的门控深度稀疏注意力(Gated DSA),以实现高效的跨层稀疏索引重用。其残差路径使用身份超连接(iHC)来改善层间信息流动。Hy4 预览在模型规模、上下文长度和训练数据方面进行了扩展,使其成为开源 AI 模型的领导者。

Hy4 预览旨在在多个领域中表现出色,包括软件工程,在该领域中,它有助于理解、规划、调试和验证长期任务。在游戏开发中,它可以将单个提示转换为可玩的原型,并与游戏引擎无缝协作。对于办公室和分析任务,它将杂乱的上下文转换为可共享的文档和电子表格。在科学研究中,它提供强大的推理和问题解决能力。

该模型是开源的,并可在 Hugging Face、ModelScope、GitCode 和 CNB 等平台上获得。它支持使用 vLLM 或 SGLang 部署,并提供全面的模型微调管道。Hy4 预览根据 Apache 许可证 2.0 发布,确保其在各种应用中的可访问性和适应性。

  • 类别AI 模型与大语言模型
  • 定价模式开源
  • 部署云端
  • 平台网页版

  • 专家混合架构

  • 7700亿个参数

  • 门控深度稀疏注意力

  • 身份超连接

  • 开源

  • 微调支持

  • 推测解码

  • 在 Hugging Face 上可用

  1. 访问模型页面:访问官方 Hugging Face 页面

  2. 身份验证:登录或创建账户

  3. 配置:设置模型参数和环境

  4. 发送提示:使用 API 调用与模型交互

  5. 微调:为特定任务定制模型

  • 软件工程
  • 游戏开发
  • 办公室分析
  • 科学研究
  • AI 研究

与 Hy4 预览 类似的热门AI工具

Hy3

大语言模型

Hy3是由腾讯Hy团队开发的295B参数混合专家模型。它在推理、代理和长上下文任务中表现出色,在各种生产力场景中提供可靠的性能。

AI 模型与大语言模型

大语言模型 排名第 25 位

查看工具

大语言模型

由腾讯Hy团队开发的295B参数混合专家模型。它在推理、代理和长上下文任务中表现出色,在各种生产力场景中提供可靠的性能。Hy3是由腾讯Hy团队开发的295B参数混合专家模型。它在推理、代理和长上下文任务中表现出色,在各种生产力场景中提供可靠的性能。

AI 模型与大语言模型
大语言模型 排名第 25 位

Laguna M.1

大语言模型

Laguna M.1 是一个拥有 2250 亿参数的专家混合模型,旨在进行自主编码和长时间任务。它具有高容量的专家路由和全局注意力架构,在各种基准测试中表现出色。

AI 模型与大语言模型

大语言模型 排名第 36 位

查看工具

大语言模型

拥有 2250 亿参数的专家混合模型,旨在进行自主编码和长时间任务。它具有高容量的专家路由和全局注意力架构,在各种基准测试中表现出色。Laguna M.1 是一个拥有 2250 亿参数的专家混合模型,旨在进行自主编码和长时间任务。它具有高容量的专家路由和全局注意力架构,在各种基准测试中表现出色。

AI 模型与大语言模型
大语言模型 排名第 36 位

DeepSeek-V4-Pro

大语言模型

DeepSeek-V4-Pro是一个先进的AI模型,旨在实现高效的百万标记上下文智能。它具有混合注意力架构,并在超过32万亿个标记上进行了预训练,适用于复杂推理任务和编码基准。

AI 模型与大语言模型
查看工具

大语言模型

先进的AI模型,旨在实现高效的百万标记上下文智能。它具有混合注意力架构,并在超过32万亿个标记上进行了预训练,适用于复杂推理任务和编码基准。DeepSeek-V4-Pro是一个先进的AI模型,旨在实现高效的百万标记上下文智能。它具有混合注意力架构,并在超过32万亿个标记上进行了预训练,适用于复杂推理任务和编码基准。

精选AI 模型与大语言模型
查看 大语言模型 Top 50

DeepSeek

大语言模型

DeepSeek是一家专注于开发通用人工智能的AI研究公司。它提供开源前沿大型语言模型(LLM),如DeepSeek-V4、DeepSeek-R1和DeepSeek-Coder,使用户能够与AI聊天或通过API集成以实现各种应用。

AI 模型与大语言模型

大语言模型 排名第 2 位

查看工具

大语言模型

专注于开发通用人工智能的AI研究公司。它提供开源前沿大型语言模型(LLM),如DeepSeek-V4、DeepSeek-R1和DeepSeek-Coder,使用户能够与AI聊天或通过API集成以实现各种应用。DeepSeek是一家专注于开发通用人工智能的AI研究公司。它提供开源前沿大型语言模型(LLM),如DeepSeek-V4、DeepSeek-R1和DeepSeek-Coder,使用户能够与AI聊天或通过API集成以实现各种应用。

精选AI 模型与大语言模型
大语言模型 排名第 2 位

Kimi-K2-Instruct 是一款先进的混合专家语言模型,专为高级人工智能任务而设计。它在推理、编码和工具使用方面表现出色,提供了32亿激活参数的强大性能。

AI 模型与大语言模型

大语言模型 排名第 44 位

查看工具

先进的混合专家语言模型,专为高级人工智能任务而设计。它在推理、编码和工具使用方面表现出色,提供了32亿激活参数的强大性能。Kimi-K2-Instruct 是一款先进的混合专家语言模型,专为高级人工智能任务而设计。它在推理、编码和工具使用方面表现出色,提供了32亿激活参数的强大性能。

AI 模型与大语言模型
大语言模型 排名第 44 位

DeepSeek-V4-Pro-0813

大语言模型

DeepSeek-V4-Pro-0813 是一个先进的语言模型,旨在增强代理能力和在生产环境中的性能。它在 DeepSeek-V4-Pro(预览)模型的基础上进行了改进,具有更好的解码和推理功能,使其在领先的专有模型中具有竞争力。

AI 模型与大语言模型

大语言模型 排名第 10 位

查看工具

大语言模型

先进的语言模型,旨在增强代理能力和在生产环境中的性能。它在 DeepSeek-V4-Pro(预览)模型的基础上进行了改进,具有更好的解码和推理功能,使其在领先的专有模型中具有竞争力。DeepSeek-V4-Pro-0813 是一个先进的语言模型,旨在增强代理能力和在生产环境中的性能。它在 DeepSeek-V4-Pro(预览)模型的基础上进行了改进,具有更好的解码和推理功能,使其在领先的专有模型中具有竞争力。

AI 模型与大语言模型
大语言模型 排名第 10 位

DeepSeek-V4-Pro-DSpark

大语言模型

DeepSeek-V4-Pro-DSpark 是一款先进的语言模型,具有混合注意力架构和多样约束超连接。它支持一百万个标记的上下文长度,并针对高效的长上下文处理进行了优化。

AI 模型与大语言模型
查看工具

大语言模型

先进的语言模型,具有混合注意力架构和多样约束超连接。它支持一百万个标记的上下文长度,并针对高效的长上下文处理进行了优化。DeepSeek-V4-Pro-DSpark 是一款先进的语言模型,具有混合注意力架构和多样约束超连接。它支持一百万个标记的上下文长度,并针对高效的长上下文处理进行了优化。

AI 模型与大语言模型
查看 大语言模型 Top 50

DeepSeek-V4-Flash-0731

大语言模型

DeepSeek-V4-Flash-0731 是一个先进的语言模型,增强了代理能力。它在性能上超越了之前的版本,并与顶级专有模型竞争,在各项基准测试中表现出色。

AI 模型与大语言模型

大语言模型 排名第 16 位

查看工具

大语言模型

先进的语言模型,增强了代理能力。它在性能上超越了之前的版本,并与顶级专有模型竞争,在各项基准测试中表现出色。DeepSeek-V4-Flash-0731 是一个先进的语言模型,增强了代理能力。它在性能上超越了之前的版本,并与顶级专有模型竞争,在各项基准测试中表现出色。

AI 模型与大语言模型
大语言模型 排名第 16 位
1/8