腾讯发布开源MoE模型Hy3,性能声称匹敌5倍规模
阅读原文· the-decoder.com腾讯正式发布开源MoE模型Hy3,总参数295B,活跃参数21B,另有3.8B MTP层,上下文窗口256k token。官方称其性能可比肩两到五倍规模模型。270位专家盲评中Hy3得分2.67/4,超越GLM-5.1的2.51;内部测试幻觉率从12.5%降至5.4%。Hy3以Apache 2.0许可在Hugging Face、ModelScope和GitHub开源,提供FP8量化版,计划支持OpenRouter和Cline。腾讯已将其集成至WorkBuddy、元宝、微信及游戏《Path of Exile: Advent》等产品。
腾讯发布 Hy3 开源模型,据称性能可达自身激活参数规模五倍大小的模型水平
腾讯已正式发布其 AI 模型 Hy3。该模型采用混合专家(MoE)架构,总参数量为 2950 亿。其中,任意时刻激活的参数量为 210 亿,另外还有 38 亿参数用于增加的 MTP 层。它支持长达 256,000 个模型 token 的上下文长度。腾讯表示,Hy3 的性能可与自身规模两到五倍的模型相媲美。在 270 位专家参与的盲评中,Hy3 得分为 2.67(满分 4 分),超过了得分为 2.51 的 GLM-5.1。内部测试显示,模型幻觉率从 12.5% 降至 5.4%。

Hy3 依据 Apache 2.0 许可证在 Hugging Face、ModelScope 和 GitHub 上开放获取。同时提供 FP8 量化版本。对 OpenRouter 和 Cline 等平台的支持也在规划中。腾讯已将该模型整合到自家产品中,包括企业工作助手、元宝、微信,以及《流放之路:冒险》的游戏助手。