腾讯Hy4正式开源:770B总参数、49B激活,混元LLM系列全部开放
IT之家 11 月 20 日消息,腾讯混元团队今日宣布 Hy4 大模型正式开源,模型权重已在 GitHub、Hugging Face、ModelScope 和 GitCode 四个平台同步上线,开发者可自行下载部署。 至此,混元 LLM 系列已完成全部开源,覆盖 Hy3 preview、Hy3、Hy4 preview、
腾讯混元团队11月20日宣布,Hy4大模型已正式开源。模型权重同步登陆GitHub、Hugging Face、ModelScope和GitCode四个平台,开发者可以自行下载并部署。
混元LLM系列由此实现全量开源,Hy3 preview、Hy3、Hy4 preview、Hy4以及Hy4 flash等版本均在其中。

此前预告的模型权重正是本次开源的内容,Hy4正式版则早在11月4日就已发布。这一版本走MoE混合专家架构,总参数770B,激活参数49B,上下文窗口突破100万Token。
与旗舰版Hy4一同开放的还有主打性价比的Hy4 flash。其总参数约2200亿,内含约635亿Engram参数,每个Token仅激活约120亿参数;上下文窗口最高同样可达100万Token,并支持文本与图像输入。旗舰能力与低成本规模化落地,由此形成梯次搭配。
开源协议上,Hy4及Hy4 preview采用Apache 2.0许可证,商业使用与修改均被允许。腾讯混元同时发布Hy4模型安全评估卡片(System Card),披露网络安全、生物安全等维度的评估结果。
官方说明显示,Hy4的训练数据只纳入PoC生成、漏洞修复等防守性网络安全内容,漏洞利用、逆向工程与渗透等攻击性数据已被剔除。腾讯玄武与科恩实验室的审计未发现明显的进攻性能力风险。
参考资料
-
[GitHub] https://github.com/Tencent-Hunyuan/Hy4
-
[Hugging Face] https://huggingface.co/tencent/Hy4
-
[ModelScope] https://modelscope.cn/models/Tencent-Hunyuan/Hy4
-
[GitCode] https://ai.gitcode.com/tencent_hunyuan/Hy4
-
[GGUF] https://huggingface.co/AngelSlim/Hy4-GGUF
-
[开源协议] https://huggingface.co/tencent/Hy4/blob/main/LICENSE
-
[模型安全评估卡片] https://hy.tencent.ai/Hy4_system_card.pdf