腾讯混元Hy4 flash开源:224B总参数,64B Engram加持
腾讯混元今日宣布开源 Hy4 flash 模型,包含 Hy4 flash、Hy4 flash-FP8 和 Hy4 flash Base,开发者可在 GitHub、 Hugging Face、ModelScope 和 GitCode 下载部署。
按照腾讯混元的说法,Hy4模型的开源正在提速,具体时间表稍后公布。

Hy4 flash被官方称作目前性价比最高的Hy模型。它的总参数量为224B,内含64B Engram参数,每个token激活12B参数。模型支持多模态输入,上下文长度达到100万token,API价格比Hy4低了不少。
目前Hy4 flash已经接入腾讯云TokenHub、WorkBuddy、元宝、企业微信、QQ、ima、Marvis等产品。

Hy4 flash的开源地址如下:
感谢网友 不一样的体验、未央 提供的线索!