腾讯开源了 Hunyuan-Large(Hunyuan-MoE-A52B)模型,这是目前业界已经开源的基于Transformer的最大MoE模型,拥有3890亿总参数和520亿激活参数。可商用。
评测数据看效果不错。