腾讯推出389B参数开源大模型Hunyuan-Large

腾讯宣布推出开源MoE大语言模型Hunyuan-Large，参数规模达389B，支持处理256K文本序列，大幅提升长文本处理能力。该模型在CMMLU、MMLU等多学科评测集上表现优异，超越Llama3.1和Mixtral等一流模型。此外，腾讯还将推出自研长文评测集“企鹅卷轴”，填补行业空白。
来源：https://tech.ifeng.com/c/8eGYAa6oUme