通义千问发布Qwen2.0：五个尺寸的预训练和指令微调模型

通义千问（Qwen）近日宣布对其系列进行了重大升级，包括Qwen2.0。这些升级已经在Hugging Face和ModelScope上得到了同步开放。以下是Qwen2.0的主要内容：五个尺寸的预训练和指令微调模型，包括Qwen2-0.5B、Qwen2-1.5B、Qwen2-7B、Qwen2-57B-A14B以及Qwen2-72B。在中文英语的基础上，训练数据中增加了27种语言相关的高质量数据。多个评测基准上的领先表现代码和数学能力显著提升。此外，上下文长度支持最高达到128K tokens（Qwen2-72B-Instruct）。Qwen2系列包含5个尺寸的预训练和指令微调模型，其中包括Qwen2-0.5B、 Qwen 3