05 | Qwen 系列 ¶

阿里通义千问大语言模型系列。

Qwen Technical Report¶

Qwen Technical Report — Alibaba, 2023

Qwen2¶

Qwen2 Technical Report — Alibaba, 2024

核心贡献 ¶

• 覆盖 0.5B 到 72B 多个规模，支持 30+ 语言
• GQA、SwiGLU、RoPE 等现代架构组件
• Qwen2.5 在数学和代码基准上表现突出