qwen2_5_32b_base¶
- torchtune.models.qwen2_5.qwen2_5_32b_base() TransformerDecoder [源代码]¶
用于创建 Qwen2.5 基础模型的构建器,使用来自 https://hugging-face.cn/Qwen/Qwen2.5-32B 的默认 32B 参数值初始化
- 返回:
Qwen2.5 32B 模型的实例化
- 返回类型:
注意
除了 0.5B 和 3B,所有 Qwen2.5 模型大小的基础版本和指令版本的架构略有不同。请确保为权重选择正确的模型构建器。