qwen2_5_14b_base

torchtune.models.qwen2_5.qwen2_5_14b_base() → TransformerDecoder

用于创建 Qwen2.5 base 模型的构建器，该模型使用 https://hugging-face.cn/Qwen/Qwen2.5-14B 中的默认 14B 参数值进行初始化

返回:

Qwen2.5 14B 模型的实例

返回类型:

TransformerDecoder

注意

除了 0.5B 和 3B 之外，所有 Qwen2.5 模型尺寸的 base 版本和 instruct 版本架构略有不同。请确保为权重选择正确的模型构建器。