qwen2_5_1_5b_instruct¶
- torchtune.models.qwen2_5.qwen2_5_1_5b_instruct() TransformerDecoder[source]¶
用于创建Qwen2.5指令模型的构建器,使用默认的1.5B参数值初始化 来自 https://huggingface.co/Qwen/Qwen2.5-1.5B-Instruct
- Returns:
Qwen2.5 1.5B 指令模型的实例化
- Return type:
注意
除了0.5B和3B之外,所有Qwen2.5模型大小的基础版本和指导版本在架构上略有不同。请确保为权重选择正确的模型构建器。
注意
Qwen2.5 0.5B-3B 模型构建器将默认启用
tie_word_embeddings(参见qwen2())