Shortcuts

qwen2_5_7b_base

torchtune.models.qwen2_5.qwen2_5_7b_base() TransformerDecoder[source]

用于创建Qwen2.5基础模型的构建器,使用默认的7B参数值进行初始化 来自https://huggingface.co/Qwen/Qwen2.5-7B

Returns:

Qwen2.5 7B模型的实例化

Return type:

TransformerDecoder

注意

除了0.5B和3B之外,所有Qwen2.5模型大小的基础版本和指导版本在架构上略有不同。请确保为权重选择正确的模型构建器。