创建qwen2-j9九游会登录

问题现象

创建lora调优任务，选择支持modellink框架类型的模型qwen2-0.5b，数据集选择moss格式的jsonl数据，添加超参设置，创建调优任务失败。

关键日志报错：

attributeerror: 'parameter' object has no attribute 'main_grad'

原因分析

qwen2-0.5b或qwen2-1.5b模型不支持也不建议pp切分。

问题影响

训练无法进行。

处理方法

对于qwen2-0.5b或qwen2-1.5b模型，lora微调时不支持pp切分。请将切分策略pp设置为1。