大模型实操 | LoRA、QLoRA微调大模型实战技巧分享，含常见QA解答！

QA-4 LoRA是否要在所有层启用？ 目前，只对启用查询和权重矩阵的LoRA，以及启用所有层的LoRA，这两种设置进行了探索。在更多层的组合中使用LoRA会产生何种效果，值得深入研究。