AI Rookies

LoRA — 低秩适配

事实

一种只训练少量新增参数的微调方法。

人话

LoRA 像给手机换个轻薄壳加插件:主板不用大修,花小钱小内存,也能立刻多出新本事。

常用于低成本微调,适合行业定制和本地部署。

相关概念

Fine-tuning
LoRA 是微调里常见的轻量方案,主打少改参数。

Parameter
它通常冻结原参数,只训练额外加入的小部分参数。

Quantization
LoRA 常和量化一起用,进一步压低显存和成本。

Local-LLM
它让本地模型定制更现实,不必动辄全量重训。