什么是LoRA
LoRA(Low-Rank Adaptation)是一种高效的大模型微调技术,只需要训练很少的参数就能让模型学习新能力。
工作原理
不改变原始模型参数,而是在旁边加一个小的适配器,只训练这个适配器。训练参数量通常只有原模型的0.1%。
应用场景
风格迁移:让SD生成特定画风 | 角色训练:生成固定角色 | 领域适配:让通用模型精通特定领域
工具推荐
kohya_ss:最流行的LoRA训练工具 | unsloth:训练速度提升2-5倍
© 版权声明
本站文章版权归AI导航网所有,未经允许禁止任何形式的转载。
